[Excel] 대용량 Excel 파일 읽기

출처 javavoa-mok.tistory.com/58

대용량 엑셀 업로드 소스를 찾던 중 아래의 소스가 가장 좋았습니다.

다만 읽기용으로만 사용해야 합니다. 소스자체가 읽는 예제 밖에 없지만.. 읽는 속도만 빠릅니다.

Excel 타입이라든지, 폰트 등의 속성은 무시합니다. ( 전부 String 문자열로 읽히는 듯 합니다. )

import java.io.File;
import java.io.InputStream;
import java.util.ArrayList;
import java.util.List;

import org.apache.poi.ooxml.util.SAXHelper;
import org.apache.poi.openxml4j.opc.OPCPackage;
import org.apache.poi.ss.util.CellReference;
import org.apache.poi.xssf.binary.XSSFBSheetHandler.SheetContentsHandler;
import org.apache.poi.xssf.eventusermodel.ReadOnlySharedStringsTable;
import org.apache.poi.xssf.eventusermodel.XSSFReader;
import org.apache.poi.xssf.eventusermodel.XSSFSheetXMLHandler;
import org.apache.poi.xssf.model.StylesTable;
import org.apache.poi.xssf.usermodel.XSSFComment;
import org.xml.sax.ContentHandler;
import org.xml.sax.InputSource;
import org.xml.sax.XMLReader;

/**
 * <pre>
 * 출처 : https://javavoa-mok.tistory.com/58
 * </pre>
 * 
 * @author hermeswing
 */
public class ExcelSheetHandler implements SheetContentsHandler {
    
    private int                currentCol = -1;
    private int                currRowNum = 0;
    
    String                     filePath   = "";
    
    private List<List<String>> rows       = new ArrayList<List<String>>();    //실제 엑셀을 파싱해서 담아지는 데이터
    private List<String>       row        = new ArrayList<String>();
    private List<String>       header     = new ArrayList<String>();
    
    public static ExcelSheetHandler readExcel( File file ) throws Exception {
        
        ExcelSheetHandler sheetHandler = new ExcelSheetHandler();
        try {
            
            //org.apache.poi.openxml4j.opc.OPCPackage
            OPCPackage                 opc         = OPCPackage.open( file );
            
            //org.apache.poi.xssf.eventusermodel.XSSFReader
            XSSFReader                 xssfReader  = new XSSFReader( opc );
            
            //org.apache.poi.xssf.model.StylesTable
            StylesTable                styles      = xssfReader.getStylesTable();
            
            //org.apache.poi.xssf.eventusermodel.ReadOnlySharedStringsTable
            ReadOnlySharedStringsTable strings     = new ReadOnlySharedStringsTable( opc );
            
            //엑셀의 시트를 하나만 가져오기입니다.
            //여러개일경우 while문으로 추출하셔야 됩니다.
            InputStream                inputStream = xssfReader.getSheetsData().next();
            
            //org.xml.sax.InputSource
            InputSource                inputSource = new InputSource( inputStream );
            
            //org.xml.sax.Contenthandler
            ContentHandler             handle      = new XSSFSheetXMLHandler( styles, strings, sheetHandler, false );
            
            XMLReader                  xmlReader   = SAXHelper.newXMLReader();
            xmlReader.setContentHandler( handle );
            
            xmlReader.parse( inputSource );
            inputStream.close();
            opc.close();
            
        } catch ( Exception e ) {
            //에러 발생했을때 하시고 싶은 TO-DO 
        }
        
        return sheetHandler;
        
    }//readExcel - end
    
    public List<List<String>> getRows() {
        return rows;
    }
    
    @Override
    public void startRow( int arg0 ) {
        this.currentCol = -1;
        this.currRowNum = arg0;
    }
    
    @Override
    public void cell( String columnName, String value, XSSFComment var3 ) {
        int iCol     = ( new CellReference( columnName ) ).getCol();
        int emptyCol = iCol - currentCol - 1;
        
        for ( int i = 0; i < emptyCol; i++ ) {
            row.add( "" );
        }
        currentCol = iCol;
        row.add( value );
    }
    
    @Override
    public void headerFooter( String arg0, boolean arg1, String arg2 ) {
        //사용안합니다.
    }
    
    @Override
    public void endRow( int rowNum ) {
        if ( rowNum == 0 ) {
            header = new ArrayList( row );
        } else {
            if ( row.size() < header.size() ) {
                for ( int i = row.size(); i < header.size(); i++ ) {
                    row.add( "" );
                }
            }
            rows.add( new ArrayList( row ) );
        }
        row.clear();
    }
    
    @Override
    public void hyperlinkCell( String arg0, String arg1, String arg2, String arg3, XSSFComment arg4 ) {
        // TODO Auto-generated method stub
        
    }
}

import java.io.File;
import java.util.List;

/**
 * <pre>
 * 출처 : https://javavoa-mok.tistory.com/58
 * </pre>
 * 
 * @author hermeswing
 */
public class Test {
    
    public static void main( String[] args ) throws Exception {
        //해당 파일은 업로드파일
        String             filePath          = "c:/TestExcel.xlsx";
        File               file              = new File( filePath );
        
        long start = System.currentTimeMillis(); //시작하는 시점 계산

        ExcelSheetHandler  excelSheetHandler = ExcelSheetHandler.readExcel( file );
        List<List<String>> excelDatas        = excelSheetHandler.getRows();
        
        for ( List<String> dataRow : excelDatas ) {
            System.out.println(dataRow);
        }

        long end = System.currentTimeMillis(); //프로그램이 끝나는 시점 계산

        System.out.println( "실행 시간 : " + ( end - start ) / 1000.0 + "초" ); //실행 시간 계산 및 출력

    }
}