Prestazioni POI

Question

Sto utilizzando POI nella mia applicazione web J2EE per generare una cartella di lavoro. Tuttavia, trovo che il POI impiega circa 3 minuti per creare una cartella di lavoro con 25K righe (con circa 15 colonne ciascuna). Si tratta di un problema di prestazioni POI o è giustificato impiegare così tanto tempo? Esistono altre API note per prestazioni migliori?

Answer 1

Sarei molto sorpreso di vedere POI prendere così tanto tempo per generare un tale file. Ho appena generato un foglio con 30000 righe x 10 celle in circa 18 secondi (nessuna formattazione, per essere onesti). La causa potrebbe essere una delle seguenti:

• registrazione POI sia acceso, come descritto here
• si esegue a memoria di swap
• vostro VM disponibili mucchio potrebbe essere molto bassa

Answer 2

Usiamo anche POI nella nostra app Web e non abbiamo alcun problema di prestazioni con esso - anche se i nostri documenti generati sono molto più piccoli dei tuoi. Vorrei innanzitutto verificare se il POI è il vero problema qui. Prova a generare quei documenti senza l'overhead J2EE (Unit-Test) e misurare le prestazioni. È anche possibile monitorare il carico e l'utilizzo della memoria sul server J2EE per verificare se i problemi derivano da alcune impostazioni di sistema non ottimali.

Answer 3

Se nessuna delle altre risposte funziona, verifica se JExcel di Andy Khan sarà migliore. Ho trovato che è di gran lunga superiore a POI per trattare con Excel in Java.

Answer 4

Ho confrontato Apache POI con la libreria JExcel. Sembra che JExcel sta fino a 4 volte più veloce di Apache POI, ma il consumo di memoria sembra essere più o meno lo stesso:

@Test 
public void createJExcelWorkbook() throws Exception { 
     WritableWorkbook workbook = Workbook.createWorkbook(new File("jexcel_workbook.xls")); 
     WritableSheet sheet = workbook.createSheet("sheet", 0); 
     for (int i=0; i < 65535; i++) { 
      for (int j=0; j < 10; j++) { 
       Label label = new Label(j, i, "some text " + i + " " + j); 
       sheet.addCell(label); 
      } 
     } 
     workbook.write(); 
     workbook.close(); 
} 

@Test 
public void createPoiWorkbook() throws Exception { 
    Workbook wb = new HSSFWorkbook(); 
    Sheet sheet = wb.createSheet("sheet"); 
    for (int i=0; i < 65535; i++) { 
     Row row = sheet.createRow(i); 
     for (int j=0; j < 10; j++) { 
      Cell cell = row.createCell(j); 
      cell.setCellValue("some text " + i + " " + j); 
     } 
    } 
    FileOutputStream fileOut = new FileOutputStream("poi_workbook.xls"); 
    wb.write(fileOut); 
    fileOut.close(); 
} 

ho provato con JExcel versione 2.6.12 e Apache POI versione 3.7. È necessario scaricare da solo le ultime versioni della libreria ed eseguire i test semplici sopra per ottenere numeri più precisi.

<dependency org="org.apache.poi" name="poi" rev="3.7"/> 
<dependency org="net.sourceforge.jexcelapi" name="jxl" rev="2.6.12"/> 

Nota: c'è un limite in Apache POI di 65535 righe per foglio.

Answer 5

Le prestazioni di scrittura di file di grandi dimensioni con POI possono essere fortemente ridotte se si utilizza l'API di POI "streaming" anziché quella standard. Infatti, di default POI manterrà tutti i tuoi dati in memoria prima di scrivere tutto in un colpo solo alla fine. L'impronta di memoria di questo può essere ridicolmente grande per i file di grandi dimensioni. Invece utilizzando l'API di streaming è possibile controllare come viene utilizzata la memoria e i dati vengono scritti su disco progressivamente.

Al fine di creare una cartella di lavoro in streaming, usare qualcosa come:

SXSSFWorkbook book = new SXSSFWorkbook(); 
    book.setCompressTempFiles(true); 

    SXSSFSheet sheet = (SXSSFSheet) book.createSheet(); 
    sheet.setRandomAccessWindowSize(100);// keep 100 rows in memory, exceeding rows will be flushed to disk 
    // ...