Большой Excel Файл - Загрузить и импорта - Java

Question

все

Я хочу, чтобы загрузить и импортировать большие файлы первенствовать, имеющие более одного миллиона записей в моей программе Java.

можно легко импортировать небольшие файлы с помощью Apache POI в моей системе, но когда я начала с большими файлами, приложение выдает и из памяти ошибки,

я искал Google и нашел много потоков на это, я попытался все, но не могло обойти это.

кто-нибудь может дать мне решение для моей конкретной проблемы, время импорта не является проблемой для меня, сейчас же я могу с вопросом производительности, а также,

просто хотите импортировать эти данные в свой существующий система без ошибки oem.

У меня очень хорошая конфигурация в моей системе, и у java достаточно памяти для использования, поэтому аппаратное обеспечение не является проблемой.

Благодаря

Answer 1

Вы хотите, чтобы поток данных, так что вам не нужно хранить все записи в памяти сразу. POI поддерживает потоковое вещание (см. XSSF and SAX event API). Когда вы читаете данные, отправляйте их туда, где вам нужно (база данных или где бы вы не указали) - с помощью потокового API вы не должны считывать все данные в памяти перед его обработкой.

Вы также можете экспортировать данные в файл CSV, а затем использовать обычный FileInputStream для чтения файла и обработки каждой записи по мере ее чтения.