У меня есть файл, содержащий около 10 миллионов строк и размер около 400 Мб, моя система просто не в состоянии справиться с этим. когда я пытаюсь открыть файл с помощью gedit, он просто застревает. Есть ли способ обработки таких больших файлов данных.Как обрабатывать большие текстовые файлы?
Разделите их, используя утилиту gnu (cygwin on Windows), хвост или вырезать утилиты. Затем выполните работу над файлами.
хорошо этот файл создается из инструмента, где я могу проверить производительность db. это в основном файл csv. есть ли способ, которым я могу разделить, в зависимости от того, сколько строк я не хочу. – Rahul
Отличная утилита для Windows, является Large Text Viewer
Я был в состоянии открыть файл размером более 4Гб.
хорошо я работа почти все в ubuntu. Благодарю . но сам вим сделал аккуратную работу. – Rahul
Хорошо, скажите, что в вашем вопросе. – RyanfaeScotland
Полностью рекомендуется в Windows – luchosrock
Удобная веб-служба, которая может обрабатывать большой файл, - это инструмент Google Refine Tool.
Вы можете найти https://code.google.com/p/google-refine/wiki/FaqAllocateMoreMemory [детали для выделения памяти]
OP упоминает 'gedit', поэтому они просто хотят посмотреть содержимое текстового файла, а не преобразовывать его. – Raedwald
Handle как? Что ты хочешь делать? –
Предполагая, что вы не хотите писать программу для этого, это может помочь: http://stackoverflow.com/questions/159521/text-editor-to-open-big-giant-huge-large-text- files Это принадлежит суперпользователю? – weiqure
Для всех, кто не знает, 1 crore = 10,000,000 –