Что такое максимальный размер файла, который может обрабатывать JVM?

Question

Я хотел знать максимальный размер файла , который может быть прочитан кодом Java?

Я хотел обрабатывать размер файла 100mb. Это возможно?

Если возможно, что такое начальные настройки JVM , что я должен сделать?

Пожалуйста, порекомендуйте некоторые рекомендации по обращению с файлом. как использование ObjectInputStream, FilterInputStream и т.д .. использование байтовый массив для хранения содержимого файлов и т.д.

Answer 1

Какое самое большое число, которое вы можете написать? Это максимальный размер.

Общий размер файла неуместен если вы прочитали его в кусках; в мире нет правила, утверждающего, что вы должны читать в своем 100-мегабайтном файле за один раз, вы можете прочитать его, скажем, в 10 мегабайтах.Что действительно важно, так это то, как вы используете эти входящие данные и нужно ли полностью хранить продукт необработанных данных (например, , если данные являются 3D-моделью здания, как вам нужно внутренне представлять ее) или только соответствующие части (, такие как поиск первых десяти совпадений с некоторым предложением из огромного текстового файла).

Поскольку существует множество возможных способов обработки данных, на ваш вопрос нет вскрывающего одеяла.

Answer 2

Существует не максимальный размер файла, который можно прочитать теоретически, но я думаю, что это потому, что вы Integer.MAX_VALUEне может инициализировать размер CharBuffer в больше, чем Integer.MAX_VALUE

char[] buffer = new char[/* int size */]; 
char[] buffer = new char[Integer.MAX_VALUE]; // maximum char buffer 

BufferedReader b = new BufferedReader(new FileReader(new File("filename"))); 
b.read(buffer); 

Answer 3

Там нет конкретного максимального размера файла поддерживается Java, все это зависит от того, каких ОС вы работаете на. 100 мегабайт не будет проблемой, даже в 32-разрядной ОС.

Вы не сказали, хотите ли вы сразу загрузить файл в память. Вы можете обнаружить, что вам нужно обрабатывать только часть файла за раз. Например, текстовый файл может обрабатывать строку за раз, поэтому нет необходимости загружать весь файл. Просто читайте строку за раз и обрабатывайте каждый.

Если вы хотите прочитать весь файл в один блок памяти, вам может потребоваться изменить размер кучи по умолчанию для вашей JVM. У многих JVM есть значение по умолчанию 128 МБ, чего, вероятно, недостаточно, чтобы загрузить весь ваш файл и по-прежнему иметь достаточно места для других полезных вещей. Проверьте документацию для вашей JVM, чтобы узнать, как увеличить распределение размеров кучи.

Answer 4

Единственный максимум, о котором я знаю, - это максимальная длина сообщения(), которая является длинной. Эта длина 2^62 - 1, или очень большая.

Java не будет хранить весь файл в памяти за один раз. Если вы хотите сохранить часть файла в памяти, вы должны использовать один из классов «Буферизованный» (имя класса начинается с Buffered). Эти классы буферизуют часть файла для вас, исходя из установленного вами размера буфера.

Точные классы, которые вы должны использовать, зависят от данных в файле. Если вы более конкретны, мы можем помочь вам выяснить, какие классы использовать.

(Один смиренный примечание: Серьезно, 100mb Это очень мало.)

Answer 5

Пока у вас есть более 100 МБ свободного места, вы можете сразу загрузить весь файл в память, хотя вам, вероятно, и не понадобится.

КСТАТИ: В перспективе, что буквы означают

M = Mega or 1 million for disk or 1024^2 for memory. 
B = Bytes (8-bits) 
b = bit e.g. 100 Mb/s 
m = milli e.g. mS - milli-seconds. 

100 милли-бит имеет смысл только для сжатых данных, но я предположил, что это не то, что вы говорите.