Оптимизация производительности Lucene

Question

Каковы различные способы оптимизации производительности Lucene?

Должен ли я использовать API кеширования для хранения моего поискового запроса lucene, чтобы я сохранил накладные расходы на создание запроса еще раз?

Answer 1

Вы смотрели на

Lucene Optimization Tip: Reuse Searcher

Advanced Text Indexing with Lucene

Should an index be optimised after incremental indexes in Lucene?

Answer 2

Чит. Используйте RAMDirectory, чтобы загрузить весь индекс в плунжер. Впоследствии все быстро вспыхивает. :)

Answer 3

Я нашел, что лучший ответ на вопрос о производительности - это профайл. Рекомендации велики, но есть так много переменных, которые могут повлиять на производительность, например размер вашего набора данных, типы запросов, которые вы делаете, типы данных и т. Д.

Получить Netbeans profiler или что-то подобное и попробовать его разными способами , Используйте статьи, связанные с Митчем, но убедитесь, что вы действительно проверяете, что помогает, и что (часто на удивление) болит.

Существует также хорошая вероятность того, что любые различия в производительности, которые вы можете получить от Lucene, будут незначительными по сравнению с улучшением производительности в ваш код. Профилер также укажет на это.

Answer 4

Быстрые советы:

• сохранить размер индекса небольшой. Устранить нормы, векторы сроков, когда они не нужны. Установите флаг «Сохранить» для поля, только если это необходимо.
• Очевидная, но часто повторяющаяся ошибка. Создайте только один экземпляр Searcher и повторного использования.
• Хранить в индексе на быстрых дисках. RAM, если вы параноик.

Answer 5

Много мертвых ссылок здесь.

Эти (несколько официальных) ресурсы, где я хотел бы начать:

http://wiki.apache.org/lucene-java/ImproveIndexingSpeed

http://wiki.apache.org/lucene-java/ImproveSearchingSpeed

Answer 6

Для 64 битных машин используют MMapDirectory вместо RAMDirectory как очень хорошо объяснил here одним из ядра Lucene коммиттеры.