Lucene не может найти документы после обновления

Question

Кажется, что всякий раз, когда я обновляю существующий документ в индексе (такое же поведение для delete/add), его нельзя найти с помощью TermQuery. Вот короткий фрагмент:

iw = new IndexWriter (directory, config);

Document doc = new Document(); 
doc.add(new StringField("string", "a", Store.YES)); 
doc.add(new IntField("int", 1, Store.YES)); 

iw.addDocument(doc); 

Query query = new TermQuery(new Term("string","a")); 

Document[] hits = search(query); 
doc = hits[0]; 
print(doc); 

doc.removeField("int"); 
doc.add(new IntField("int", 2, Store.YES)); 

iw.updateDocument(new Term("string","a"), doc); 

hits = search(query); 
System.out.println(hits.length); 
System.out.println("_________________"); 

for(Document hit : search(new MatchAllDocsQuery())){ 
    print(hit); 
} 

Это производит следующий вывод на консоль:

stored,indexed,tokenized,omitNorms,indexOptions=DOCS_ONLY<string:a> 
stored<int:1> 
________________ 
0 
_________________ 
stored,indexed,tokenized,omitNorms,indexOptions=DOCS_ONLY<string:a> 
stored<int:2> 
________________ 

Похоже, что после обновления, документ (а новый документ) в индексе и получает возвращаемый MatchAllDocsQuery, но не может можно найти в TermQuery.

Полный пример кода доступен на http://pastebin.com/sP2Vav9v

Кроме того, это происходит только (второй поиск не работает), если значение Стрингфилд содержит специальные символы (например, файл:/F: /).

Answer 1

Код, на который вы ссылаетесь в pastebin, не находит ничего, потому что ваш StringField - не что иное, как секундомер (a). Замена a с чем-то, что не является секундомером (например, ax), приводит к тому, что оба запроса возвращают 1 документ.

Вы также добиться правильного результата, если вы должны были построить StandardAnalyzer с пустым множеством (CharArraySet.EMPTY_SET стоп-слов) еще до сих пор используют a для StringField. Однако это не сработало бы для file:/F:/.

Тем не менее, лучшим решением является в этом случае заменить StandardAnalyzer на KeywordAnalyzer.

Answer 2

Я мог бы избавиться от этого путем воссоздания моего рабочего каталога после всех операций индексирования: создать новый каталог только для этих операций индексирования с именем «path_dir», например. Если вы обновили, выполните следующие операции и повторите все предыдущие работы.

StandardAnalyzer analyzer = new StandardAnalyzer(Version.LUCENE_46); 
FSDirectory dir; 
try { 
    // delete indexing files : 
    dir = FSDirectory.open(new File(path_dir)); 
    IndexWriterConfig config = new IndexWriterConfig(Version.LUCENE_46, analyzer); 
    IndexWriter writer = new IndexWriter(dir, config); 
    writer.deleteAll(); 
    writer.close(); 
    } catch (IOException e) { 
     e.printStackTrace(); 
    } 

Однако обратите внимание, что этот способ будет очень медленным, если вы обрабатываете большие данные.