Почему мой эластичный поисковый запрос не возвращает текст, проанализированный английским анализатором?

Question

У меня есть индекс по имени test_blocks

{ 
    "test_blocks" : { 
    "aliases" : { }, 
    "mappings" : { 
     "block" : { 
     "dynamic" : "false", 
     "properties" : { 
      "content" : { 
      "type" : "string", 
      "fields" : { 
       "content_en" : { 
       "type" : "string", 
       "analyzer" : "english" 
       } 
      } 
      }, 
      "id" : { 
      "type" : "long" 
      }, 
      "title" : { 
      "type" : "string", 
      "fields" : { 
       "title_en" : { 
       "type" : "string", 
       "analyzer" : "english" 
       } 
      } 
      }, 
      "user_id" : { 
      "type" : "long" 
      } 
     } 
     } 
    }, 
    "settings" : { 
     "index" : { 
     "creation_date" : "1438642440687", 
     "number_of_shards" : "5", 
     "number_of_replicas" : "1", 
     "version" : { 
      "created" : "1070099" 
     }, 
     "uuid" : "45vkIigXSCyvHN6g-w5kkg" 
     } 
    }, 
    "warmers" : { } 
    } 
} 

Когда я делаю поиск для killing, слово в содержании, результаты поиска возвращают, как ожидалось.

http://localhost:9200/test_blocks/_search?q=killing&pretty=1 


{ 
    "took" : 1, 
    "timed_out" : false, 
    "_shards" : { 
    "total" : 5, 
    "successful" : 5, 
    "failed" : 0 
    }, 
    "hits" : { 
    "total" : 2, 
    "max_score" : 0.07431685, 
    "hits" : [ { 
     "_index" : "test_blocks", 
     "_type" : "block", 
     "_id" : "218", 
     "_score" : 0.07431685, 
     "_source":{"block":{"id":218,"title":"The \u003ci\u003eparticle\u003c/i\u003e streak","content":"Barry Allen is a Central City police forensic scientist\n      with a reasonably happy life, despite the childhood\n      trauma of a mysterious red and yellow being killing his\n      mother and framing his father. All that changes when a\n      massive \u003cb\u003eparticle\u003c/b\u003e accelerator accident leads to Barry\n      being struck by lightning in his lab.","user_id":82}} 
    }, { 
     "_index" : "test_blocks", 
     "_type" : "block", 
     "_id" : "219", 
     "_score" : 0.07431685, 
     "_source":{"block":{"id":219,"title":"The \u003ci\u003eparticle\u003c/i\u003e streak","content":"Barry Allen is a Central City police forensic scientist\n      with a reasonably happy life, despite the childhood\n      trauma of a mysterious red and yellow being killing his\n      mother and framing his father. All that changes when a\n      massive \u003cb\u003eparticle\u003c/b\u003e accelerator accident leads to Barry\n      being struck by lightning in his lab.","user_id":83}} 
    } ] 
    } 
} 

Однако, учитывая, что у меня есть english анализатор для содержимого поля (content_en), я бы ожидал, что это вернуть мне один и тот же документ для запроса kill. Но это не так. Я получаю 0 хитов.

http://localhost:9200/test_blocks/_search?q=kill&pretty=1 

{ 
    "took" : 1, 
    "timed_out" : false, 
    "_shards" : { 
    "total" : 5, 
    "successful" : 5, 
    "failed" : 0 
    }, 
    "hits" : { 
    "total" : 0, 
    "max_score" : null, 
    "hits" : [ ] 
    } 
} 

Мое понимание по этому анализу запроса является то, что «убийство» был бы сломалась вниз, чтобы «убить»

http://localhost:9200/_analyze?analyzer=english&text=killing 

{ 
    "tokens" : [ { 
    "token" : "kill", 
    "start_offset" : 0, 
    "end_offset" : 7, 
    "type" : "<ALPHANUM>", 
    "position" : 1 
    } ] 
} 

Так почему же не запрос «убить» сопрягать этот документ? Являются ли мои сопоставления неверными или это мой поиск неверен?

Я использую elasticsearch v1.7.0

Answer 1

Вы должны использовать fuzzysearch (несколько вводных доступны here):

curl -XPOST 'http://localhost:9200/test_blocks/_search' -d ' 
{ 
    "query": { 
    "match": { 
     "title": { 
     "query": "kill", 
     "fuzziness": 2, 
     "prefix_length": 1 
     } 
    } 
    } 
}' 

UPD. Имея content_en поле с содержанием, которое было дано по стеммеру, это имеет смысл, на самом деле это поле запроса:

curl -XPOST 'http://localhost:9200/test_blocks/_search' -d ' 
{ 
    "query": { 
    "multi_match": { 
     "type": "most_fields", 
     "query": "kill", 
     "fields": ["block.title", "block.title.title_en"] 
    } 
    } 
}' 

Answer 2

Следующие запросы http://localhost:9200/_search?q=kill., http://localhost:9200/_search?q=kill. в конечном итоге поиск через поля _all.

_all поле использует анализатор по умолчанию, который, если переопределен не случается, стандартный анализатор и не английский анализатор.

Для изготовления вышеуказанной работы запроса вам потребуется добавить английский анализатор _all поля и Переиндексирование Пример:

{ 
     "mappings": { 
     "block": { 
      "_all" : {"analyzer" : "english"} 
     } 
    } 

Также хотел бы отметить, отображение в ОП, кажется, не согласуется с структура документа. Как @EugZol отметил наше содержание находится в пределах блока объекта поэтому отображение должно быть что-то на этих линиях:

{ 
    "mappings": { 
    "block": { 
     "properties": { 
     "block": { 
      "properties": { 
      "content": { 
       "type": "string", 
       "analyzer": "standard", 
       "fields": { 
       "content_en": { 
        "type": "string", 
        "analyzer": "english" 
       } 
       } 
      }, 
      "id": { 
       "type": "long" 
      }, 
      "title": { 
       "type": "string", 
       "analyzer": "standard", 
       "fields": { 
       "title_en": { 
        "type": "string", 
        "analyzer": "english" 
       } 
       } 
      }, 
      "user_id": { 
       "type": "long" 
      } 
      } 
     } 
     } 
    } 
    } 
}