Mongoose ускоряет поиск по нескольким полям

Question

Я работаю над функцией поиска поверх документов мангуста, где мне приходится искать более 250 000 документов. В этой функции я должен добавить индексы поиска по нескольким полям. В документах некоторые из полей являются строковыми типами, Некоторые из них являются объектами с несколькими уровнями. Я проиндексировал все возможные поля.

На местном уровне у меня есть 100 000 документов, и когда я просматриваю их, это заняло около 300-400 мс. Но когда я просматриваю их на сервере, на это потребовалось около 10-15 секунд.

Поисковый запрос является условным, но я использую небольшой фрагмент кода.

$and(

{ 
    $or:[ 
     {'field1': {$regex: re }}, 
     {'field2': {$regex: re }}, 
     {'level1.level2.value': {$regex: re }} 
    ] 
}, 
{ 
    $and:[ 
     { 
      lowAge: {$lte: parseInt(age)} 
     }, 
     { 
      highAge: {$gte: parseInt(age)} 
     }, 
     { 
      $or:[ 
       { 
        gender:gender 
       }, 
       { 
        gender:"N/A" 
       } 
      ] 
     } 
    ] 
} 
) 

Может кто-нибудь посоветует мне, как я могу ускорить процесс на сервере.

Answer 1

Чтобы увеличить скорость, вы можете использовать индекс текста.

Но индекс текст поставляется со следующими требованиями хранения и производительность Затраты

• Текстовые индексы могут быть большими. Они содержат одну запись индекса для каждого уникального слова post-stemmed в каждом индексированном поле для каждого вставленного документа.
• Построение текстового индекса очень похоже на создание большого индекса с несколькими ключами и займет больше времени, чем построение простого упорядоченного (скалярного) индекса на одни и те же данные. При создании большого текстового индекса в существующей коллекции убедитесь, что у вас достаточно высокий предел для дескрипторов открытых файлов. См. Рекомендуемые настройки.
• Текстовые индексы будут влиять на пропускную способность вставки, поскольку MongoDB должен добавлять индексную запись для каждого уникального слова post-stemmed в каждом индексированном поле каждого нового исходного документа.
• Кроме того, текстовые индексы не содержат фраз или информации о близости слов в документах. В результате фразовые запросы будут выполняться намного эффективнее, если вся коллекция будет помещена в ОЗУ.

Пожалуйста, смотрите ссылки ниже

https://docs.mongodb.com/manual/core/index-text/

https://www.tutorialspoint.com/mongodb/mongodb_text_search.htm

Надеются, что это помогает!