Neo4j создание отношений с использованием csv

Question

Я пытаюсь создать отношения между двумя типами узлов, используя загруженный файл csv. Я уже создал все узлы Кино и Ключевые слова. Я также создал индексы на: Movie (название) и: Ключевое слово (слово).

Мой файл CSV выглядит следующим образом:

"название" | год | "слово" // заголовочный

"В диких условиях" | 2007 | "1990-х годов" // строка с заголовком, год и ключевое слово

"в диких условиях" | 2007 | "отказались от шины"

Мой запрос:

LOAD CSV WITH HEADERS FROM "file:/home/gondil/temp.csv" AS csv 
FIELDTERMINATOR '|' 
MATCH (m:Movie {title:csv.title,year: toInt(csv.year)}), (k:Keyword {word:csv.word}) 
MERGE (m)-[:Has {weight:1}]->(k); 

Query работает около часа и показывает ошибку «Неизвестная ошибка». Какое избыточное описание ошибки.

Я думал, что это из-за 160K ключевых слов и более 1M фильмов и более 4M линий в csv. Итак, я сокращаю csv до одной строки, и он все еще работает около 15 минут без остановки.

В чем проблема? Как написать запрос для создания отношений между 2 уже созданными узлами?

Я также могу удалить все узлы и построить свою базу данных другим способом, но лучше не удалять все созданные узлы.

Примечание: У меня не должно быть проблем с оборудованием, потому что я использую Super PC с нашего факультета.

Answer 1

Обязательно иметь указатели схемы, чтобы ускорить поиск начальных узлов. Перед запуском импорта сделать:

CREATE INDEX ON :Movie(title) 
CREATE INDEX ON :Keyword(word) 

Убедитесь, что показатели заполняются и онлайн (проверьте :schema команды).

реорганизовать Cypher команду на два запроса, чтобы использовать индексы - на данный момент индекс состоит только из метки и один свойство:

USING PERIODIC COMMIT 
LOAD CSV WITH HEADERS FROM "file:/home/gondil/temp.csv" AS csv 
FIELDTERMINATOR '|' 
MERGE (m:Movie {title:csv.title }) 
ON CREATE SET m.year = toInt(csv.year) 
MERGE (k:Keyword {word:csv.word}) 

второй проход над файлом

USING PERIODIC COMMIT 
LOAD CSV WITH HEADERS FROM "file:/home/gondil/temp.csv" AS csv 
FIELDTERMINATOR '|' 
MATCH (m:Movie {title:csv.title }) 
MATCH (k:Keyword {word:csv.word}) 
MERGE (m)-[:Has {weight:1}]->(k);