Отметить все как прочитанные

Question

У меня есть немного блокировки мозга на этом.

TLDR; Как эффективно реализовать «метку как прочитанную» для миллионов элементов?

У меня есть случай маркировки всех статей, прочитанных. Десятки тысяч. Решение, которое у меня теперь работает, отлично подходит для небольшого количества статей, но оно очень и очень медленно с большими числами. Это потому, что для каждой прочитанной статьи я заполняю одну таблицу новой строкой. Не имеет значения, сделаю ли я 100 000 вставок в одной транзакции, или я вставляю в select (bla bla bla), это все еще занимает много времени. Мне было интересно переключиться на массивы postgresql, но я не уверен, как это будет работать сотнями тысяч предметов.

Любые предложения, какой будет лучший подход здесь?

У меня есть 3 таблицы:

articles 
- id 
- title 

users 
- id 
- name 

и таблица с отображением какой статьи данного пользователя прочитали.

read_articles 
- article_id - foreign key 
- user_id - foreign key 

Answer 1

Почему вы не удалить внешние ключи из read_article таблицы и создать уникальный индекс на обоих столбцах. Это должно ускорить поиск и вставить запросы. Чтобы проверить, прочитана ли статья, вы можете использовать подзапрос в основном запросе и при вставке строки в таблицу вы можете использовать оператор upsert.

Я думаю, что это пустая трата времени и процессора, чтобы связать статьи и идентификатор пользователя с внешними ключами, так как да, вам нужна согласованность, но это не так важно.

Answer 2

insert into read_articles 
     (article_id, user_id) 
select id 
,  42 -- User id here 
from article 

Answer 3

insert into read_articles (article_id, user_id) 
select a.id, u.id 
from articles a cross join users u