Этот код удаляет дубликаты?

Question

Я хочу использовать это, чтобы получить данные из строки из базы данных MySQL в текстовые файлы (один вход под другим, 50 записей в файл):

$ mysql --user=XXX --password=XXX --batch --skip-column-names \ 
-e "SELECT userid, displayname FROM Users" stackoverflowdb | \ 
split -l 50 -a 5 - "result." 

, но я также не хочу, чтобы скопировать дубликаты записей в эти файлы. Будет ли этот код удалять дубликаты или мне нужно что-то добавить к нему, чтобы не копировать дубликаты записей?

Answer 1

Изменение SQL использовать DISTINCT директиву

например

SELECT DISTINCT userid,displayname FROM Users 

будет гарантировать, что будут выбраны только уникальные комбинации идентификаторов пользователя и displayname.

Однако это не будет препятствовать идентификаторам пользователей, которые имеют идентичные отображаемые имена.

Answer 2

SELECT DISTINCT userid,displayname FROM Users 

.. или вне базы данных

mysql --user=XXX --password=XXX --batch --skip-column-names \ 
-e "SELECT userid, displayname FROM Users" stackoverflowdb | \ 
sort -u | \ 
split -l 50 -a 5 - "result."