GROUP EACH BY limit

Question

У меня огромный стол с 20,235,447,221 рядами с тактовой частотой 1,32 ТБ. Мне нужно найти уникальные строки и подсчитать их, поэтому я использую GROUP EACH BY для этого.

Однако, я получаю ошибку: ресурсы превышены во время ошибки выполнения запроса.

Есть ли способ выполнить таблицу без исчерпания ресурсов? Если нет, как мне найти потолок количества строк, которые может иметь таблица для этого?

спасибо.

Answer 1

Если статистическая аппроксимация, а не точный результат, вам полезна, COUNT (DISTINCT ...) является опцией. https://cloud.google.com/bigquery/query-reference#aggfunctions

Что представляет собой текст группы GROUP EACH BY, который вы используете?