таймсерий в Кассандре

Question

Я пытаюсь хранить & извлекать данные в Кассандре следующим образом:

Хранение данных: Я создал таблицу следующим образом:

CREATE TABLE mydata (
    myKey TEXT, 
    datetime TIMESTAMP, 
    value TEXT, 
    PRIMARY KEY (myKey,datetime) 
); 

Где я бы сохранил ценность за каждую минуту за последние 5 лет. Таким образом, он хранит 1440 * 365 * 5 = 2628000 записей/столбцов на строку (myKey как строка).

INSERT INTO mydata(myKey, datetime, value) VALUES ('1234ABCD','2013-04-03 07:01:00','72F'); 
INSERT INTO mydata(myKey, datetime, value) VALUES ('1234ABCD','2013-04-03 07:02:00','72F'); 
INSERT INTO mydata(myKey, datetime, value) VALUES ('1234ABCD','2013-04-03 07:03:00','72F'); 

.................

Я могу хранить данные и все отлично. Тем не менее, я хотел бы знать, если это эффективный способ делать (хранить) данные по горизонтали (2628000 значений для каждого ключа для 1 миллиона таких ключей вообще)?

Получение данных:

После сохранения данных в формате выше, я могу выбрать данные с помощью простого запроса на выборку в течение периода. Ex:

SELECT * 
FROM mydata 
WHERE myKey='1234ABCD' AND datetime > '2013-04-03 07:01:00' AND datetime < '2013-04-03 07:04:00'; 

Запрос работает отлично, и я получаю результат, как и ожидалось.

Однако мой вопрос:

1. Как я могу выбрать только те значения, в определенные промежутки времени. Например, если я запрашиваю данные за день, я получаю 1440 значений (1 за каждую минуту). Я хотел бы получать значения каждые 10 минут (значение на каждых 10-й минуте), ограничивая число. от значений до 144.
2. Есть ли способ запросить таблицу, если мы используем вышеупомянутую стратегию хранения?
3. Если нет, то каковы возможные варианты удовлетворения моих требований по запросам данных с определенным интервалом, например, 1 минута, 10 минут, 1 час, 1 день и т. Д.?

Оцените любые другие предложения.

Answer 1

Нет, это не так, в будущем вы столкнетесь с проблемой, потому что в строке строки мы можем хранить только 2 миллиарда записей или столбцов. После этого он не даст ошибку, но также сохранит данные. Для вашей задачи отметьте временную метку столбца в год, месяц, день и время. , как 2016, 04, 04 и 15:03:00. Также введите год, месяц, день в раздел.

Answer 2

Вам определенно необходимо связать свой раздел с модульной версией метки времени. Но гранулярность действительно зависит от ваших чтений.

Если вы в основном будете читать в день, то использовать что-то вроде этого PK ((MYKEY, ггггммдд), время)

Если в основном недели PK ((MyKey, yyyyww), время), или месяц. ..

Проблема заключается в том, что если вы хотите читать значения в течение целого года, то вам лучше иметь раздел в неделю или месяц, или даже год будет я думаю, если вы не делаете никаких удалений, ваш раздел размер должен быть меньше 100 МБ