Datastax кластер хранение Amazon EC2 - Производство

Question

У меня есть кластер Datastax Enterprise производства со следующей конфигурацией:

3 Hadoop Вершина 2 Cassandra Вершина 2 Solr Вершина

• Есть несколько столов в Кассандре с несколькими миллионами линий.
• Каждую ночь я обрабатываю несколько миллионов регистров, используя PIG.
• Весь поиск, выполненный на нашем веб-сайте, использует SOLR.

В основном мы на 100% основаны на DSE.

Эта структура основана на Amazon EC2, и все экземпляры: M3.Xlarge 80 Гб SSD 15 ГБ ОЗУ 13 (4 ядра х 3,25 единицы)

Хочу добавить дополнительный 1 ТБ Жесткий диск для каждого узла и использовать его в кластере. Как я могу это сделать? Какие файлы конфигурации мне нужно изменить, когда я прикрепляю новый жесткий диск?

Answer 1

После установки нового хранилища жесткого диска в экземпляр EC2 отредактируйте файл cassandra.yaml и добавьте новое место хранения в параметр конфигурации data_file_directories. (Cassandra поддерживает несколько записей для хранения данных и будет распространять данные.)

Файл конфигурации будет зависеть от вашего метода установки: /etc/dse/cassandra/cassandra.yaml или {install_location}/resources/cassandra/conf/cassandra.yaml.

После внесения изменений в конфигурационный файл DSE необходимо будет перезапустить на каждом узле (можно выполнить скользящий перезапуск).

Ссылка: https://stackoverflow.com/a/23121664/9965