Хранение огромных данных; База данных, XML или Обычный текст?

Question

Я хочу помочь моему другу проанализировать записи в социальных сетях (Facebook, Twitter, Linkdin и т. Д.), А также несколько веб-журналов и веб-сайтов.

Когда дело доходит до Хранение данных, у меня нет опыта в огромных данных. Какой из них лучше всего для кучи тысяч сообщений, твитов и статей в день: база данных, XML-файл, обычный текст? Если база данных, какая?

P.S. Язык, с которым я собираюсь начать программирование, - это Python.

Answer 1

Это зависит от того, как вы хотите работать с данными. Если у вас есть структурированные данные и вы хотите обменять их между различными программами, xml может быть хорошим выбором. Если вы делаете массовую обработку, простой текст может быть хорошим выбором. Если вы хотите отфильтровать данные, база данных может быть хорошим выбором.