Операции с базами данных без использования базы данных

Question

Мне предоставили несколько файлов TSV, содержащих данные, всего около 800 МБ в нескольких файлах. Каждый из них имеет столбцы, которые соединяются со столбцами в другом файле.

Я до сих пор импортировал все свои данные в Python и сохранил его в массиве. Теперь мне нужно найти способ создания базы данных из этих данных без использования каких-либо SQL, NoSQL и т. Д.

В конце я буду выполнять SQL-подобные запросы (без SQL) и выполнять операции OLAP на данные. Я также НЕ могу использовать внешние библиотеки.

После некоторых исследований я столкнулся с использованием словарей в качестве способа выполнения этого проекта, но я не уверен, как связать таблицы со словарем. Будет ли это список словарей?

Answer 1

Да, вы могли бы подделать много операций DB с вложенной структурой dict. Верхний уровень - это ваши «таблицы», каждая таблица имеет записи (используйте «первичный ключ» на них), и каждая запись представляет собой пару ключей: значение, где ключи являются «именами столбцов», а значения - это значения.

Если вы захотите, вы можете даже написать небольшой sql-подобный язык запросов, но вы хотите начать с написания кода для управления этим. Вы не хотите создавать эту БД от руки, важно определить операции как код. Например, вставка должна иметь дело с соблюдением ограничений по значению и наложением значений по умолчанию и установкой ключей автоматического увеличения и т. Д. (Если вы действительно хотите «выполнять sql-запросы» против него)