Как сохранить данные об изменениях (CDC) SQL Server 2012

Question

Я уже несколько раз читал настройки CDC features in SQL Server 2012. Существует, однако, очень запутанным графический

, что, кажется, показывают, что данные CDC могут быть сохранены в другой базе данных (хранилище данных). Это, однако, не то, что я бы назвал по-настоящему «хранением».

Функциональность ETL отсутствует, когда вы следуете инструкциям по настройке устройства 'data collection'. Мое понимание сбора данных заключается в том, чтобы отслеживать с течением времени активность вашей базы данных, а не возвращаться и просматривать изменения в определенном наборе строк.

Так что мне, должно быть, недостает фундаментальной части логики. Есть ли какая-то волшебная функция CDC для массовой вставки или перемещения данных из cdc changetable (который хранит только 3 дня по умолчанию) или мне нужно написать собственное задание SSIS/ETL для каждой таблицы, которую я настроил для CDC? Я хорошо пишу работу SSIS, но похоже, что это скорее всего не правильный подход. Если кто-нибудь может указать мне на учебник, посвященный хранению данных cdc в другой базе данных или экземпляре, я был бы признателен. Мои поиски просто продолжают указывать мне на сбор данных или cdc, и ни один из них на самом деле не сохраняет 100% истории изменений.

Спасибо за запрос на редактирование. Я думал, что это вводит в заблуждение:

Мои требования следующие:

1. Capture все изменения в определенном наборе таблицы (CDC на помощь, и он работает)

2. магазин изменение данных в другой реляционной базе данных в течение 7 лет. то есть. Уметь вернуться к определенной записи и внести все изменения в нее в течение любого периода времени. (Это та часть, которая смущает меня в графическом и видимом решении MSDN). Работу ETL

3. данных следует, если это возможно сделать в режиме реального времени (не в пакетном режиме или по расписанию)

Answer 1

Как технология, CDC в основном используется для облегчения поддержания магазина вторичных данных (например, хранилище данных) обновлены с изменениями, произошедшими на первичной основе. Тем не менее, нет ничего, говоря, что вы не можете делать то, что вы собираетесь делать с CDC. По сути, вы настроите CDC на таблицы, которые вы заинтересованы в отслеживании изменений и звоните cdc.fn_cdc_get_all_changes... или cdc.fn_cdc_get_net_changes... (в зависимости от того, что подходит для вашей ситуации, хотя я предполагаю, что все изменения по вашему описанию) периодически, чтобы получить изменения для этих таблиц, в этот момент вы будете хранить необработанные данные cdc в другую таблицу, которую вы назначили для ее хранения.

Обратите внимание, что требование хранения является грубым. Например, вы не можете просто удалять записи по истечении периода хранения, поскольку пока запись все еще активна, вам нужна непрерывная цепочка изменений обратно к исходной вставке записи.