система сбора данных и ручное управление данными

Question

Я ищу решение, которое может уже существовать; однако я не могу определить, какое имя будет для этого типа системы и, следовательно, не сможет его найти. Я надеялся, что кто-то сможет определить, что я ищу.

У меня есть данные, которые получают вручную и автоматически курят. Данные, обработанные вручную, часто обновляются и управляются в Excel или в какой-либо форме таблицы. Автоматизированная система генерирует электронные таблицы для более ручной настройки. Я ищу программное решение на базе RDBMS, которое позволит сотрудникам или кураторам ввода данных создавать схемы данных с небольшим опытом работы с базами данных (с использованием графического интерфейса пользователя). Кроме того, они могут вносить изменения в схему и изменения в набор данных. Затем данные могут быть развернуты в нескольких источниках, которые, по сути, запускают демон ETL для извлечения изменений и затем сохраняются до источника назначения (постановка, производство и т. Д.).

Вот некоторые требования:

1. система должна быть удобной для пользователя и быть доступными для не-DBA или непрограммиста (дружественный GUI)
2. система должна позволять пользователям создавать и изменять схемы в БД
3. система должна иметь API, которые разработчики могут использовать для автоматического курируют данные
4. система должна иметь API, которые разработчики могут использовать для написания ETL-скриптов, которые будут загружены только изменения с данными (для быстрого обновления и импорта)
5. Бонус: система может позволить пользователям/кураторы развернуть на администратора контролируемых источников

Я думаю, что дает общую картину того, что я ищу. Я уверен, что какая-то подобная система должна уже существовать. Принцип работы хранилища данных и процесса ETL не является ничем иным.

Кто-нибудь знает, какое программное обеспечение/система я ищу?

Название или фраза, которые могут помочь мне исследовать системы, которые служат для этой цели.

Бонус: кто-нибудь знает какие-либо «доступные» решения?

Answer 1

Мы используем решение автоматизации/ETL на моем рабочем месте под названием Foxtrot. Я не в ИТ и использую его довольно регулярно; это в основном точка и нажмите, чтобы писать сценарии, которые автоматизируют всевозможные вещи. Я считаю, что есть два варианта: один, который автоматизирует только в Windows и другой, который автоматизирует в Windows и в Интернете. Вы можете найти больше здесь: http://www.enablesoft.com/foxtrot-automation-software/