Возможности
DataArts Studio предлагает ряд возможностей по работе и управлению данными, такие как пакетная миграция данных, прием данных в режиме реального времени, работа с потоками данных с помощью shell-скриптов или SQL-запросов.
Интеграция данных
-
Перенос данных пакетами.
-
Миграция таблиц, файлов или баз данных.
-
Инкрементная миграция.
-
Миграция в режиме транзакций.
-
Преобразование полей при миграции.
-
Шифрование файлов.
-
MD5-верификация.
-
Архивирование грязных данных.
-
Прием информации в реальном времени из разных источников и передача данных в MRS, DLI, DWS и OBS для вычисления, анализа и хранения.
Обработка данных
-
Управление несколькими типами хранилищ данных, визуальный интерфейс и язык DDL для управления таблицами данных.
-
Передача данных между более чем 20 разнородными источниками.
-
Онлайн-редактор сценариев, который позволяет нескольким пользователям совместно разрабатывать и отлаживать SQL-сценарии и shell-скрипты с использованием переменных и функций.
-
Графический редактор для создания пайплайнов из заданий по обработке данных с поддержкой импорта и экспорта заданий.
-
Запуск заданий по расписанию или по триггеру.
-
O&M и мониторинг позволяет просматривать сведения об операциях каждого задания или узла в задании. Поддерживаются различные методы оповещения при возникновении ошибок в задании.
- Интеграция данных
- Обработка данных