Возможности
DataArts Studio предлагает ряд возможностей по работе и управлению данными, такие как пакетная миграция данных, прием данных в режиме реального времени, работа с потоками данных с помощью shell-скриптов или SQL-запросов.
Интеграция данных
Перенос данных пакетами.
Миграция таблиц, файлов или баз данных.
Инкрементная миграция.
Миграция в режиме транзакций.
Преобразование полей при миграции.
Шифрование файлов.
MD5-верификация.
Архивирование грязных данных.
Прием информации в реальном времени из разных источников и передача данных в MRS, DLI, DWS и OBS для вычисления, анализа и хранения.
Обработка данных
Управление несколькими типами хранилищ данных, визуальный интерфейс и язык DDL для управления таблицами данных.
Передача данных между более чем 20 разнородными источниками.
Онлайн-редактор сценариев, который позволяет нескольким пользователям совместно разрабатывать и отлаживать SQL-сценарии и shell-скрипты с использованием переменных и функций.
Графический редактор для создания пайплайнов из заданий по обработке данных с поддержкой импорта и экспорта заданий.
Запуск заданий по расписанию или по триггеру.
O&M и мониторинг позволяет просматривать сведения об операциях каждого задания или узла в задании. Поддерживаются различные методы оповещения при возникновении ошибок в задании.
- Интеграция данных
- Обработка данных