Кластеры OpenSearch поддерживают несколько методов загрузки данных, как указано в Таблица 1. Выберите тот, который лучше всего соответствует вашим требованиям. Прежде чем начать загрузку данных, определите, нужно ли сначала повысить производительность загрузки данных в кластерах OpenSearch. Подробнее см. Повышение производительности загрузки данных в кластерах OpenSearch.
Метод загрузки данных | Сценарий | Поддерживаемые форматы данных | Подробности |
|---|---|---|---|
Open-source Logstash | Open-source Logstash предоставляет серверный конвейер обработки данных в реальном времени, который поддерживает загрузку данных из нескольких источников. Его можно использовать для загрузки различных типов данных, таких как журналы, данные мониторинга и метрики. | JSON, CSV, и текст | |
Open-source OpenSearch API | Open-source Elasticsearch APIs можно использовать для загрузки данных. Этот метод гибок, так как вы можете написать собственный код приложения. | JSON | |
Cloud Data Migration (CDM) | Вы можете использовать CDM для пакетной миграции данных. Например, если данные хранятся в OBS или базе данных Oracle, рекомендуется использовать CDM. | JSON | |
Data Replication Service (DRS) | DRS можно использовать для онлайн миграции баз данных и синхронизации данных в режиме реального времени. | Relational Database Service (RDS) |
DRS — это удобный в использовании, стабильный и эффективный облачный сервис для онлайн‑миграции баз данных и синхронизации баз данных в реальном времени. Синхронизация данных в реальном времени означает репликацию данных из одного источника в другой в режиме реального времени при обеспечении согласованности данных.
DRS может использоваться для загрузки данных из нескольких типов реляционных баз данных в кластеры OpenSearch. Подробную информацию о поддерживаемых версиях программного обеспечения для источников баз данных и целевых кластеров см. Таблица 2.
Сценарий | Исходная БД | Целевой кластер OpenSearch |
|---|---|---|
Загрузка данных из базы данных RDS for MySQL в кластер CSS OpenSearch | RDS for MySQL 5.5, 5.6, 5.7 или 8.0 | OpenSearch 1.3.6 |
Загрузка данных из базы данных TaurusDB в кластер CSS OpenSearch | Основные/резервные экземпляры TaurusDB | OpenSearch 1.3.6 |
Загрузка данных из самостоятельно построенной базы данных MySQL в кластер CSS OpenSearch | База данных MySQL 5.5, 5.6, 5.7 или 8.0, созданная на локальном сервере или ECS | OpenSearch 1.3.6 |