- Начало работы с ML Space
- Инструкции
- Подключение и работа с источниками данных
- Создать коннектор
- Создать коннектор к экземпляру Relational Database Service SQL Server в Advanced
- Операции над коннекторами
- Создать правило переноса
- Операции над правилами переноса данных
- Переместить данные между внешними S3 и NFS
- Узнать или изменить квоты NFS на объем хранилища и количество объектов
- Скопировать путь до объекта на NFS
- Рекомендации по работе с архивами на NFS
- Использовать GitLab CI при работе с Environments
- Тарификация
- Термины и сокращения
- Обратиться в поддержку
Создать правило переноса
Правило переноса позволяет отправить данные в «горячее» хранилище NFS перед непосредственно запуском задач.
При переносах действуют ограничения по количеству переносимых файлов.
Для создания правила переноса:
(Опционально) Чтобы использовать бакет S3 Evolution в качестве источника или места назначения, убедитесь, что у вас подключен Object Storage.
Создайте бакет S3 на платформе Evolution в разделе Object Storage.
По умолчанию будет использоваться стандартный класс хранения.
Перейдите в Data Catalog → Data transfer service → Правила переносов.
Нажмите Создать правило. Откроется окно конфигурации правила переноса.
Укажите Название и, если необходимо, Описание правила переноса.
Выберите источник переноса.
При переносе данных из СУБД рекомендуется максимально ограничивать права доступа к целевой базе данных.
Укажите коннектор для подключения к источнику данных. Если вы переносите данные с NFS, выберите регион.
Укажите Путь к папке или файлу, которые требуется перенести.
Укажите место назначения переноса.
ПримечаниеДля переносов с помощью коннектора NFS ML Space Personal Directory в индивидуальные Jupyter Servers воркспейса, который создан до 1 ноября 2024 года, обновите воркспейс.
Укажите коннектор для подключения к месту переноса данных. Если вы переносите данные на NFS, выберите регион.
Укажите Путь к папке или файлу, куда требуется осуществить перенос.
В поле Способ переноса выберите предпочтительный вариант:
Добавлять все к существующим данным.
Добавлять только новые записи.
Полная синхронизация.
В параметрах запуска укажите время запуска и периодичность.
Нажмите Создать правило.
После сохранения правило появится во вкладке Правила переносов.
Правила переноса являются приватными. Они доступны только тем пользователям, которые их создали.