Облачная платформаEvolution

cloudru_evolution_spark_spark_job_collection (Data Source)


Example Usage

data "cloudru_evolution_spark_spark_job_collection" "datasource_spark_job" {
spark_id = "0000-0000-0000-0000-0000"
page_size = 100
filter = "name=spark-job-1"
order_by = "created_at desc"
}
output "data-spark_job" {
value = data.cloudru_evolution_spark_spark_job_collection.datasource_spark_job.spark_jobs[0]
}

Schema

Required

  • spark_id (String) Идентификатор spark.

Optional

  • filter (String) Фильтр для списка spark jobs. Пример: name=spark-job-1.

  • order_by (String) Параметр сортировки для полей created_at, updated_at. Можно задать направление сортировки через asc, desc. Пример: created_at desc.

  • page_size (Number) Максимальное количество результатов на странице ответа. Если значение больше [page_size], сервис возвращает [next_page_token], который используется в [ListSparkJobsResponse]. Значение [page_size] по умолчанию 1000.

Read-Only

Nested Schema for spark_jobs

Read-Only:

  • base_image (Attributes) Базовый образ. (see below for nested schema)

  • created_at (String) Время создания.

  • created_by (String) Идентификатор пользователя, кем создана задача.

  • custom_image (Attributes) Кастомный образ. (see below for nested schema)

  • description (String) Описание.

  • driver (Attributes) Конфигурация driver. (see below for nested schema)

  • executor (Attributes) Конфигурация Executor. (see below for nested schema)

  • external_ui_url (String) Url внешнего хоста.

  • id (String) Идентификатор spark job.

  • internal_ui_url (String) Url внутреннего хоста.

  • java (Attributes) Java конфигурация. (see below for nested schema)

  • name (String) Название.

  • python (Attributes) Python конфигурация. (see below for nested schema)

  • r (Attributes) R (R lang) конфигурация. (see below for nested schema)

  • scala (Attributes) Scala конфигурация. (see below for nested schema)

  • spark_application_id (String) Идентификатор запущенного Spark-приложения.

  • spark_id (String) Идентификатор Spark.

  • status (String) Статус.

  • type (String) Тип задачи.

  • updated_at (String) Время обновления.

  • updated_by (String) Идентификатор пользователя, кем обновлена задача.

Nested Schema for spark_jobs.base_image

Read-Only:

  • description (String) Описание.

  • id (String) Идентификатор id базового образа.

  • name (String) Название.

Nested Schema for spark_jobs.custom_image

Read-Only:

  • custom_image_uri (String) Uri кастомного образа.

Nested Schema for spark_jobs.driver

Read-Only:

  • cores (Number) Количество ядер.

  • gpus (Number) Количество GPU.

  • memory (String) Размер RAM.

Nested Schema for spark_jobs.executor

Read-Only:

  • cores (Number) Количество ядер.

  • count (Number) Количество executors.

  • gpus (Number) Количество GPU.

  • memory (String) Размер RAM.

Nested Schema for spark_jobs.java

Read-Only:

  • args (List of String) Аргументы.

  • config_spark (Map of String) Конфигурация spark, введенная пользователем.

  • config_spark_final (Map of String) Конфигурация spark, введенная пользователем и дополненная дефолтными параметрами конфигурации.

  • env (Map of String) Переменные окружения.

  • files (List of String) Список других файлов.

  • jar_files (List of String) Список jars.

  • main_app_file (String) Путь к исполняемому файлу.

  • main_class (String) Главный класс.

Nested Schema for spark_jobs.python

Read-Only:

  • args (List of String) Аргументы.

  • config_spark (Map of String) Конфигурация spark.

  • config_spark_final (Map of String) Конфигурация spark, введенная пользователем и дополненная дефолтными параметрами конфигурации.

  • env (Map of String) Переменные окружения.

  • files (List of String) Список других файлов.

  • jar_files (List of String) Список jars.

  • main_app_file (String) Путь к исполняемому файлу.

  • py_files (List of String) Список python файлов.

Nested Schema for spark_jobs.r

Read-Only:

  • args (List of String) Аргументы.

  • config_spark (Map of String) Конфигурация spark.

  • config_spark_final (Map of String) Конфигурация spark, введенная пользователем и дополненная дефолтными параметрами конфигурации.

  • env (Map of String) Переменные окружения.

  • files (List of String) Список других файлов.

  • jar_files (List of String) Список jars.

  • main_app_file (String) Путь к исполняемому файлу.

Nested Schema for spark_jobs.scala

Read-Only:

  • args (List of String) Аргументы.

  • config_spark (Map of String) Конфигурация spark.

  • config_spark_final (Map of String) Конфигурация spark, введенная пользователем и дополненная дефолтными параметрами конфигурации.

  • env (Map of String) Переменные окружения.

  • files (List of String) Список других файлов.

  • jar_files (List of String) Список jars.

  • main_app_file (String) Путь к исполняемому файлу.

  • main_class (String) Главный класс.