Задача не выполняется

Задача не выполняется или выполняется частично. При этом мониторинг показывает полную загрузку CPU и RAM.

В логах запись об ошибке относится к уровню WARN и содержит текст: «TaskSchedulerImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources».

Проблема возникает при запуске нескольких задач одновременно, если их выполнение требует больше вычислительных ресурсов, чем заложено при создании инстанса Spark.

Отмените часть задач, чтобы освободить ресурсы.