Spark Connect — сервис для удаленного подключения и работы с инстансами Spark в интерактивном режиме. Использование Spark Connect позволяет запускать задачи Managed Spark непосредственно из вашего окружения.
Больше информации о Spark Connect в документации Apache®.
Если в Managed Spark, в котором создан Spark Connect, используется внешний S3, при изменении данных для доступа к нему необходимо:
Изменить значение секретов, в которых хранятся данные для доступа к внешнему S3.