Выделение пространства диска данных

Выделение пространства диска данных по умолчанию

• Выделение пространства для движков контейнеров
  • Указанное пространство диска: CCE по умолчанию делит пространство диска данных на две части. Одна часть используется для хранения рабочих каталогов Docker/containerd, данных образов контейнеров и их метаданных. Другая зарезервирована для компонентов kubelet и томов emptyDir. Доступное пространство движка контейнеров влияет на загрузку образов и запуск и работу контейнеров.
    • Пространство движка контейнеров и образов контейнеров (90% по умолчанию): хранит рабочие каталоги среды выполнения контейнеров, данные образов контейнеров и их метаданные.
    • пространство kubelet и emptyDir (10% по умолчанию): хранит файлы конфигурации pod, секреты и примонтированные хранилища, такие как тома emptyDir.
    Note

    Если сумма пространства движка контейнеров и образов контейнеров и пространство kubelet и emptyDir составляет менее 100%, оставшееся пространство будет выделено для пользовательских данных. Вы можете смонтировать том хранилища в путь службы. Не оставляйте путь пустым и не задавайте его в качестве ключевого пути ОС, например корневого каталога.

  • Общее пространство диска: В кластерах версии v1.21.10-r0, v1.23.8-r0, v1.25.3-r0 или более поздних версиях CCE позволяет движку контейнеров (Docker/containerd) и компонентам kubelet совместно использовать пространство диска данных.
• Выделение пространства для pod'ов: указывает на базовый размер pod'а. Вы можете установить верхний предел пространства диска, занимаемого каждым pod'ом рабочей нагрузки (включая пространство, занимаемое образами контейнеров). Эта настройка предотвращает захват всех доступных дисковых ресурсов pod'ами, что может вызвать сбои службы. Рекомендуется, чтобы значение было меньше или равно 80% пространства движка контейнеров. Этот параметр связан с ОС узла и корневой файловой системой (Rootfs) хранилища контейнеров и не поддерживается в некоторых сценариях. Подробнее см. Отображение между ОС и Rootfs хранилища контейнеров.
• Режим записи
  • Linear: Линейный логический том объединяет один или несколько физических томов. Данные записываются на следующий физический том, когда предыдущий заполнен.
  • Striped: доступно только при наличии как минимум двух дисков данных. Полосатый логический том распределяет данные на блоки одинакового размера и сохраняет их в нескольких физических томах последовательно. Это позволяет одновременно читать и записывать данные. Пул хранения, состоящий из полосатых томов, не может масштабироваться горизонтально.

Выделение пространства для движков контейнеров

• Rootfs (Device Mapper)

  По умолчанию пространство движка контейнеров и образов, занимающее 90% диска данных, может быть разделено на две части:

  • Каталог /var/lib/docker каталог используется как рабочий каталог Docker и по умолчанию занимает 20% пространства движка контейнеров и образов. (Размер пространства /var/lib/docker каталог = Объём диска данных × 90% × 20%)
  • Тонкий пул используется для хранения данных образов контейнеров, их метаданных и данных контейнеров и по умолчанию занимает 80% пространства движка контейнеров и образов. (Пространство тонкого пула = Объём диска данных × 90% × 80%)

    Тонкий пул монтируется динамически. Вы можете просмотреть его, запустив lsblk команду на узле, но не df -h команду.

  Рисунок 1 Выделение пространства для движков контейнеров Device Mapper

  
  

• Rootfs (OverlayFS)

  Отдельный тонкий пул не используется. Всё пространство движка контейнеров и образов (по умолчанию 90% диска данных) находится в /var/lib/docker каталог.

  Рисунок 2 Выделение пространства для движков контейнеров OverlayFS

  
  

Выделение пространства для pod'ов

• Device Mapper поддерживает пользовательский pod basesize. Значение по умолчанию — 10 GiB.
• В режиме OverlayFS пространство контейнера pod по умолчанию не ограничено.

Соответствие между ОС и Container Storage Rootfs

Политики сборки мусора для образов контейнеров

Рекомендуемая конфигурация пространства движка контейнеров

• Пространство движка контейнеров должно быть больше общего объёма диска, используемого контейнерами. Формула: Пространство движка контейнеров > Количество контейнеров x basesize
• Рекомендуется создавать и удалять файлы контейнеризованных сервисов в локальных томах хранения (например, emptyDir и hostPath) или в облачных каталогах, монтируемых к контейнерам. Таким образом пространство thin pool не будет занято. Тома emptyDir занимают пространство kubelet. Поэтому правильно планируйте размер пространства kubelet.
• Вы можете разворачивать сервисы на узлах, использующих OverlayFS (подробнее см. Соответствие между ОС и Container Storage Rootfs) чтобы дисковое пространство, занимаемое файлами, созданными или удалёнными в контейнерах, могло освобождаться сразу.

Общий диск данных между движком контейнеров и компонентами kubelet

• dockersys: /mnt/paas/runtime
• Kubernetes: /mnt/paas/kubernetes/kubelet

Рис. 3 Выделение Объема хранения общего диска данных