На днях американский инженер Andrew Rynhard представил интересный проект: компактный дистрибутив Linux, предназначенный специально для запуска Kubernetes-кластеров. Он получил название из древнегреческой мифологии — Talos.
Проект появился под вдохновением от твита Kelsey Hightower'а ещё 2015 года, в котором он говорил, что нам осталось лишь дождаться появления условной KubeOS (после чего жизнь облачных окружений станет окончательно замечательной):
К слову, с появлением Talos эта история получила продолжение: некто ответил на исторический твит, что такая система уже появилась, и автор Talos заявил, что будет рад, если Kelsey посмотрит на проект. Реакции последнего, впрочем, (пока) не последовало.
Судя по всему, разработкой Talos занимался один человек (представляющий себя в рамках целой компании — Autonomy) — ушло у него на это более года. И вот теперь, когда статус минимальной готовности достигнут, автор ожидает, что к нему присоединятся другие представители Kubernetes/cloud native-сообщества. Итак, в чём же суть проекта?
Принципы и особенности Talos
Talos позиционируется как современный Linux-дистрибутив, созданный специально (и исключительно!) для Kubernetes. Для достижения поставленной цели в его реализации придерживаются следующих подходов:
Минимализм
Повсеместный минимализм — один из краеугольных камней архитектуры Talos. Одним из ярких примеров здесь является используемая служба инициализации, которая (вопреки современным тенденциям в этой области) следует философии UNIX, что «каждая программа делает одну вещь, но хорошо»:
Мы хотели сделать init ориентированным на единственную задачу — запуск Kubernetes. В нём попросту нет механизмов для каких-либо других действий.
Разработчики пошли дальше и лишили свою операционную систему привычного системным администраторам пользовательского доступа к хосту: в Talos нет ни командных оболочек, ни SSH-демона, ни даже возможности запускать собственные процессы на хосте. И действительно: зачем всё это, если вам нужно запускать Kubernetes и только? Практически все процессы в Talos работают в рамках контейнеров.
Однако, поскольку мир не так уж идеален (чтобы ОС полностью функционировала «сама»), инструменты для эксплуатации ОС всё же есть:
- демон osd, реализованный по принципу предоставления минимально необходимых привилегий (Principle of Least Privilege) и предлагающий API (на базе gRPC) для управления узлами;
- CLI-утилита osctl, позволяющая общаться со службой osd, что запускается на каждом узле.
Так и реализован набор базовых возможностей по эксплуатации: перезагрузка служб и узлов кластера, получение логов ядра (dmesg) и из контейнеров, вставка данных в конфигурационные файлы узлов и т.п.
Все перечисленные компоненты (init, osd, osctl…), как и некоторые другие в составе дистрибутива, написаны на языке Go. К слову, весь исходный код распространяется на условиях Open Source-лицензии Mozilla Public License 2.0.
Безопасность
Описанный выше минималистский подход (всё необходимое только для запуска Kubernetes) + принцип выдачи лишь минимальных привилегий уже сами по себе снижают потенциальную поверхность атаки. Кроме того, в Talos:
- включённое в состав ядро настроено в соответствии с рекомендациями проекта KSSP (Kernel Self Protection Project), фокусирующегося на возможностях ядра к самостоятельной защите от потенциальных багов и уязвимостей (вместо использования userspace-утилит для тех же целей);
- корневая файловая система монтируется в read-only, что — в совокупности с отсутствием shell'ов/SSH — делает систему неизменной (immutable);
- используется двухсторонний TLS (mTLS) для взаимодействия с API;
- настройки и конфигурации Kubernetes применяются в соответствии с указаниями CIS (Center for Internet Security).
Дополнительный плюс, вытекающий из минимализма и фокусировки на immutable, — предсказуемость системы в поведении (т.к. снижается число факторов, влияющих на окружение).
Актуальность
Авторы обещают базировать Talos на предпоследнем upstream-релизе Kubernetes (впрочем, прямо сейчас поддерживается K8s 1.13.3) и последнем доступном LTS-релизе ядра Linux (сейчас используется 4.19.10).
Системные компоненты
Основными составляющими дистрибутива (помимо ядра и «фирменных» утилит) являются:
- musl-libc — как стандартная библиотека Си;
- golang — для
init
и других своих инструментов; - gRPC — для API;
- containerd — для запуска системных служб в контейнерах (используется с плагином CRI для Kubernetes);
- kubeadm — для развёртывания кластеров.
Работа с Talos
Примеры деплоя Talos для случаев использования AWS, KVM и Xen приведены в документации проекта. Для быстрой иллюстрации того, как это выглядит, вот алгоритм инсталляции с виртуальными машинами Linux KVM:
1. Установка узла мастера на хост:
docker run --rm --privileged --volume /dev:/dev
autonomy/talos:latest image -b /dev/sdb -f -p bare-metal
-u http://${IP}:8080/master.yaml
2. Создание ВМ:
virt-install -n master --description "Kubernetes master node."
--os-type=Linux --os-variant=generic --virt-type=kvm --cpu=host
--vcpus=2 --ram=4096 --disk path=/dev/sdb
--network bridge=br0,model=e1000,mac=52:54:00:A8:4C:E1
--graphics none --boot hd --rng /dev/random
3. Аналогичные действия для создания рабочего узла:
docker run --rm --privileged --volume /dev:/dev
autonomy/talos:latest image -b /dev/sdc -f -p bare-metal
-u http://${IP}:8080/worker.yaml
virt-install -n master --description "Kubernetes worker node."
--os-type=Linux --os-variant=generic --virt-type=kvm --cpu=host
--vcpus=2 --ram=4096 --disk path=/dev/sdc
--network bridge=br0,model=e1000,mac=52:54:00:B9:5D:F2
--graphics none --boot hd --rng /dev/random
Настройка взаимодействия между osd и osctl по большому счёту сводится к генерации ключей для их аутентификации (уже упомянутый mTLS) и описана здесь.
Дальнейшая работа с ними сводится к командам вроде osctl reboot
, osctl stats
и osctl logs
. Демонстрация вывода контейнеров в пространстве имён k8s.io
:
$ osctl ps -k
NAMESPACE ID IMAGE PID STATUS
k8s.io 0ca1… sha256:da86… 2341 RUNNING
k8s.io 356f… sha256:da86… 2342 RUNNING
…
k8s.io e42e… sha256:4ff8… 2508 RUNNING
k8s.io kubelet k8s.gcr.io/… 2068 RUNNING
Процесс конфигурации Kubernetes-кластера с Talos — доступен здесь (mater-узлы) и здесь (workers).
Статус и перспективы
Проект находится в стадии альфа-версии (последний релиз — v0.1.0-alpha.18) и, конечно, на данном этапе выглядит больше как занятный эксперимент, чем что-либо по-настоящему близкое к production.
Однако всплеск интереса к Talos после его недавнего анонса (уже 600+ звёзд на GitHub) и призыв единственного автора к совместному творчеству могут послужить отличным стимулом для его развития.
Активность в issues проекта Talos в последние дни
По меньшей мере, в дистрибутиве заложены актуальные для мира cloud native идеи, качественная реализация которых — дело времени.
P.S.
Читайте также в нашем блоге:
- «В AWS представили Firecracker — микровиртуализацию для Linux»;
- «Прошлое, настоящее и будущее Docker и других исполняемых сред контейнеров в Kubernetes»;
- «Red Hat заменяет Docker на Podman»;
- «Linux-дистрибутив from scratch для сборки Docker-образов — наш опыт с dappdeps».
Автор: Дмитрий Шурупов