Kuber Conf'22

В докладе расскажем, почему мы решили использовать Kubernetes как основу для деплоя облака, продемонстрируем, как сейчас выглядит инсталляция. Расскажем про подключение нод (или почему мы об этом не думаем), как мы расширили интеграцию K8s в IAM, какие есть ограничения на кластер (и почему решили позонально).

Рассмотрим способы расширения и решение проблемы курицы и яйца, Bootstrap текущий и тот, к которому движемся (Terraform → Spinnaker). В завершение поделимся тем, что даём пользователям, и ответим на главный вопрос: почему не Argo CD?

Поговорим о том, как мы сперва делали решение для запуска ML-задач в общей инфраструктуре, построенной с применением основных принципов безопасности, и как страдали, адаптируя workflow (возникшие в Slurm как основной платформе для запуска ML-нагрузок) к безопасному K8s. Объясним, с какими проблемами столкнулись при внезапном изменении рантайма контейнеров и как их решали.

Расскажем, как мы срезали углы, создав решение для быстрой доставки огромных ML-датасетов в задачи, имея очень ограниченный набор опций, и продемонстрируем, какие шишки набили при построении более-менее стабильной системы, которая определяет статусы задач на основе событий K8s и управляет ML-нагрузками на основе этих статусов. Это самая больная и сложная тема: мы считаем, что решение совсем не идеально, и продолжаем экспериментировать и повышать стабильность.

Ознакомимся со множеством подходов к защите Kubernetes и поймём, как учитывать их все. Посмотрим на процесс деплоя и шаги, которые можно обеспечить на этом этапе; конечно же, поговорим о том, как GitOps поможет сделать инфраструктуру безопаснее. Расскажем, какие инструменты обеспечения безопасности есть в кластере Kubernetes, сравним их друг с другом и дадим ссылку на результаты, которыми можно воспользоваться. Ответим на вопросы, как интегрировать все инструменты в SIEM-систему, тут же рассмотрим проблему, как делать это в multicluster-среде, и покажем, как решаем её с помощью Python, s3 и Elasticsearch. Завершим рассказом, куда мы для этого законтрибьютили и что планируем делать дальше.

Цифровые финансовые активы — что это? Расскажем об истории и сегодняшнем дне проекта Atomyze, рассмотрим технологии платформы: блокчейн HLF, бэкенд, фронтенд и не только. Разберём, почему Atomyze — чисто облачное решение и почему именно Yandex Cloud. Рассмотрим наши виртуальные машины и Kubernetes, ознакомимся с подходом «инфраструктура как код», оценим надёжность, безопасность, гибкость и масштабируемость систем, а также отдельно остановимся на коммерциализации затрат и наших планах развития.