DevOps-инженер в команду поддержки Data-платформ

Мы развиваем корпоративную DWH-платформу:

Greenplum, ClickHouse, Airflow, NiFi, Superset/Tableau, CI/CD и инфраструктурные сервисы для загрузки данных и отчётности. Платформа проходит трансформацию:

отказ от MSSQL-контура и постепенный переход на современную LakeHouse-архитектуру на основе Greenplum, ClickHouse и S3. Чем предстоит заниматься:

Разрабатывать и поддерживать CI/CD для ETL, скриптов и проверок качества данных;

Автоматизировать развёртывание приложений, ETL-процессов и инфраструктурных компонентов;

Поддерживать среды разработки, тестирования и production;

Развивать мониторинг, метрики, логирование и алертинг;

Расследовать инциденты по метрикам и логам, автоматизировать повторный запуск и восстановление загрузок;

Настраивать ролевой доступ, backup и проверку восстановления;

Участвовать в разработке планов Disaster Recovery с учётом RTO/RPO;

Анализировать производительность, масштабирование и потребление ресурсов;

Документировать архитектуру, эксплуатационные процедуры и взаимодействие со смежными командами. Наши пожелания к кандидатам:

Опыт от 3 лет в роли DevOps-, DataOps-, SRE- или Platform-инженера;

Опыт работы с DWH, Data Lake, LakeHouse или другой data platform;

Практический опыт CI/CD и автоматизации инфраструктуры;

Уверенное администрирование Linux и написание скриптов на Bash, Python или другом языке;

Опыт работы с S3-совместимыми объектными хранилищами;

Опыт работы с Kubernetes, OKD, OpenShift или аналогичной платформой;

Опыт настройки мониторинга, логирования, алертинга, backup и восстановления;

Умение находить узкие места и оптимизировать использование ресурсов. Будет преимуществом:

Опыт с Greenplum, ClickHouse или другими платформами хранения и обработки данных;

Понимание Data Catalog, metadata management и data lineage;

Опыт Capacity Planning:

расчёт CPU, RAM, Storage и Network;

Опыт автоматизации с применением ИИ;

Опыт внедрения новых компонентов data platform с нуля. Мы предлагаем:

Доступ к современным AI-инструментам;

Работу в стабильной и активно развивающейся компании – лидере инвестиционного рынка;

Современный стек технологий, амбициозные проекты, возможность профессионального развития;

Гибридный или удаленный режим работы;

ДМС с первого месяца работы.