Обязанности: Участие в разработке фреймворков для генерации и регламентации EL/ETL процессов на базе Airflow, ClickHouse и SQLmesh: Интеграция фреймворков с компонентами платформы Разработка коннекторов к источникам данных Разработка интерфейсов создания и управления процессами Требования: Уверенное владение SQL: базовый синтаксис, транзакции, представления, хранимые процедуры Владение Python 3: multithreading и multiprocessing, модули pandas, pyodbc/sqlalchemy, boto3, paramiko, requests Опыт работы с оркестраторами процессов: Airflow, NiFi, Jenkins Опыт интеграции с различными источниками данных: SQL/NoSQL СУБД, API, файловые системы Базовые навыки использования Linux Плюсом будет: Опыт работы с распределёнными хранилищами данных Опыт создания кастомных операторов Airflow Навыки асинхронного программирования Опыт контейнеризации процессов Условия: Участие в проекте, которым можно будет гордиться Возможность расширять свои знания и применять новые подходы в масштабе крупной компании Оформление в соответствии с ТК РФ: прозрачная система оплаты труда и мотивации Забота о Вас и Вашей семье: система корпоративных скидок и программы лояльности Возможность расти как вертикально, так и повышать уровень своих профессиональных и личностных навыков Внутреннее и внешнее обучение: посещение профильных конференций и тренингов Возможность реализовывать свои идеи в команде профессионалов на федеральном уровне График работы 5/2 с гибким началом дня: с 8 до 17, с 9 до 18 или с 10 до 19 Место работы: бизнес - центр Nordstar Tower (5 мин. от метро Беговая), либо удаленная работа
Похожие вакансии