Data Engineer

Чем предстоит заниматься

• Разрабатывать и поддерживать ETL/ELT-процессы;
• Писать и оптимизировать SQL-запросы;
• Автоматизировать сбор данных из различных источников;
• Участвовать в развитии инфраструктуры данных.

Требования

• Опыт работы с Big Data: практический опыт построения распределенных систем обработки данных от 2 лет;
• Уверенные знания SQL (сложные джойны, оконные функции, аналитические агрегаты);
• Опыт написания скриптов для обработки и передачи данных (Python);
• Опыт создания и управления DAG-ами, понимание принципов оркестрации (Airflow);
• Практический опыт работы в роли дата-инженера (проектирование схем, загрузка/выгрузка, оптимизация больших объемов данных) (ClickHouse).