Data Engineer в VK Музыка

Чем предстоит заниматься:

• Проектировать, реализовывать и оптимизировать сложные ETL-процессы;
• работать с данными на каждом этапе их трансформации: от появления информации в конкретном источнике до принятия решений на данных;
• оптимизировать работу с данными для продуктовой аналитики;
• документировать данные и процессы по их управлению.

Требования:

• Уверенное знание Python на уровне написания бизнес-логики и SQL на уровне оптимизации запросов;
• опыт работы с ClickHouse в роли DE от трёх лет;
• умение и желание разбираться в сложных процессах преобразования данных;
• опыт работы с базами данных объёмом 1+ TB;
• опыт миграции данных между различными БД.

Будет плюсом:

Опыт работы с Hadoop, YT.