Инженер данных

Санкт-Петербург 01.03.21

Тип занятости

Полная занятость

Требуемый опыт

1-3 года

Проектирование и реализация ELT/ETL-решений для загрузки сырых данных в Hadoop;
Проектирование и реализация хранилищ и витрин данных в Hive, Hbase и SQL Server и соответствующих ETL;
Проектирование и реализация решений для межсистемной интеграции (rest, soap, MQ, ftp, etc);
Оптимизация MVP-решения команд data scientist для переноса их в продуктив;
Развитие архитектуры и оптимизация работы типовых решений на платформе;
Участие в апробации и оптимизации новых компонент платформы;
Анализ и оптимизация бизнес-требований, подготовка технической документации

Опыт разработки в экосистеме Hadoop (Hive, Spark, Kafka);
Опыт работы с любым промышленным ETL – инструментами (SAP, Oracle, IBM, Microsoft, etc);
Уверенное знание и опыт использования SQL в решении задач анализа данных;
Опыт разработки на Python/Java