Наш заказчик, известная российская социальная сеть, включающая мини-приложения, игры, внутренние и партнерские сервисы,
приглашает в команду Big Data - Data-инженера.
Команда занимается развитием и поддержкой платформы Big Data. Она построена как на проверенных решениях с открытым исходным кодом (Hadoop, Kafka, Spark, Zeppelin), так и на собственных разработках, заточенных под работу 24/7 в условиях высоких нагрузок.
Стек: Hadoop, HDFS, Kafka, Spark, Zeppelin, Airflow, Zookeeper, Clickhouse, Python, Java, Scala.
Основные задачи:
Команда занимается развитием и поддержкой платформы Big Data. Она построена как на проверенных решениях с открытым исходным кодом (Hadoop, Kafka, Spark, Zeppelin), так и на собственных разработках, заточенных под работу 24/7 в условиях высоких нагрузок.
Стек: Hadoop, HDFS, Kafka, Spark, Zeppelin, Airflow, Zookeeper, Clickhouse, Python, Java, Scala.
Основные задачи:
- развивать платформу хранения и обработки Big Data;
- внедрять новые инструменты для анализа данных и машинного обучения;
- решать задачи производительности и отказоустойчивости инфраструктуры Big Data;
- строить новые и оптимизировать существующие ETL-процессы.
Требования:
- хорошее знание Java/Scala, Python;
- знание принципов работы баз данных, распределенных систем хранения и обработки данных;
- опыт работы и понимание внутреннего устройства: Hadoop, HDFS, Kafka, Spark, Zeppelin, Airflow, Zookeeper, Clickhouse.
Компания предлагает:
- полная удаленка;
- предоставляется техника для работы (можно выбрать: windows, mac, linux, разные диагонали);
- с первого дня работы ДМС (со стоматологией, экстренной медицинской помощью и не только) для сотрудника и ребенка. Возможность приобрести ДМС для других членов семьи по корпоративной скидке;
- компенсация спорта (фитнес-клубы, индивидуальные тренировки, участия в соревнованиях). 14 внутренних спортивных команд по 11 видам спорта (футбол, волейбол, баскетбол, бег, плавание, триатлон, беговые лыжи, хоккей, картинг, сквош и настольный теннис);
- возможность обучения на внутреннем портале, на тренингах и на профильных конференциях;
- множество других корпоративных программ и мероприятий.
Подраздел:
соцсеть Big Data