Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Вакансии Новый топик    Ответить
 Big Data Developer  [new]
tpustovalova
Member

Откуда:
Сообщений: 2
Здравствуйте!
Мы занимаемся разработкой, внедрением и сопровождением программного обеспечения для высокотехнологичных заказчиков.
Сейчас нам очень нужен Big Data developer.

Описание проекта:

АНАЛИТИЧЕСКАЯ BIGDATA -ПЛАТФОРМА В ЦИФРАХ:

• 240 млрд фактов по кодам маркировки

• 3Пб объем данных в HDFS

• 8 кластеров, больше 6000 ядер

Текущий стэк аналитической команды:

• Hadoop: Yarn/HDFS/HBase/Phoenix

• ClickHouse

• Spark/Spark Streaming/Spark SQL/Scala

• Hive

• Airflow

• Parquet/Hudi

• Zeppelin/Jupyter Notebook

Требуемые навыки:

• Опыт разработки как batch, так и streaming ETL процессов в информационных системах типа Информационных Хранилищ (они же КХД, DWH и т.п.)

• Хорошие знания и опыт применения SQL запросов для 2-3 распространённых СУБД

• Опыт работы с продуктами Hadoop, Spark, AirFlow

• Навыки разработки на одном из распространённых языков программирования: Java/Scala, SQL (хранимые процедуры), Python, bash

• Опыт автоматизированного тестирования ETL процессов

• Работа с OS Linux/Unix

Условия:

• возможна удаленная работа

• гибкий график

• оформление в соответствии с ТК, либо как ИП (предпочтительно)

•доход до 350 тыс руб

Контакты: t.pustovalova@skifhr.ru
14 сен 21, 17:03    [22371816]     Ответить | Цитировать Сообщить модератору
Все форумы / Вакансии Ответить