5m ago
Software Engineer
Hummingbird·LLM Engineer · Financial technology
📡Remote In-Country
artificial_intelligenceawsazurebackend_development+17
Data Engineer
CINIMEX | General Data Engineering | Information Technology
Hybrid
Full Time
Russia, Moscow, Nizhny Novgorod, Saint Petersburg
Source not independently verified
Confirm the company and recruiter through an official company domain before applying. Never pay money, share one-time codes, sign out of your Apple or Google account, install apps or configuration profiles, or run code from a repository sent by a recruiter.
#senior #офис #москва #спб #нн
CINIMEX Data Engineer Опыт работы: глубокий экспертный опыт с Apache Spark от 4-5 лет Формат работы: офис/гибрид (Москва, Нижний Новгород, Санкт-Петербург)
CINIMEX — IT-компания с 29-летней историей, разработчик ПО и системный интегратор. Работает с российскими банками ТОП-20, ритейлерами, производственными и добывающими компаниями.
☑️ Чем предстоит заниматься -Разработка ETL-пайплайнов (Apache Spark on Java, HDFS (parquets), ClickHouse, Hive, Greenplum) -Разработка витрин данных в Greenplum и ClickHouse -Оркестрация ETL-процессов -Оптимизация ETL-процессов (батчинг, ретраи, SLA-контроль) -Взаимодействие с BI-разработчиками и DevOps для своевременной доставки данных в Superset
☑️ Наши пожелания к кандидатам -Глубокий экспертный опыт работы с Apache Spark от 4-5 лет (оптимизация джобов, работа с широкими и узкими зависимостями, настройка памяти и shuffle-операций) -Опыт работы с ClickHouse и Hadoop (HDFS, Hive) -Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных -Продвинутые знания SQL -Готовность осваивать Java для использования Spark
Required Skills
apacheclickhouseetlgreenplumhdfshivejavasqlsuperset
Required Languages
🇷🇺 Russian
Key competency: General Data Engineering