Tech Lead / Senior Data Engineer

О проекте

SAUDATA - аналитическая система, обрабатывающая фискальные данные от ОФД, формирующая классификации товаров, сегментации торговых точек и агрегированную аналитику по каналам продаж. Система включает полный пайплайн: от приёма и очистки данных до построения ML-моделей и визуализации аналитики. Сейчас команда развивает продукт в сторону масштабируемого решения для малого и среднего бизнеса.

Ваши задачи

• Провести аудит текущей архитектуры и пайплайнов (ETL, ML, визуализация)
• Проектирование и реализация стратегии автоматизации категоризации, геоаналитики и определения каналов продаж
• Разработать подходы с применением ML/AI (в том числе LLM или rule-based)
• Упростить и формализовать процесс работы с данными: от загрузки до BI
• Настроить стандарты разработки, CI/CD, документации и мониторинга
• Сопровождать интеграцию новых источников данных (ОФД)
• Участвовать в сборе и управлении технической командой

Что важно

• Опыт от 5 лет в роли Data Engineer / ML Engineer
• Уверенное знание Apache Spark, HDFS, Airflow, SQL
• Опыт работы с BI-инфраструктурой и большим объёмом транзакционных данных
• Владение Python, опыт использования ML-фреймворков (LightGBM, sklearn и др.)
• Понимание архитектуры хранения данных (Iceberg, Hive, MPP-базы)
• Опыт проектирования ETL и построения устойчивой инфраструктуры
• Навыки руководства или координации технической команды

Плюсом будет

• Опыт работы с транзакционными данными
• Понимание BI-инструментов (Power BI, Tableau, Qlik)
• Знание казахстанского или центральноазиатского рынка ритейла
• Опыт работы с геоданными и их нормализацией

Мы предлагаем

• Работа с реальными данными на b2b-рынке (поток до 20 млн записей в сутки)
• Гибкий график, сильная команда
• Возможность собрать свою техническую команду
• Прямая вовлечённость в принятие продуктовых и архитектурных решений
• Долгосрочная перспектива участия в масштабируемой B2B-платформе

Будем признательны, если в сопроводительном письме вы кратко опишете один из своих проектов, близкий по духу или масштабу нашему - это поможет быстрее понять, насколько мы подходим друг другу