Big Data / ETL Engineer

Формат: полностью удалённо

Что делать:

— Разработка и оптимизация ETL-пайплайнов (ClickHouse, Kafka, Airflow, Python)
— Поддержка потоков данных и оптимизация производительности
— Реализация алгоритмов детекции аномалий и анализа данных
— Контроль качества данных, участие в архитектуре и автоматизации

Что нужно знать:

— Опыт от 4+ лет в data-инженерии
— ClickHouse (шардинг, репликация, TTL, оптимизация)
— Python (pandas/numpy, ETL/ELT)
— Airflow (DAG, Sensors, Operators, XCom)
— Kafka или аналогичные решения
— Алгоритмы аномалий (z-score, IQR, DBSCAN, Isolation Forest)
— On-chain data (calldata, трейсы, Web3 API)
— Контейнеризация, CI/CD
— Свободный русский и английский язык

➕ Будет плюсом:

Rust (или желание изучить), Prefect / Arrow / Parquet, опыт с ончейн-аналитикой, DDD / CQRS, активный GitHub или pet-проекты.