Вимоги:
- 3+ роки відповідного досвіду роботи;
- впевнене знання Apache Airflow, Python, SQL, ClickHouse;
- створення та підтримка ETL/ELT процесів;
- оптимізація роботи з даними;
- інтеграція ClickHouse, Postgree;
- досвід роботи з сервісами у хмарі (AWS, Azure);
- гнучкість мислення та адаптивність;
- вміння працювати у команді.
Обов’язки:
- створення та використання ELT/ETL пайплайнів Apache Airflow;
- інтеграція з ClickHouse та PostgreeSQL;
- оптимізація роботи з даними;
- обробка структурованої та неструктурованої інформації з усуненням помилок, дублюванням даних, нормалізацією та
- перетворенням у необхідний формат;
- створення RESTful API, інтеграція з внутрішніми та зовнішніми клієнтами.