مسئولیت‌ها:

• طراحی، توسعه و نگهداری data pipelines بزرگ با استفاده از ClickHouse، Kafka، Kafka Streams و Spring Boot.
• توسعه و پیاده‌سازی data architecture برای پشتیبانی از نیازهای کسب‌وکار.
• توسعه برنامه‌های پردازش داده با استفاده از Python.
• تضمین کیفیت و یکپارچگی داده‌ها در تمامی فرآیندهای پردازش
• هماهنگی data pipelines با استفاده از Airflow.
• همکاری با تیم‌های فنی و غیرفنی برای ارائه راه‌حل‌های داده‌محور.

شرایط احراز:

• حداقل 2 سال تجربه در مهندسی داده، توسعه نرم‌افزار یا حوزه‌های مرتبط.
• تجربه قوی در زمینه data architecture، data modeling و طراحی data warehouse.
• تجربه با Airflow و ابزارهای orchestration برای data pipelines.
• مهارت کار با ClickHouse، Kafka، Kafka Streams و Spring Boot.
• تسلط به Python و توسعه برنامه‌های پردازش داده.
• آشنایی با Docker و CI/CD.
• آشنایی با فرایند‌های توسعه نرم‌افزار و فریمورک‌های اجایل(Scrum, Kanban)
• درک کامل از مفاهیم data quality و data integrity.
• توانایی حل مسائل پیچیده و توجه به جزئیات.