استخدام Data Engineer حرفهای (با توان معماری داده)
ما به دنبال یک Data Engineer با تجربه و نگاه معمارانه هستیم که بتونه با دادههای پیچیده کار کنه، اونها رو تمیز و ساختیافته کنه و در کنار تیم، معماری سیستمهای دادهای قابل اطمینان و مقیاسپذیر طراحی کنه.
- وظایف اصلی:
- طراحی و پیادهسازی pipelineهای پردازش و انتقال داده از منابع مختلف.
- پاکسازی، نرمالسازی و استانداردسازی دادهها (Data Cleaning & Normalization).
- طراحی و توسعه ETL/ELT pipelineهای قابل نگهداری و مقیاسپذیر.
- طراحی معماری سیستمهای دادهمحور برای پشتیبانی از نیازهای جستوجو، گزارشگیری و تحلیل داده.
- ساخت ساختار دادهای و Index مناسب برای Full-Text Search و کاربردهای تحلیلی.
- مشاوره فنی در خصوص طراحی ساختارهای داده و انتخاب فناوریهای مناسب.
- مهارتهای مورد نیاز:
- تجربه طراحی و پیادهسازی معماریهای دادهای (Data Architecture Design).
- تسلط بر مفاهیم ETL و طراحی جریان داده در سیستمهای مقیاسپذیر.
- تجربه عملی با موتورهای Full-Text Search مانند:
- Elasticsearch
- PostgreSQL Full-Text Search
- آشنایی کامل با پایگاههای داده SQL و NoSQL.
- درک بالا از استانداردهای مدلسازی داده، ساختاردهی و ذخیرهسازی.
- مزیت محسوب میشه اگه:
- تجربه طراحی pipelineهای تحلیلی برای حجم بالا (Big Data) .