توسعه دهنده Full-Stack (وب و وب اسکرپینگ)

ما در حال راه‌اندازی یک سامانه حرفه‌ای وب‌اسکرپینگ تحت وب هستیم که با هدف جمع‌آوری، پردازش و تحلیل داده‌ها از سایت‌ها و شبکه‌های اجتماعی طراحی می‌شود. این سامانه باید شامل کرالر پیشرفته، قابلیت مدیریت کاربران، داشبورد حرفه‌ای و گزارش‌دهی جامع باشد و قابلیت توسعه و افزودن منابع جدید را نیز داشته باشد.

ویژگی‌ها و قابلیت‌های سامانه:

کرالر و وب‌اسکرپینگ حرفه‌ای با قابلیت جستجوی کلمات کلیدی و جمع‌آوری داده از گوگل، توییتر، فیسبوک و سایر سایت‌ها.
قابلیت دور زدن محدودیت‌های سایت‌ها و مدیریت IP/Proxies برای جلوگیری از بلاک شدن.
اتصال کاربران به سرور با مدیریت کلاینت و سرور و نقش‌های مختلف (User، Admin).
دیتابیس قوی و قابل جستجو برای ذخیره داده‌ها و ارائه گزارشات تحلیلی.
ترجمه داده‌ها به چند زبان و ارائه اطلاعات چندزبانه.
داشبورد حرفه‌ای با گزارش لاگ کاربران، میزان تکرار داده‌ها در سایت‌ها، صحت‌سنجی داده‌ها و تحلیل روند.

ربات تلگرام سلف و ادمین با قابلیت اسکرپینگ و تعامل با سامانه.
API داخلی و خارجی برای توسعه و اتصال سایر اپلیکیشن‌ها.
قابلیت اتوماسیون و زمان‌بندی کرالرها، گزارش‌گیری خودکار و هشدار هوشمند.
امنیت پیشرفته شامل HTTPS، رمزگذاری دیتابیس، جلوگیری از SQL injection و XSS.
مقیاس‌پذیری و عملکرد بالا با صف‌بندی وظایف، کشینگ و توزیع کرالرها.
سیستم نوتیفیکیشن و هشدارها برای اطلاع‌رسانی در زمان واقعی.
امکان گزارش‌گیری قابل دانلود (CSV، Excel، PDF) و فیلتر ترکیبی داده‌ها.
قابلیت توسعه و افزودن سایت‌ها، شبکه‌ها و ویژگی‌های جدید بدون بازنویسی کل سیستم.

مهارت‌ها و تجربه مورد نیاز:

تجربه حرفه‌ای در Python، Node.js یا زبان‌های وب‌اسکرپینگ.
آشنایی با فریم‌ورک‌های وب (Django، Flask، Express یا مشابه).
تجربه در پایگاه داده‌ها (PostgreSQL، MySQL، MongoDB) و طراحی ساختار دیتابیس بهینه.
تجربه در طراحی و توسعه داشبوردهای حرفه‌ای وب با نمودار و تحلیل داده.
آشنایی با APIها، سیستم‌های صف‌بندی (Celery/RabbitMQ) و اتوماسیون.
دانش در امنیت وب و مقیاس‌پذیری سرورها.
ترجیحاً تجربه در ربات‌های تلگرام یا سایر پیام‌رسان‌ها و تعامل با APIهای شبکه‌های اجتماعی.

ویژگی‌های فردی:
توانایی طراحی و پیاده‌سازی سامانه‌های ماژولار و توسعه‌پذیر
توانایی کار تیمی و ارائه مستندات فنی
توانایی حل مسائل پیچیده و ارائه راهکارهای بهینه

نحوه همکاری:
همکاری پاره‌وقت، پروژه‌ای یا تمام‌وقت قابل مذاکره