خواندن آگهی های املاک

من میخواهم یک پلتفرم آنلاین کوچک و تستی در زمینه انتشار آگهی‌های املاک و مسکن بسازم . برای شروع و بهبود محتوای سایت خود، نیاز به دریافت آگهی‌های به‌روز از سایت دیوار داریم. تلاش‌های قبلی ما با استفاده از روش‌های مستقیم و API با محدودیت‌هایی مواجه شده است. ما به دنبال یک راه حل نوآورانه و پایدار هستیم که: بتواند به طور منظم آگهی‌های جدید را از سایت دیوار دریافت کند. از شناسایی و مسدود شدن توسط سیستم‌های امنیتی دیوار جلوگیری کند. با قوانین و مقررات دیوار و قوانین عمومی وب سازگار باشد. قابلیت مقیاس‌پذیری و تطبیق با تغییرات احتمالی در ساختار سایت دیوار را داشته باشد. مهارت‌های مورد نیاز: تسلط بر زبان‌های برنامه‌نویسی وب (ترجیحاً Python یا JavaScript) تجربه در web scraping و کار با API‌ها آشنایی با تکنیک‌های پیشرفته برای جلوگیری از شناسایی به عنوان ربات درک اصول اخلاقی و قانونی مرتبط با جمع‌آوری داده