داده کاوی در سایت دیوار

سلام قراره یک ربات داده کاو بیاد و هرساعت یک بار از سایت های مرجع آگهی مثل دیوار و شیپور و باما (البته با ذکر نام منبع در اپ وسایت) برای سایت من کاوش کنه و طبق اون پارامترهایی که بهش میگیم و مبنای مقایسه اش میشه یک فایل رو ارزیابی قیمتی کنه اگه زیرقیمت بود کل اطلاعاتشو ذخیره کنه توی یه دیتابیس قرار بده و بعد در یک تمپلیت و تم جدید در سایت یا اپ مخصوص،اون فایل رو با کل مشخصاتش توی اپ وسایت در همون ساعت منتشر کنه. پس سرعت عملش خیلی مهمه که فایل های داغ و ارزنده رو به موقع برای ما استخراج و منتشر کنه