پروژه وب اسکرپینگ برای جمع آوری اطلاعات دوره های آموزش

**توضیحات پروژه:** ما به دنبال یک متخصص وب اسکرپینگ هستیم تا اسکریپتی به زبان پایتون یا R ایجاد کند که اطلاعات مربوط به دوره‌های کارشناسی ارائه‌شده توسط دانشگاه‌های استرالیا را از وب‌سایت **Study Australia** جمع‌آوری کند. هدف این پروژه استخراج اطلاعات ساختاریافته برای دوره‌های دانشگاهی است. **محدوده کاری:** اسکریپت باید اطلاعات زیر را برای هر دوره جمع‌آوری کند: 1. **نام دوره** 2. **نام دانشگاه** 3. **ایالت** 4. **هزینه کل تقریبی دوره** 5. **تاریخ شروع** اطلاعات باید از لینک زیر جمع‌آوری شود: [جستجوی دوره‌های استرالیا](https://search.studyaustralia.gov.au/courses?level_of_study=undergraduate&page=1&query=Undergraduate) **نیازمندی‌های اصلی:** - اسکریپت باید قابلیت پردازش چندین صفحه (pagination) را داشته باشد تا اطمینان حاصل شود که تمام دوره‌ها جمع‌آوری می‌شوند. - داده‌ها باید در یک فرمت ساختاریافته (مانند CSV یا Excel) ذخیره شوند. - اسکریپت باید با محتوای داینامیک یا JavaScript به‌خوبی کار کند. - کد باید به‌خوبی مستندسازی شده و شامل توضیحات کاملی برای اجرا باشد. **مهارت‌های مورد نیاز:** - تجربه قوی در وب اسکرپینگ با استفاده از پایتون (`BeautifulSoup`، `Scrapy` یا `Selenium`) یا R (`rvest`، `httr`). - آشنایی با پردازش صفحات متعدد (pagination) و محتوای پویا. - توانایی پاکسازی و سازمان‌دهی داده‌ها به‌طور مؤثر. - آگاهی از اصول اخلاقی در اسکرپینگ و رعایت قوانین وب‌سایت. **موارد تحویلی:** 1. یک اسکریپت وب اسکرپینگ کاربردی همراه با دستورالعمل‌های دقیق برای اجرا. 2. داده‌های جمع‌آوری‌شده در فرمت CSV یا Excel. 3. مستندسازی فرآیند اسکرپینگ. **اطلاعات تکمیلی:** لطفاً نمونه‌هایی از پروژه‌های مشابه وب اسکرپینگ که قبلاً انجام داده‌اید را در درخواست خود ارائه دهید. در صورت امکان، یک زمان‌بندی تقریبی برای تکمیل این پروژه ارائه دهید. : این پروژه برای جمع‌آوری اطلاعات دوره‌های کارشناسی (Undergraduate) و کارشناسی ارشد (Postgraduate) طراحی شده است. اطلاعات مربوط به هر دو سطح تحصیلی باید از وب‌سایت Study Australia استخراج شود. ما منتظر همکاری با شما هستیم!