پیاده سازی تسک های متداول LLMs با زبان پایتون

با سلام موضوع پروژه درباره درس مبانی بازیابی اطلاعات و جستجوی وب میباشد. برای انجام این پروژه باید یک LLM از پیش آموزش دیده و مناسب برای زبان فارسی را انتخاب کنید و Fine-tune کنید. در اینجا شما باید از مدل زبانی ParsBERT برای درک زبان فارسی استفاده کنید. در این پروژه 3 تسک زیر (که LLM ها قادر به یادگیری آن هستند) باید انجام شود: Entailment task Writing Emails task News Summarization task دقت کنید که Fine-tuning از طریق روش های Zero-shot , Few-shot و امثالهم مورد قبول نیست و باید از مدل LoRA یا QLoRA با یادگیری پارامتر استفاده شود. ضمنا در مورد انجام تسک های ساده تر جایگزین تسک های ذکر شده قابل مذاکره است. علاوه بر سورس کد پروژه کامنت گذاری کافی و مناسب، فایل دیتاست و یک ویدیو ارائه کوتاه 15 دقیقه ای برای درک کامل نحوه پیاده سازی مورد نیاز است. ددلاین پروژه هم تا چهارشنبه 13 تیر 1403 میباشد.