پیاده سازی تسک های متداول LLMs با زبان پایتون

با سلام موضوع پروژه درباره درس مبانی بازیابی اطلاعات و جستجوی وب میباشد. برای انجام این پروژه باید یک LLM از پیش آموزش دیده و مناسب برای زبان فارسی را انتخاب کنید و Fine-tune کنید. در اینجا شما باید از مدل زبانی ParsBERT برای درک زبان فارسی استفاده کنید. در این پروژه 3 تسک زیر (که LLM ها قادر به یادگیری آن هستند) باید انجام شود: Entailment task Writing Emails task News Summarization task دقت کنید که Fine-tuning از طریق روش های Zero-shot , Few-shot و امثالهم مورد قبول نیست و باید از مدل LoRA با یادگیری پارامتر استفاده شود. علاوه بر سورس کد پروژه کامنت گذاری کافی و مناسب، فایل دیتاست و یک ویدیو ارائه کوتاه 15 دقیقه ای برای درک کامل نحوه پیاده سازی مورد نیاز است. ددلاین پروژه هم تا چهارشنبه 13 تیر 1403 میباشد.