RAG Pipeline for Q&A

هدف ما توسعه‌ی یک پایپلاین (RAG) برای پاسخ‌گویی به سوالات در قالب چت، بر اساس یک متن ورودی است. این پایپلاین باید به گونه‌ای بهینه‌سازی شود که تنها بر اساس متن ورودی نتایج دقیقی ارائه دهد و از پاسخ های نامرتبط پرهیز کند. پارامترهای پاسخ مثل طول پاسخ و فرمت اون و ... باید قابل تنظیم باشند و در نهایت، این پایپلاین باید از طریق یک رابط کاربری ساده در دسترس کاربر قرار گیرد. به طور خلاصه ما یک پایپلاین RAG می خواهیم به علاوه یک رابط بسیار ساده کاربری (پایپلاین خیلی مهم تر از رابط کاربری است). در مورد فایل داده ورودی: یک فایل متنی به زبان آلمانی تشکیل شده از متن خالص و تعداد زیادی جدول. چون پردازش جدول دشوارتر از پردازش متن هست ما جدول ها رو به طور مجزا در قالب فایل های json در اختیار شما می گذاریم. (فایل رو بعد از توافق و تحویل پروژه در اختیار شما می گذاریم). در مورد بیس مدلی که شما استفاده می کنید: مدل مورد استفاده می تونه open-source باشه یا نباشه اگرچه ترجیح ما در این مرحله یک مدل open-source هست. ما از شما انتظار داریم به ما پیشنهاد بدید از کدوم مدل استفاده کنیم و کد شما چطور قراره به اون مدل دسترسی پیدا کنه (مثلا کدوم API) و ... . این پروژه بخش کوچیکی از یک پروژه بزرگتر هست ودر صورت موفقیت آمیز بودن پروژه ما مایلیم با فردی که اون رو انجام داده برای مراحل بعدی همکاری کنیم. مسایل مراحل بعد بسیار جذاب تر و چالشی تر خواهند بود و برای شما از نظر مالی منفعت بیشتری خواهند داشت. به همین دلیل برای ما بسیار مهمه که فردی که پروژه رو انجام می ده متخصص، کنجکاو، با پشتکار و باانگیزه باشه. ما تخصص نظری کافی در زمینه هوش مصنوعی، LLMها و ... داریم و قادریم کار شما رو با دقت و موشکافی بالا ارزیابی کنیم و بنابراین خواهشمندیم فقط در صورتی پیشنهاد انجام این پروژه رو بدید که در خودتون توانایی لازم برای انجامش رو می بینید.