پژوهش
هوش مصنوعی و ارزیابی کد: BigCodeArena با اجرای واقعی کدها نقش هیجانانگیز
پلتفرم BigCodeArena با اجرای کد برای ارزیابی مدلهای تولید کد، استاندارد جدیدی برای تحلیل عملکرد کدهای تولیدی توسط هوش مصنوعی معرفی میکند.
پژوهش
معرفی RTEB: استاندارد نوین ارزیابی بازیابی در هوش مصنوعی
RTEB، بنچمارک جدیدی برای ارزیابی دقیق واکشی بردارهای جاسازی، با استفاده از ترکیبی از دادههای عمومی و خصوصی، راهحلی شفاف و مشخص برای سنجش عملکرد مدلهای هوش مصنوعی در شرایط واقعی ارائه میدهد.
پژوهش
Gaia2 و ARE: ابزار هوش مصنوعی برای ارزیابی و استفاده از عاملهای هوشمند
در سال ۲۰۲۵، هاجیفیس با پروژ Gaia2 و ARE چارچوب باز برای ارزیابی عاملهای هوش مصنوعی در وظایف واقعی معرفی کرد و بزرگی در تعامل انسان–هوش مصنوعی برداشت.
پژوهش
هوش مصنوعی بدون خطر: راهنمای RiskRubric.ai برای ارزیابی استاندارد مدلها
RiskRubric.ai، استانداردی نوین برای ارزیابی ریسک مدلهای هوش مصنوعی، امنیت، حریم خصوصی و پایداری را در ارزیابی مدلها به یکپارچگی میآورد.
پژوهش
هوش مصنوعی در بازیهای ویدئویی متنی: عملکرد LLMs و چالشها
این مقاله به بررسی توانایی مدلهای زبان بزرگ در بازیهای متنی میپردازد، روشهای ارزیابی، چالشهای فنی و راهکارهای بهبود را بررسی میکند.