پژوهش
برندمارک 3LM: استاندارد نوین هوش مصنوعی عربی در STEM و برنامهنویسی
برندمارک ۳LM، استانداردی جدید برای ارزیابی مدلهای زبانی عربی در حوزههای علمی‑فناوری و برنامهنویسی، با تمرکز بر مسائل تخصصی و کد. در این مقاله به جزئیات روش، مجموعه دادهها و نتایج کلیدی میپردازیم.
پژوهش
هوش مصنوعی در تحلیل ویدیوهای طولانی: TimeScope و چالشهای آن
TimeScope، بنچمارکی متنباز برای سنجش توانایی مدلهای هوش مصنوعی در درک ویدیوهای طولانی تا 8 ساعت با چالشهای متعدد و کاهش هزینههای پردازش.
پژوهش
هوش مصنوعی: رقابت E2LM 2025 – ارزیابی زودهنگام مدلهای زبانی
در قالب جدید پیشآموزش مدلهای زبانی، رقابت E2LM 2025 مهندسان را میطلبد؛ نتایج در NeurIPS 2025 اعلام خواهد شد با سه ماه برای ثبتنام
پژوهش
ScreenSuite: جامعترین مجموعه ارزیابی ایجنتهای GUI در هوش مصنوعی
ScreenSuite بهعنوان اولین سوییتم جامع برای سنجش عملکرد ایجنتهای GUI در هوش مصنوعی معرفی شد؛ در کمتر از ۳۰ ثانیه میتوانید مدلهای VLM را برپایه معیارهای دقیق مقایسه کنید.
پژوهش
هوش مصنوعی: HELMET، رویکرد جامع برای ارزیابی مدلهای طویل متن
HELMT، چارچوب ارزیابی نوین برای مدلهای زبان با طول متن بلند، به صورت متن باز و تحقیقاتی، نمونههای کاربردی و مزایای آن در دنیای هوش مصنوعی را میپذیرد.
پژوهش
ارتقای ارزیابی هوش مصنوعی عربی: معرفی AraGen و Instruction Following
در این مقاله به بهروزرسانیهای اخیر در Leaderboard عربی میپردازیم؛ معرفی AraGen 03–25، Instruction Following و چگونگی ارزیابی مدلهای زبان عربی با معیارهای IFEval دقیق و کامل توسعه
پژوهش
نماینده خود را با Arize Phoenix ردیابی و ارزیابی کنید
ما در مسیر پیشرفت و دموکراتیزه کردن هوش مصنوعی از طریق متنباز و علم آزاد هستیم.