مدلها
هوش مصنوعی عربی؛ سکوی برتری مدلهای زبانی نسخه دوم منتشر شد
نسخه دوم سکوی برتری مدلهای زبانی عربی (Open Arabic LLM Leaderboard 2) منتشر شد تا ارزیابی مدلهای هوش مصنوعی را شفافتر و یکپارچهتر کند.
پژوهش
آزمون DABstep؛ چالشی تازه برای هوش مصنوعی در تحلیل داده
معیار جدید DABstep با بیش از ۴۵۰ وظیفه تحلیل داده، توانایی هوش مصنوعی را در استدلال چندمرحلهای میسنجد؛ بهترین مدلها تنها ۱۶٪ دقت دارند.
پژوهش
هوش مصنوعی و چالش جدید: ارزیابی استدلال صوتی با Big Bench Audio
مجموعه داده Big Bench Audio به کمک هوش مصنوعی، توانایی استدلال مدلهای صوتی را میسنجد؛ نتایج اولیه نشان میدهد مدلهای گفتاربهگفتار از مدلهای بومی جلوترند.
پژوهش
هوش مصنوعی و چتبات: تست اصلاح خطا با Keras و TPU در آرنای و حضور LLMs
در این مقاله، تیم Hugging Face با استفاده از Keras و تراشههای TPU، تجربهای بر روی چتباتها انجام دادند تا توانایی در اصلاح خطاهای خود را ارزیابی کنند.
پژوهش
هوش مصنوعی در دنیای عربی: AraGen، جدیدترین بنچمارک و لیدر بور برای مدلهای LLM
مقالهای جامع دربارهٔ AraGen، بنچمارک مولد زبان عربی، با سیستم ارزیابی ۳C۳H؛ نمایش ردهبندی پویا و تواناییهای مدلهای LLM در زبان کممنبع.