پژوهش مدل زبانی مولد OpenAI برای اثبات خودکار قضیه‌های ریاضی چگونه کار می‌کند؟ OpenAI با توسعه یک مدل زبانی مولد، گامی بلند در اثبات خودکار قضیه‌های ریاضی برداشته است. در این مقاله به بررسی این دستاورد و کاربردهای آن می‌پردازیم. ۱۷ شهریور ۱۳۹۹ ۳ دقیقه پژوهش آموزش مدل‌های هوش مصنوعی برای خلاصه‌سازی بهتر با بازخورد انسانی OpenAI با استفاده از یادگیری تقویتی از بازخورد انسانی، مدل‌های زبانی را برای خلاصه‌سازی دقیق‌تر و باکیفیت‌تر آموزش داده است. این روش نتایج بهتری دارد. ۱۴ شهریور ۱۳۹۹ ۲ دقیقه مدل‌ها هوش مصنوعی و Reformer: پردازش دنباله‌های نیم میلیون توکنی با ۸ گیگابایت مدل Reformer با مصرف تنها ۸ گیگابایت حافظه، نیم میلیون توکن را آموزش می‌بیند و برای پردازش دنباله‌های طولانی کارآمد است. در این مقاله بررسی می‌شود. ۱۳ تیر ۱۳۹۹ ۲ دقیقه اخبار رونمایی OpenAI از API جدید برای دسترسی به مدل‌های پیشرفته هوش مصنوعی OpenAI API اختصاصی خود را برای مدل‌های جدید هوش مصنوعی منتشر کرد. این امکان، مسیر تازه‌ای برای توسعه‌دهندگان و کسب‌وکارها به منظور بهره‌گیری از قابلیت‌های پیشرفته فراهم می‌سازد. ۲۲ خرداد ۱۳۹۹ ۲ دقیقه پژوهش آموزش کم‌نمونه در هوش مصنوعی: معرفی GPT-3 و یادگیری چند نمونه‌ای مقاله‌ای درباره GPT-3 و مفهوم few-shot learning که نشان می‌دهد مدل‌های زبانی بزرگ چگونه با چند مثال، وظایف متنوع را بدون آموزش مجدد یاد می‌گیرند. ۸ خرداد ۱۳۹۹ ۲ دقیقه آموزش تولید متن با هوش مصنوعی: بررسی روش‌های Decoding در مدل‌های زبانی در این مقاله از وبلاگ هوما، روش‌های مختلف تولید متن با مدل‌های زبانی مانند جستجوی حریصانه، beam search، sampling و top-p را بررسی می‌کنیم و نحوه پیاده‌سازی آن‌ها را با کتابخانه transformers یاد می‌گیریم. ۱۱ اسفند ۱۳۹۸ ۳ دقیقه آموزش آموزش مدل زبانی از صفر با Transformers و Tokenizers در Hugging Face در این مقاله یاد می‌گیرید چگونه با کتابخانه‌های Transformers و Tokenizers یک مدل زبانی اختصاصی از صفر آموزش دهید و آن را برای وظایف پایین‌دستی بهینه کنید. ۲۵ بهمن ۱۳۹۸ ۳ دقیقه پژوهش هوش مصنوعی و پدیده دابل دسانت؛ راز افت و خیز دوباره مدل‌ها پژوهش جدید OpenAI نشان می‌دهد عملکرد مدل‌های هوش مصنوعی با بزرگ‌تر شدن، ابتدا بهبود، سپس افت، و دوباره بهبود می‌یابد. این پدیده «دابل دسانت» نام دارد. ۱۴ آذر ۱۳۹۸ ۲ دقیقه مدل‌ها انتشار نسخه نهایی GPT-2 با ۱.۵ میلیارد پارامتر؛ گامی در شفاف‌سازی هوش مصنوعی OpenAI بزرگ‌ترین نسخه GPT-2 با ۱.۵ میلیارد پارامتر را به‌همراه کد و وزن‌های مدل برای تشخیص خروجی منتشر کرد. این آخرین گام از انتشار مرحله‌ای GPT-2 است. ۱۴ آبان ۱۳۹۸ ۲ دقیقه مدل‌ها تنظیم دقیق GPT-2 از ترجیحات انسانی ما مدل زبانی GPT-2 با پارامتر ۷۷۴ میلیون را با استفاده از بازخورد انسانی برای وظایف مختلف تنظیم دقیق کرده‌ایم و با موفقیت ترجیحات برچسب‌گذارهای انسانی خارجی ر ۲۸ شهریور ۱۳۹۸ ۲ دقیقه