معرفی PaliGemma: مدل جدید هوش مصنوعی از گوگل

گوگل اخیراً مدل توانمند PaliGemma را معرفی کرده که توانایی درک همزمان تصویر و متن را بهبود می‌بخشد. این مدل در Hugging Face Hub به‌صورت متن باز در دسترس است و با کتابخانه Transformers قابل استفاده است.

ویژگی‌های برجسته PaliGemma

  • دست‌پوشه سه نوع مدل: پایه، ترکیبی و فین‌تین‌شده
  • چندین رزولوشن و دقت‌های مختلف برای تناسب با نیازهای مختلف
  • پشتیبانی از اسناد، تشخیص، تقسیم‌بندی و تعامل طبیعی با تصویر و متن
  • یکپارچگی کامل با Pipelines و FastAPI برای تکمیل سریع

چگونه از PaliGemma استفاده کنیم؟

برای اجرای مدل، می‌توانید از کدهای رسمی در GitHub یا در محیط‌های Colab استفاده کنید. ما در این بخش راهنمایی گام به گام برای درایور، نصب کتابخانه و فراخوانی مدل را ارائه می‌دهیم.

پرسش‌های پرتکرار

PaliGemma چیست و چه قابلیت‌هایی دارد؟

PaliGemma یک مدل هفت‌ام هوش مصنوعی گوگل است که توانایی درک همزمان تصویر و نویسندگی متن را دارد. این مدل می‌تواند توصیف تصویر، پاسخ به سوالات تصویری، تشخیص اشیاء، تقسیم‌بندی و تبدیل متن را انجام دهد.

برای استفاده از PaliGemma کجا می‌توانم دسترسی پیدا کنم؟

مدل PaliGemma در هاب مدل‌های Hugging Face به‌صورت باز (Open Source) منتشر شده و می‌توانید آن را از طریق GitHub دانلود کرده و در پروژه‌های خود استفاده کنید. همچنین مستندات کامل و نمونه کدهای اولیه در وب‌سایت Google و Hugging Face موجود است.