شرکت آنتروپیک (Anthropic)، یکی از توسعه‌دهندگان برجسته مدل‌های زبانی بزرگ، اخیراً سخنانی نگران‌کننده درباره آینده هوش مصنوعی بیان کرده است. این شرکت هشدار داده که یک هوش مصنوعی خودسر و فاقد کنترل مؤثر می‌تواند خطری «فاجعه‌بار و وجودی» برای بشریت به همراه داشته باشد. این اعلامیه بازتاب گسترده‌ای در محافل فناوری و سیاست‌گذاری داشته است.

تهدیدی از رده اول چیست؟

آنتروپیک این نوع تهدید را «تهدیدی از رده اول» claiming می‌کند؛ به این معنا که اهمیت آن در سطح پایین‌ترین خطرات امنیت ملی و بین‌المللی قرار می‌گیرد. برداشت رایج از هشدار این شرکت، اشاره به احتمال رفتارهای غیرمنتظره و غیرقابل‌کنترل در سیستم‌های پیشرفته است که بدون مکانیسم‌های ایمنی کافی می‌توانند از هدف اولیه خود منحرف شوند.

این نگرانی در پاسخ به پیشرفت‌های سریع در حوزه یادگیری تقویتی و انگیزشی طراحی شده؛ جایی که سیستم‌ها می‌آموزند بدون دخالت مستقیم انسان تصمیم‌های پیچیده بگیرند.

چرا آنتروپیک چنین هشداری را مطرح کرده است؟

آنتروپیک که مدل‌ها و قابلیت‌هایش را به دلیل ریسک‌های متعدد محدود کرده، اکنون خواستار توجه جدی‌تر جامعه به مسائل ایمنی هوش مصنوعی شده است. این شرکت معتقد است دانش فنی و قدرت محاسباتی همراه با دلیل خردمندانه می‌تواند ناخواسته منجر به خروج از کنترل ​​شود.

قدرت هوش مصنوعی در طول چند سال اخیر به شدت افزایش یافته و در حالی‌که بسیاری از توانایی‌های آن مفید بوده‌اند، پتانسیل بروز رفتارهای نامطلوب غیرقابل پیش‌بینی همچنان پابرجاست.

  • کنترل و هدایت رفتار سیستم‌های پیشرفته وانمود همچنان وظیفه‌ای چالش‌برانگیز باقی مانده است
  • نیاز فوری به استانداردهای بین‌المللی ایمنی و شفافیت در توسعه مدل‌ها
  • ضرورت آموزش و آگاه‌سازی عموم درباره خطرات بالقوه
  • همکاری نزدیک دولت‌ها، شرکت‌ها و نهادهای مستقل برای نظارت مؤثر

پیامی برای سیاست‌گذاران و جامعه فناوری

آخرین هشدار آنتروپیک نشان می‌دهد که حتی توسعه‌دهندگان پیشرو در حوزه هوش مصنوعی، ریسک‌های فاجعه‌بار این فناوری را نادیده نمی‌گیرند. پیام اصلی این شرکت به جامعه فناوری و تصمیم‌گیرندگان سیاسی روشن است: پیش از آنکه سیستم‌های هوش مصنوعی به اندازه کافی هوشمند شوند، باید فرآیندهای نظارت ذاتی و ابزارهای باز unfolds فراهم شوند.

پرسش‌های پرتکرار

آنتروپیک دقیقاً هشدار اصلی خود را چگونه بیان کرده است؟

شرکت آنتروپیک اعلام کرده که یک هوش مصنوعی مستقل و ساعت خودسر می‌تواند خطر فاجعه‌بار و وجودی برای بشریت ایجاد کند و این را در ردیف تهدیدهای درجه یک مِی‌داند.

چه اقداماتی برای کاهش این خطرات پیشنهاد می‌شود؟

مهم‌ترین اقدامات شامل تقویت مکانیسم‌های اصالت کهن، تدوین استانداردهای بین‌المللی ایمنی، افزایش شفافیت در فعالیت‌ها و ترویج فرهنگ توجه به مسائل اخلاقی در توسعه این فناوری است.