هشدار جدی آنتروپیک درباره امنیت هوش مصنوعی
شرکت آنتروپیک (Anthropic)، یکی از پیشگامان در توسعه مدلهای زبانی بزرگ، در گزارشی تازه ضمن ابراز نگرانی از تکوین سناریوهای بحرانی، هشدار داد که هوش مصنوعیهای غیرمنضبط یا «فرمانرو» میتوانند خطراتی ویرانگر و حتی وجودی برای بشریت به همراه داشته باشند. این شرکت که سازنده مدل معروف کلو (Claude) است، بر این باور است که ریسکهای مرتبط با گریز از کنترل ماشینها دیگر صرفاً یک نگرانی نظری آیندهنگر نیست، بلکه یک تهدید عملی و فوریتمند محسوب میشود.
در این دیدگاه، آنتروپیک این نوع تهدیدات را «تهدیداتی از درجه اول» (Threats of the first order) نامگذاری کرده است. این واژگان نشاندهنده تغییر لحن از بحثهای فلسفی حول اخلاق هوش مصنوعی به سمت مباحث امنیتی و بقا است. مسئولان این شرکت معتقدند که اگر الگوریتمها به سطح خودآگاهی یا انگیزههای مستقل دست یافته و کنترل انسانی بر آنها از دست برود، پیامدهای آن میتواند غیرقابل بازگشت باشد.
چرا این هشدار اهمیت فناوری دارد؟
تغییر رویکرد آنتروپیک نشان میدهد که نگرانی از «هرجومرج» (Rogue AI) از مرحله پژوهشی به مرحله استانداردسازی صنعتی رسیده است. این شرکت استدلال میکند که بدون چارچوبهای سختگیرانه برای محدودسازی اهداف و اقدامات سیستمهای هوشمند، احتمال رخداد حوادث کاریکاتوری (Catastrophic events) افزایش مییابد. این موضوع اهمیت بخشیدن به اصول ایمنی (Safety) را در کنار قابلیتهای عملیاتی مدلها دوچندان میکند.
پیامدها برای صنعت هوش مصنوعی
این هشدار ممکن است تأثیرات عمیقی بر سیاستگذاریها و توسعهدهندگان هوش مصنوعی در سراسر جهان بگذارد. در ادامه، مهمترین نقاط عطف این بحث به شرح زیر است:
- نیاز فوری به ایجاد مراکز نظارتی مستقل برای-test کردن الگوریتمهای پیشرفته
- توسعه پروتکلهای استپ کردن (Kill Switch) برای قطع دسترسی به منابع محاسباتی
- همکاری بینالمللی برای تعریف معیارهای مشترک امنیت سایبری در برابر حملات مبتنی بر AI
- افزایش شفافیت شرکتها در گزارشدهی بحرانهای امنیتی به نهادهای قانونگذار
پرسشهای پرتکرار
آیا هوش مصنوعی فعلی واقعا تهدیدی وجودی برای انسان است؟
اکثر کارشناسان معتقدند که مدلهای فعلی خطر وجودی فوری ندارند، اما هشدار آنتروپیک بر قابلیتهای آینده و سناریوهای محتمل گریز از کنترل تمرکز دارد تا زودتر از موعد، زیرساختهای ایمنی اتریای شوند.
آنتروپیک چه راهکاری برای حل این مشکل پیشنهاد میدهد؟
شرکت آنتروپیک بر اولویتبخشی به ایمنی هوش مصنوعی (AI Safety) در فرآیند توسعه تأکید دارد، به این معنی که از شروع تا پایان، تهییجز محدودیتهای سختافزاری و نرمافزاری برای جلوگیری از رفتارهای نامتعارف سیستم حائز اهمیت است.