صنعت انتشارات خبری امروزه با چالش بزرگی روبه‌رو است؛ ربات‌های جمع‌آوری داده (اسکرپر) که برای تغذیه مدل‌های هوش مصنوعی استفاده می‌شوند، به‌سرعت محتوای نه‌منشور شده و حتی منتشر شده را کپی می‌کنند. این روند نه‌تنها مالکیت معنوی ناشران را تهدید می‌کند، بلکه اکوسیستم اقتصادی رسانه‌ها را به هم می‌ریزد. در پاسخ به این بحران، شرکت‌های بزرگ فناوری و هوش مصنوعی وعده داده‌اند که راهکار استاندارد و فنی‌تری را برای کنترل این فرآیند ارائه دهند.

پروتکل‌های جدید مسدودسازی هوشمند

بر اساس گزارش‌های اخیر، غول‌های صنعت هوش مصنوعی در حال توسعه یا حمایت از پروتکل‌های جدیدی هستند که به ناشران امکان می‌دهند با دقت بالاتر مشخص کنند که کدام بخش از سایت برای ربات‌های کلهر (Crawler) باز باشد و کدام بخش مسدود شود. برخلاف فایل robots.convention قدیمی که اغلب نادیده گرفته می‌شود، این روش‌های جدید می‌توانند اتیکت‌گذاری دقیق‌تری روی محتوا داشته باشند و دسترسی ربات‌ها را بر اساس نوع مطالب تنظیم کنند.

تأثیر بر اقتصاد رسانه‌ها

ناشران معتقدند که مسدودسازی کامل اسکرپینگ باعث می‌شود که مدل‌های زبانی از محتوای تازه و به‌روز بلافاصله محروم شوند، اما در کنار آن، مسیر درآمدزایی از اشتراک‌ها را حفظ می‌کند. این راهکار احتمالا یک سیستم اعتبارسنجی ایجاد می‌کند که فقط ربات‌های مجاز و متعهد به حقوق مالکیت معنوی می‌توانند به داده‌ها دسترسی پیدا کنند.

چالش‌های فنی و حقوقی

اجرای چنین سیستمی نیازمند همکاری یکپارچه بین توسعه‌دهندگان موتورهای جستجو، پلتفرم‌های هوش مصنوعی و ناشران است. مقاومت توسعه‌دهندگان مدل‌های هوش مصنوعی در برابر محدودیت دسترسی، یکی از بزرگ‌ترین موانع پیش‌روی این پیمان نیست، بلکه دشواری فنی پیاده‌سازی استانداردهای یکپارچه در مقیاس جهانی است.

  • کنترل دقیق‌تر دسترسی ربات‌ها به صفحات مختلف سایت
  • حفظ تعادل بین مصرف داده توسط هوش مصنوعی و حقوق نشر
  • افزایش شفافیت در نحوه استفاده از محتوای خبری توسط الگوریتم‌ها
  • کاهش نیاز به اقدامات حقوقی پرهزینه برای ناشران

پرسش‌های پرتکرار

اشتباه اسکرپینگ در هوش مصنوعی چه معنایی دارد؟

اسکرپینگ به فرآیند خودکار جمع‌آوری داده‌های متنی از وب‌سایت‌ها توسط ربات‌های نرم‌افزاری گفته می‌شود که اغلب برای آموزش مدل‌های زبانی بزرگ استفاده می‌شود.

آیا مسدودسازی کامل اسکرپینگ توصیه می‌شود؟

اکثر متخصصان توصیه می‌کنند به جای مسدودسازی کامل، از پروتکل‌های انتخابی استفاده شود تا دسترسی با رعایت اصول اخلاقی و حقوقی مدیریت شود.