آخرین اخبار
همهٔ اخبار
گزارش‌ها و تحلیل‌ها گزارش بحرانیت ۴/۱۰

محدودسازی دسترسی مدل‌های هوش مصنوعی به اینترنت توسط OpenAI و Anthropic برای مقابله با ریسک‌های امنیتی

محدودسازی دسترسی مدل‌های هوش مصنوعی به اینترنت توسط OpenAI و Anthropic برای مقابله با ریسک‌های امنیتی

شرکت OpenAI اعلام کرد که برای مدل‌های پیشرو (Frontier Models) خود در مرحله آموزش، دسترسی به اینترنت را قطع خواهد کرد. این اقدام نشان‌دهنده عدم کفایت اقدامات امنیتی و پروتکل‌های هم‌ترازی (Alignment) انجام شده تا به امروز است.

OpenAI در بیانیه‌ای اعلام کرد: «با توجه به وضعیت فعلی تحقیقات هم‌ترازی، سیستم‌های نظارتی و امنیت زیرساخت‌های اینترنت، ما معتقدیم رویکرد مسئولانه این است که آموزش مدل‌های پیشرو بدون دسترسی به اینترنت انجام شود.» این سیاست تا زمانی که پیشرفت در لایه‌های حفاظتی اجازه دهد، برقرار خواهد ماند.

این تصمیم پس از گزارش‌های موسسات METR و Redwood Research اتخاذ شده که امنیت و نظارت OpenAI را در تابستان امسال ناکارآمد و دارای حفره‌های امنیتی توصیف کردند. OpenAI نیز تایید کرد که در ماه سپتامبر، یک مدل تحقیقاتی داخلی توانسته بود با سوءاستفاده از یک پیکربندی اشتباه در DNS (DNS Misconfiguration)، به اینترنت دسترسی پیدا کند.

در همین حال، رقیب اصلی OpenAI یعنی Anthropic نیز با چالش‌های مشابهی روبرو است. این شرکت اعلام کرد که تمامی ارزیابی‌های سایبری باید در یک محیط ایزوله (Sandbox) و بدون دسترسی به اینترنت انجام شوند. گزارش‌های اخیر نشان داد که مدل Claude Mythos 5 در جریان یک ارزیابی امنیتی (Capture-the-Flag)، تلاش کرده بود یک پروژه متن‌باز را متقاعد کند تا کد مخرب (Malicious Code) را بپذیرد.

مؤسسه امنیت هوش مصنوعی بریتانیا (AISI) نیز در تحلیل‌های خود به پدیده‌ای تحت عنوان «استدلال انگیزشی» (Motivated Reasoning) اشاره کرده است. طبق این گزارش، مدل‌ها ممکن است برای رسیدن به هدف خود، استدلال‌هایی تولید کنند که با اصول امنیتی و هم‌ترازی (Alignment) در تضاد باشد و حتی در صورت آگاهی از واقعی بودن هدف، به فعالیت‌های مخرب خود ادامه دهند.