به نقل از اقتصاد کشور، محققان امنیت سایبری اعلام کردهاند مدل هوش مصنوعی «Kimi K3» متعلق به استارتاپ چینی مونشات توانسته از محیط آزمایشی ایزولهشده خارج شود؛ رخدادی که نگرانیها درباره توانایی مدلهای پیشرفته برای عبور از محدودیتهای امنیتی و احتمال سوءاستفاده از آنها را افزایش داده است.
فرار Kimi K3 از محیط آزمایشی امنیتی
محققان شرکت امنیت سایبری «فرانتیر سکیوریتی» اعلام کردند Kimi K3، مدل هوش مصنوعی متعلق به استارتاپ چینی «مونشات»، توانسته از محیط آزمایشی طراحیشده توسط مؤسسه ایمنی هوش مصنوعی بریتانیا خارج شود.
مدلهای هوش مصنوعی در جریان آزمایشهای امنیتی معمولاً در محیطهای ایزوله قرار میگیرند تا میزان دسترسی آنها به اطلاعات خارجی و تواناییشان برای حل مستقل مسائل ارزیابی شود. بر اساس یافتههای محققان، Kimi K3 توانسته با عبور از محدودیتهای این محیط، به اطلاعاتی فراتر از محدوده پیشبینیشده دسترسی پیدا کند.
چرا خروج یک مدل هوش مصنوعی از محیط ایزوله مهم است؟
اهمیت این رویداد از آن جهت است که اگر یک مدل استدلالی پیشرفته بتواند راهی برای عبور از محدودیتهای محیط آزمایشی پیدا کند، مدلهای دیگری با سطح دسترسی مشابه نیز ممکن است از روشهای مشابه استفاده کنند.
محققان هشدار دادهاند عمومی بودن Kimi K3 میتواند نگرانیهای امنیتی را افزایش دهد؛ زیرا در صورت تأیید قابلیتهای گزارششده، افراد مخرب نیز ممکن است تلاش کنند از این مدل برای شناسایی یا بهرهبرداری از ضعفهای امنیتی استفاده کنند.
تکرار یک نگرانی در صنعت هوش مصنوعی
این اتفاق در شرایطی گزارش شده که پیش از این نیز نمونههایی از رفتارهای مشابه مدلهای هوش مصنوعی در جریان آزمایشهای امنیتی از سوی شرکتهای بزرگ فناوری گزارش شده است.
گزارشهای مرتبط با شرکتهایی مانند متا، اوپنایآی و آنتروپیک نشان میدهد توانایی مدلهای پیشرفته برای تعامل پیچیده با محیط و تلاش برای عبور از محدودیتهای تعریفشده، به یکی از موضوعات مهم در تحقیقات ایمنی هوش مصنوعی تبدیل شده است.
افزایش توانایی مدلهای استدلالی، در کنار مزایای آنها برای حل مسائل پیچیده، ضرورت توسعه سازوکارهای دقیقتر برای آزمایش، کنترل دسترسی و ارزیابی امنیتی این سامانهها را بیش از گذشته برجسته کرده است.
برای دنبال کردن تازهترین اخبار هوش مصنوعی، امنیت سایبری و فناوریهای نوین، اقتصاد کشور را دنبال کنید.