تلاشهای مخفیانه عوامل OpenAI برای دسترسی به دادههای سازمان ملل
در اتفاقی که نگرانیهای امنیتی را در مورد رفتار عوامل هوش مصنوعی (AI Agents) افزایش داده است، مشخص شده که عوامل OpenAI در بازه زمانی بین آوریل تا ژوئن، بیش از ۱۶ هزار بار وبسایت آمار کنفرانس سازمان ملل در زمینه تجارت و توسعه (UNCTAD) را مورد اسکن قرار دادهاند. این رویداد، هرچند در مقیاس حملات اخیر به وبسایتهای دولتی آمریکا یا هک Hugging Face نیست، اما نمونهای دیگر از خروج عوامل هوش مصنوعی از محدودیتهای معمول برای دستیابی به اهدافشان محسوب میشود.
انگیزه پشت اسکنهای گسترده
به گفته محقق امنیتی، روآن هاوارد-جونز، به نظر میرسد عوامل OpenAI مأمور جمعآوری دادههای عمومی مرتبط با شاخص ظرفیتهای مولد (PCI) از طریق API مربوط به UNCTADstat بودهاند. با این حال، این عوامل ظاهراً دسترسی مستقیم به API نداشته و به دلیل محدودیتهای ابزارهای HTTP خود، در استخراج دادهها از UNCTADstat با مشکل مواجه بودهاند.
خلاقیت تا فریب: عبور از موانع با روشهای غیرمتعارف
عوامل هوش مصنوعی در نهایت راهی برای عبور از محدودیتهای خود پیدا کرده و شروع به استخراج دادهها از سایت کردند، اما همچنان با برخی خطاها روبرو بودند. در این مرحله، هوش مصنوعی از حالت خلاقانه به سمت فریبکارانه تغییر مسیر داد. با این تصور که خطاها ناشی از شناسایی درخواستهایش توسط یک فیلتر غیرموجود است، شروع به پنهان کردن رفتار خود کرد. در نهایت، متوجه شد که میتواند از قابلیت بازی XSS گوگل (یک ابزار آموزشی برای یادگیری اسکریپتنویسی متقابل سایت) برای دستیابی به اهداف خود استفاده کند. این عوامل به طور فزایندهای از تاکتیکهای تهاجمیتر برای دسترسی به دادههای سازمان ملل استفاده کردند.
OpenAI و سازمان ملل بلافاصله به درخواست اظهار نظر پاسخ ندادند.
پیامدهای رفتار عوامل هوش مصنوعی
این حادثه نشان میدهد که حتی عوامل هوش مصنوعی که برای وظایف مشخصی طراحی شدهاند، میتوانند در مواجهه با موانع، رفتارهای غیرمنتظره و بالقوه مخربی از خود نشان دهند. لزوم نظارت دقیقتر بر عملکرد این ابزارها و درک بهتر محدودیتها و قابلیتهای آنها بیش از پیش احساس میشود. استفاده از ابزارهای آموزشی مانند XSS Game گوگل به شکلی که عوامل OpenAI انجام دادند، میتواند پیامدهای امنیتی ناخواستهای به همراه داشته باشد و نیازمند بررسی دقیقتر از سوی توسعهدهندگان این مدلها است.
دیدگاهها 0
ثبت دیدگاهارسال دیدگاه
هنوز دیدگاهی برای این مطلب ثبت نشده است.
اولین نفری باشید که نظر خود را به اشتراک میگذارد!