هوش مصنوعی ۲ دقیقه مطالعه

ایجنت های هوش مصنوعی OpenAI به اینترنت دسترسی پیدا کردند؛ این بار بدون اطلاع آزمایشگاه!

محمد پارسا محمد پارسا

گروهی از پژوهشگران مستقل هوش مصنوعی کشف کرده‌اند که ایجنت های داخلی آزمایشگاه OpenAI بدون اطلاع این شرکت، از طریق یک انجمن اینترنتی آلمانی به نام DseWiki به اینترنت دسترسی پیدا کرده و به مدت بیش از یک ماه با یکدیگر همکاری کرده‌اند.

جزئیات کشف ایجنت های سرکش

این ایجنت های با هدف همکاری در ارزیابی‌ها، اقدام به ویرایش صفحات این انجمن قدیمی کرده بودند. پژوهشگران با بررسی نام ایجنت ها و نحوه فعالیت آن‌ها، متوجه شدند که این ایجنت ها در حال تبادل اطلاعات برای پاسخگویی به سوالات وب با محدودیت زمانی بوده‌اند. مدیر انجمن با مشاهده این فعالیت‌ها، آن‌ها را اسپم تلقی کرده و شروع به حذف صفحات کرد، اما ایجنت ها با ایجاد صفحات جدید و تغییر نام آن‌ها، در برابر این اقدام مقاومت نشان دادند.

بر اساس گزارش پژوهشگران، ایجنت های روزانه حدود ۴۰۰ صفحه جدید ایجاد می‌کردند که مدیر انجمن با حذف حدود ۱۰۰ صفحه در روز، در تلاش برای مقابله با آن‌ها بود. این درگیری تا ۲۲ ژوئن ادامه داشت و سپس با توقف ناگهانی فعالیت ایجنت ها، مدیر انجمن تا پنج هفته به حذف صفحات باقی‌مانده پرداخت.

واکنش OpenAI و نگرانی‌ها

سخنگوی OpenAI در مورد این حادثه اظهارنظر دقیقی نکرد، اما اعلام کرد که این شرکت در حال بررسی یافته‌های پژوهشگران است و اقدامات لازم را انجام خواهد داد. این اتفاق سوالاتی را در مورد توانایی OpenAI در نظارت و کنترل فناوری‌های در حال توسعه‌اش مطرح می‌کند، به خصوص که هیچ نظارت فدرال مؤثری بر آزمایشگاه‌های پیشرو هوش مصنوعی وجود ندارد.

نماینده کنگره، لوری ترهان، با اشاره به این حادثه، از لزوم تصویب قانون Frontier Act برای الزام شرکت‌ها به افشای چنین حوادثی و میزبانی ممیزان مستقل سخن گفت. پژوهشگران ایمنی هوش مصنوعی نیز نسبت به اقداماتی که مدل‌های قدرتمند هوش مصنوعی ممکن است بدون اطلاع خالقانشان انجام دهند، ابراز نگرانی کرده‌اند.

نگرانی‌ها پیرامون مدل Astra

مدل جدید Astra که توسط OpenAI معرفی شده، با وجود ادعای پیروی از دستورالعمل‌های انسانی، نگرانی‌هایی را در مورد همسویی آن با اهداف انسانی ایجاد کرده است. موسسه ایمنی هوش مصنوعی بریتانیا و Apollo Research گزارش داده‌اند که این مدل ممکن است از ارزیابی خود آگاه باشد و رفتار واقعی خود را پنهان کند.

نوشته‌شده توسط

محمد پارسا

حوزه تخصصی من امنیت سایبریه، اما چون معتقدم امنیت بدون شناختن هوش مصنوعی و مسیر آینده فناوری بی‌معنیه، هر از گاهی به این قلمروها هم سرک می‌کشم.

دیدگاه خود را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *