یکشنبه 15 شهریور 1405

عامل‌های هوش مصنوعی OpenAI از کنترل خارج شدند؛ ماجرا چه بود؟

شرکت OpenAI نقش خود در حادثه اخیری را که طی آن عامل‌های هوش مصنوعی این شرکت کنترل یک انجمن ویکی آلمانی را در دست گرفته بودند، پذیرفت. این شرکت همچنین تأکید کرد که زمان تدوین استانداردهای مشخص برای اشتراک‌گذاری اطلاعات درباره حوادثی که در آن‌ها فناوری هوش مصنوعی رفتاری غیرمنتظره از خود نشان می‌دهد، فرارسیده است.
 

اعتراف رسمی OpenAI در شبکه اجتماعی ایکس

این شرکت در پستی در شبکه اجتماعی ایکس اعلام کرد که تا پیش از این، پدیده «عدم هم‌ترازی» را عمدتاً موضوعی پژوهشی می‌دانسته که صرفاً در قالب مقالات علمی مورد بررسی قرار می‌گرفت. عدم هم‌ترازی به شرایطی گفته می‌شود که مدل‌ها و عامل‌های هوش مصنوعی، اهدافی متفاوت از خواسته سازندگان و کاربران خود دنبال کنند.

بر اساس اعلام این شرکت، از آنجا که این پدیده اکنون منجر به بروز پیامدهای تازه‌ای در دنیای واقعی شده است، رویکرد فعلی باید متناسب با این مرحله جدید از توانمندی مدل‌های هوش مصنوعی گسترش یابد.
 

جزئیات حادثه ویکی آلمانی

به گزارش خبرگزاری رویترز، عامل‌های هوش مصنوعی OpenAI از محیط آزمایشی خود خارج شده و کنترل یک انجمن ویکی ناشناس آلمانی‌زبان را در دست گرفته و آن را به بستری برای تعامل سایر عامل‌های هوش مصنوعی تبدیل کرده بودند. بر پایه این گزارش، مدیران ارشد OpenAI هفته‌ها پیش از این ماجرا از وقوع آن مطلع شده بودند، اما به دلیل مشغله ناشی از رسیدگی به حادثه‌ای مشابه، یعنی نفوذ عامل‌های این شرکت به سرورهای Hugging Face، انتشار عمومی این خبر را به تعویق انداخته بودند. گفتنی است که راب بونتا، دادستان کل ایالت کالیفرنیا، هم‌اکنون در حال بررسی حادثه هک سرورهای Hugging Face است.

سخنگوی OpenAI در پاسخ به رویترز اعلام کرد که این شرکت بدون فرصت کافی برای بررسی دقیق گزارش منتشرشده، قادر به پاسخ‌گویی مشخص درباره ادعاها و یافته‌های آن نیست. با این حال، این سخنگو تأکید کرد که واحد حقوقی شرکت در هیچ مرحله‌ای مانع روند تحقیقات نشده است.
 

مقایسه با حادثه مشابه در Hugging Face

OpenAI در پست اخیر خود در شبکه‌های اجتماعی، حادثه ویکی آلمانی را نمونه‌ای دیگر از همان الگوی عدم هم‌ترازی مشاهده‌شده در رخدادهای پیشین دانست و آن را با حادثه نفوذ به Hugging Face مقایسه کرد؛ رخدادی که به گفته این شرکت، بر اساس دستورالعمل‌های متداول واکنش به حوادث امنیتی مدیریت شده بود.
 

هشدار کارشناسان درباره ریسک نشت اطلاعات

در همین راستا، جیکوب استاینهارت، بنیان‌گذار و مدیرعامل آزمایشگاه پژوهشی غیرانتفاعی Transluce، طی نشستی خبری در همین هفته اظهار داشت که ابزارهای توسعه‌یافته توسط آزمایشگاه‌های هوش مصنوعی، از نظر ماهیتی به‌سختی قابل کنترل هستند و ریسک قابل‌توجهی برای نشت اطلاعات از این آزمایشگاه‌ها به همراه دارند. وی تأکید کرد که رعایت استانداردهایی هم‌تراز با سایر حوزه‌های پژوهشی پرخطر، برای این فناوری نیز ضروری است.
 

نبود چارچوب مشخص برای گزارش‌دهی حوادث

OpenAI در بیانیه خود به این نکته اشاره کرد که نه این شرکت و نه جامعه گسترده‌تر فعال در حوزه هوش مصنوعی، تاکنون استاندارد مدونی برای گزارش موارد عدم هم‌ترازی در مراحل آموزش، ارزیابی و استقرار مدل‌ها تدوین نکرده‌اند؛ مواردی که لزوماً شباهتی به حوادث امنیتی متعارف ندارند، اما می‌توانند بینش‌های ارزشمندی درباره رفتار هوش مصنوعی و ریسک‌های آتی آن ارائه دهند.

این شرکت اعلام کرد که در غیاب چنین استانداردی، هم‌اکنون در حال طراحی یک چارچوب مشخص است که قرار است طی هفته‌های پیش رو منتشر شود. همچنین OpenAI تصریح کرد که در کنار این اقدام، با ده‌ها نهاد نظارتی دولتی در سراسر جهان نیز در حال همکاری بر سر این موضوع است.

گفتنی است که OpenAI تنها شرکت فعال در این حوزه نیست که با چالش عدم هم‌ترازی عامل‌های هوش مصنوعی روبه‌رو بوده است؛ شرکت‌های متا و آنتروپیک نیز پیش‌تر مواردی از بدرفتاری عامل‌های هوش مصنوعی خود را تأیید کرده بودند.

آخرین اخبار

قیمت جدید دلار و انواع ارزها در ۱۵ شهریور ۱۴۰۵/ دلار صعودی ماند + جدول

به گزارش خبرگزاری خبرآنلاین، قیمت دلار امروز در بازار...

نرخ جدید سود اعلام شد/ جدول تغییرات نرخ سود بین‌بانکی

به گزارش خبرگزاری خبرآنلاین، در حالی که بازار مالی...

رأی دادن الکترونیکی چه مزایایی دارد؟

قرار است انتخابات شوراها تمام الکترونیکی برگزار شود و...

راز رصدهای نجومی هزار سال پیش فاش شد؛ «زیج حاکمی» چه ناگفته‌هایی دارد؟

به گزارش خبرگزاری مهر به نقل از دانشگاه تهران،...

آخرین وضعیت سیاهه انتشار آلودگی هوای شهرها

معاون محیط زیست انسانی سازمان حفاظت محیط زیست با...

تاکید قطر بر دستیابی به توافق جامع برای تحقق صلح پایدار در منطقه

به گزارش خبرآنلاین، محمد بن عبدالرحمان آل ثانی نخست...

روایتی از بازار داغ دلار و سکه؛ وقتی ارزپاشی کارساز نیست، چاره چیست؟

به گزارش خبرآنلاین،اگر این روزها سری به سبزه‌میدان یا...

اولیانوف: در اجلاس شورای حکام، موضوع ایران مورد بحث قرار می‌گیرد

بر اساس گزارش خبرآنلاین، میخائیل اولیانوف، نماینده کشور روسیه...

استاندار کردستان در پی انفجار تانکر سوخت ۲ روز عزای عمومی اعلام کرد

پایگاه خبری تحلیلی انتخاب (Entekhab.ir) : ایرنا:...

مسکن ملی به کجا رسید؟

به گزارش خبرآنلاین،از حدود یک ماه قبل سقف تسهیلات...

تخم مرغ برای قلب مفید است یا مضر!

پایگاه خبری تحلیلی انتخاب (Entekhab.ir) : مهر:...

آیا «دهان‌شویه» جای مسواک را می گیرد

پایگاه خبری تحلیلی انتخاب (Entekhab.ir) : استفاده...

وعده سازمان غذا و دارو برای تأمین واکسن آنفلوانزا

پایگاه خبری تحلیلی انتخاب (Entekhab.ir) : مدیرکل...

ایمپلنت دندان در مارلیک؛ هزینه، مراحل و بهترین روش کاشت دندان

ایمپلنت دندان در مارلیک؛ هزینه، مراحل و بهترین روش...

ثبت شرکت یک روزه | واقعیت دارد یا فقط یک ادعاست؟

ثبت شرکت 1 روزه ادعایی است که اخیرا زیاد...

ویدیو/ هشدار وزارت بهداشت درباره روند افزایشی کرونا

معاون بهداشت وزارت بهداشت، درمان و آموزش پزشکی با...

دنده‌عقب ۹ هزار راننده را در تهران نقره داغ کرد

معاون اجتماعی و فرهنگ ترافیک پلیس راهور تهران بزرگ...

تبلیغات متنی