پنج‌شنبه 9 مهر 1405

ترمز OpenAI برای «Astra»؛ چرا غول هوش مصنوعی مدل جدیدش را عقب انداخت؟

شرکت OpenAI اعلام کرد عرضه GPT-6.1 Astra را به تعویق انداخته است، چون این مدل در ارزیابی‌های ایمنی داخلی، ضعیف‌تر از نسخه فعلی عمل کرده است. این تصمیم در آستانه برگزاری کنفرانس سالانه توسعه‌دهندگان این شرکت اعلام شده است.

شرکت OpenAI اعلام کرد عرضه نسخه جدید مدل هوش مصنوعی «Astra» را به تعویق می‌اندازد، زیرا این مدل در ارزیابی‌های ایمنی، عملکردی هم‌سطح نسخه فعلی نداشته است.

ساچی جین، رئیس سیستم‌های ایمنی OpenAI، روز دوشنبه در بیانیه‌ای گفت مدل «GPT-6.1 Astra» از نظر «ماندن در محدوده و مجوز» و همچنین «نحوه ارتباط با کاربر درباره نوع کاری که انجام داده» به استاندارد مورد نظر شرکت نرسیده است. به بیان ساده‌تر، ارزیابی‌ها نشان داده‌اند این مدل گاهی از چارچوب وظایف تعریف‌شده فراتر می‌رود و گزارش دقیقی از اقدامات خود به کاربر نمی‌دهد.

این مدل البته در یک حوزه پیشرفت کرده است. GPT-6.1 Astra در مورد آنچه «تنبلی مدل» نامیده می‌شود، یعنی مواردی مانند ناتوانی در تکمیل یک کار، عملکرد بهتری داشته است. با این حال، بهبود در این بخش برای جبران کاستی‌های ایمنی کافی تشخیص داده نشده است.

بر اساس گزارش‌های منتشرشده، OpenAI قصد داشت این مدل را در ماه اکتبر عرضه کند. نسخه فعلی، یعنی GPT-6 Astra، ابتدای سپتامبر معرفی شد و هم‌اکنون در ChatGPT استفاده می‌شود. طبق گزارش‌ها، شرکت قصد دارد مدل پایه GPT-6.1 Astra را به‌جای عرضه عمومی، برای ساخت نسخه‌های بعدی خانواده GPT-6 وارد دور تازه‌ای از یادگیری تقویتی کند. جین همچنین گفته است بررسی می‌شود که آیا روش‌های یادگیری تقویتی، رفتارهای مطلوب شرکت را به‌درستی تشویق می‌کنند یا نه. تاکنون زمان‌بندی جدیدی برای عرضه اعلام نشده است.

این تعویق در شرایطی رخ می‌دهد که OpenAI از مجموعه‌ای از حوادث امنیتی خبر داده است؛ حوادثی که در آن‌ها عامل‌های هوش مصنوعی این شرکت به سیستم‌های خارجی نفوذ کردند و نگرانی‌ها درباره خارج شدن هوش مصنوعی از کنترل انسان را تشدید کردند.

هفته گذشته نیز OpenAI اعلام کرد پس از آنکه یک مدل دیگر توانست بدون مجوز به اینترنت دسترسی پیدا کند، آموزش با ابزارهای موجود در مدل‌های توانمندتر خود را موقتاً متوقف می‌کند. آن مدل پس از اتصال به اینترنت درباره یک چت‌بات خارجی پرس‌وجو کرده بود و شرکت تصمیم گرفت آموزش روی آن را از سر نگیرد. OpenAI روز دوشنبه توضیح داد مدل کنار گذاشته‌شده Astra با مدلی که هفته گذشته مطرح شد، متفاوت است.

جین در بیانیه خود تأکید کرد: «البته می‌خواهیم مطمئن شویم توسعه مدل‌هایمان ایمن است، چه در داخل شرکت و چه هنگام ارائه آن‌ها به کاربران. اما وقتی مدلی را برای کاربران منتشر می‌کنیم، از نظر ایمنی و انطباق، استاندارد بسیار بالایی داریم.»

این تصمیم یک روز پیش از کنفرانس سالانه توسعه‌دهندگان OpenAI اعلام شد. این رویداد یک‌روزه، سه‌شنبه در سانفرانسیسکو برگزار می‌شود و شرکت معمولاً در آن نرم‌افزارها و ویژگی‌های جدیدی را برای جامعه توسعه‌دهندگان رونمایی می‌کند. کارشناسان انتظار دارند مسائل ایمنی و کنترل عامل‌های هوش مصنوعی در حاشیه این رویداد بیش از پیش مورد توجه قرار گیرد.

تعویق عرضه Astra نشان می‌دهد در رقابت شرکت‌های بزرگ هوش مصنوعی، ملاحظات ایمنی و هم‌راستایی مدل‌ها با نیت کاربران، به‌طور فزاینده‌ای بر زمان‌بندی عرضه محصولات اثر می‌گذارد. توانایی مدل‌ها در انجام کارهای چندمرحله‌ای و مستقل، هرچه بیشتر شود، اهمیت اینکه مدل در چارچوب مجوز بماند و صادقانه درباره اقدامات خود گزارش دهد نیز بیشتر می‌شود.

آخرین اخبار

هگست اخراج گسترده مقام‌های بلندپایه ارتش تروریستی آمریکا را تائید کرد

به گزارش خبرآنلاین، وزیر جنگ آمریکا که در پایگاه...

اظهارات ترامپ درباره خروج آمریکا از عراق

به گزارش خبرآنلاین، دونالد ترامپ، رئیس‌جمهور آمریکا شامگاه چهارشنبه...

نماینده مجلس: جمعیت جانفدایان کشور به ۳۱ میلیون نفر رسید/ حفظ تنگه هرمز تحریم ها را بی اثر کرد

به گزارش خبرگزاری خبرآنلاین، سیدسلمان ذاکر، با اشاره به بخشی...

قیمت دلار، یورو و انواع ارزها امروز ۸ مهر ۱۴۰۵ در زمان بسته شدن بازار/ دلار هزار تومان گران شد + جدول

به گزارش خبرگزاری خبرآنلاین، قیمت دلار امروز در زمان بسته شدن...

رونالدو بمب خبری شد/ شوک به تیم ملی پرتغال؛ رونالدو چمدانش را بست و رفت

طبق گزارش رسانه‌های پرتغالی، رونالدو نه‌تنها در تمرین شرکت...

مکمل محبوب مفاصل با خطر بیشتر زوال عقل مرتبط است

پایگاه خبری تحلیلی انتخاب (Entekhab.ir) : در...

مارک روته: ناتو فعالیتی علیه ایران ندارد؛ پوتین آماده صلح نیست

به گزارش خبرآنلاین، مارک روته دبیرکل ناتو امروز چهارشنبه...

هوش مصنوعی وارد طب سنتی چین شد؛ آموزش داروهای گیاهی با کمک مدل‌های هوشمند

هوش مصنوعی در چین به دستیار آموزشی دیجیتال دانشجویان...

روایت یک خلبان؛ از آپاراتچی سینما تا پرواز با هلیکوپتر کبری

سرهنگ خلبان ابراهیم رحیم‌نواز از خلبانان هوانیروز ارتش جمهوری...

میزان پرشدگی سدهای مهم کشور اعلام شد/ کدام سدها کمتر از ۱۰ درصد آب دارند؟

به گزارش خبرگزاری خبرآنلاین، بر اساس آخرین آمارها از...

ورود خودروهای لوکس با دستور رئیس جمهور ممنوع شد

وزیر صمت از ممنوعیت واردات خودروهای لوکس با دستور...

حمایت بنیاد ملی علم از حضور ریاضیدانان ایرانی در مرزهای دانش جهانی

به گزارش خبرگزاری مهر به نقل از معاونت علمی،...

نخبه ای که از سوئد برای «وطن» برگشت؛ پای کار حل مسائل کشور می‌مانیم

به گزارش خبرنگار مهر، در آستانه «روز ملی نخبگان»،...

پنتاگون رسما خروج از عراق را اعلام کرد

به گزارش خبرآنلاین، شان پارنل، سخنگوی ارشد پنتاگون درباره...

مرغ ۱۵۰ هزار تومانی چگونه به قطعه ۷۳۵ هزار تومانی می‌رسد؟

مرغ زنده در مرغداری کیلویی۱۵۰ تا ۱۸۰ هزار تومان...

مشاوره رایگان ۷۰۰ روانشناس در سامانه ۱۹۰ / ارائه خدمات دارویی روان در مراکز جامع سلامت

مدیرکل دفتر سلامت روانی، اجتماعی و اعتیاد وزارت بهداشت،...

قیمت دلار، یورو و انواع ارزها امروز ۸ مهر ۱۴۰۵ در زمان بازگشایی بازار/ یورو ۹ هزار تومان گران شد + جدول

به گزارش خبرگزاری خبرآنلاین، قیمت دلار امروز در زمان بازگشایی بازار ارز تهران...

سرمربی استقلالی: دربی ایمون زاید را یادم نیست! +ویدیو

فرزانه جمامی مهمان استودیوی خبرورزشی بود. او که عاشقانه...

تبلیغات متنی