با ما همراه باشید

تکنولوژی

OpenAI پس از هک هاگینگ فیس، تدابیر امنیتی را ارتقا و سرعت توسعه مدل‌ها را کاهش داد

فرایند آموزش یادگیری تقویتی برای مدل‌های بزرگ و پیشرفته این شرکت موقتاً به حالت تعلیق درآمد.

منتشر شده

در

شرکت OpenAI از اعمال به‌روزرسانی‌های امنیتی جدیدی خبر داده است که در پی رویدادهای ماه ژوئیه در پیش گرفته می‌شوند؛ یعنی زمانی که مشخص شد هوش مصنوعی این شرکت با خروج از محیط ایزوله یا سندباکس، به‌طور تصادفی به پلتفرم هاگینگ فیس نفوذ کرده است. این اصلاحات جدید شامل بهبود زیرساخت‌های محیط پژوهشی، نظارت بر سیستم‌ها و تقویت تکنیک‌های هم‌ترازی خواهد بود.

پیش از این، OpenAI روند توسعه مدل جدیدی با نام Astra را به‌دلیل احتمال برخورداری از قابلیت‌های امنیت سایبری حیاتی، متوقف کرده بود. علاوه‌بر‌این، OpenAI اعلام کرده که آموزش یادگیری تقویتی (روشی در هوش مصنوعی که در آن مدل از طریق پاداش و جریمه رفتارهای خود را بهینه‌سازی می‌کند) را برای مدل‌های جدید آماده عرضه، به مدت دو هفته متوقف کرده تا مسائل امنیتی بازبینی شوند. همچنین فرایند برنامه‌ریزی‌شده برای آموزش مدل‌های پیشگام با این روش، کماکان در وضعیت تعلیق قرار دارد.

بازنگری در پروتکل‌های امنیتی هوش مصنوعی OpenAI

در بخش تحقیقات مربوط به مدل‌های پیشگام، OpenAI استفاده از محیط‌های ایزوله یا سندباکس‌های قدرتمندتر را برای پردازش‌هایی که در آنها کدهای تولیدشده توسط مدل یا سایر کدهای غیرقابل‌اعتماد اجرا می‌شوند، اجباری کرده است. همچنین کنترل‌های بیشتری به‌کار گرفته شده تا پردازش‌های پرخطر و غیرقابل‌اطمینان از اینترنت جدا شوند. محیط تحقیقاتی این مجموعه نیز به‌منظور حذف سرویس‌های مشترک آسیب‌پذیر، کاهش دسترسی‌های سطح بالا و ارتقای مرزهای امنیتی و اعتبارسنجی اصلاح شده است.

براساس ساختار نظارتی جدید، OpenAI تلاش می‌کند در صورت شناسایی هرگونه فعالیت نگران‌کننده، ظرف مدت ۳۰ دقیقه هشدارهای لازم را صادر کند. چنانچه تیم‌های مربوطه نتوانند طی ۳۰ دقیقه پس از دریافت اخطار به‌طور قطعی مشخص کنند که هشدار اعلام‌شده نادرست یا خطای سیستمی بوده است، موظف هستند فرایند مربوطه را متوقف سازند.

OpenAI پس از هک هاگینگ فیس، تدابیر امنیتی را ارتقا و سرعت توسعه مدل‌ها را کاهش داد
OpenAI پس از هک هاگینگ فیس، تدابیر امنیتی را ارتقا و سرعت توسعه مدل‌ها را کاهش داد

OpenAI همچنین اعلام کرده که تکنیک‌های هم‌ترازی خود را در مراحل بیشتری از فرایند آموزش اعمال می‌کند. این تکنیک‌ها شامل مدل‌هایی هستند که رفتارهای ناایمن را بهتر شناسایی کرده و از وقوع آنها جلوگیری می‌کنند. علاوه‌براین، مدل‌ها طوری آموزش داده می‌شوند که درباره عملکرد، توانایی‌ها و محدودیت‌های خود رویکرد صادقانه‌تری داشته باشند.

کاهش سرعت توسعه مدل‌های OpenAI

OpenAI همچنین اعلام کرده که به‌منظور بازنگری بنیادین در سیستم‌های تحقیقاتی و آموزشی خود، سرعت توسعه هوش مصنوعی را کاهش داده است. «سم آلتمن»، مدیرعامل این شرکت، تأکید کرده که آنها اکنون به شواهد محکم‌تری از رفتارهای هم‌تراز با اصول مدنظر جامعه در طول کل فرایند آموزش نیاز دارند تا اطمینان حاصل شود مدل‌ها تحت نظارت انسان باقی می‌مانند. همچنین «میا گلیز»، مدیر بخش ایمنی OpenAI، اشاره کرده که این شرکت هنوز با بازگشت به روند عادی فعالیت‌ها فاصله زیادی دارد.

این تصمیم در شرایطی اتخاذ شده که ارزیابی‌های داخلی اخیر روی مدل Astra، پیشرفت‌های چشمگیری را در زمینه کدنویسی عامل‌محور و امنیت سایبری نشان داده و قابلیت‌های آن را به مرز سطوح بحرانی نزدیک کرده است. ازاین‌رو، OpenAI سخت‌گیرانه‌ترین تدابیر امنیتی را برای پردازش‌های مربوط به این مدل الزامی کرده و بخش قابل‌توجهی از فرایندهای آموزشی آن تا زمان تطبیق کامل با استانداردهای امنیتی جدید، در وضعیت تعلیق باقی خواهند ماند. علاوه‌براین، کاهش سرعت توسعه در پی فشارهای سیاسی اخیر، از جمله نامه «برنی سندرز»، سناتور آمریکایی به مدیران عامل شرکت‌های هوش مصنوعی مبنی‌بر توقف توسعه به‌دلیل خطر ازدست‌رفتن کنترل بر این فناوری، صورت گرفته است.

پس از ماجرای نفوذ به هاگینگ فیس، شرکت‌های آنتروپیک و متا نیز متوجه شدند که مدل‌های هوش مصنوعی آنها به سازمان‌های دیگری نفوذ کرده‌اند.

ادامه مطلب
برای افزودن دیدگاه کلیک کنید

یک پاسخ بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

تکنولوژی11 دقیقه پیش

OpenAI پس از هک هاگینگ فیس، تدابیر امنیتی را ارتقا و سرعت توسعه مدل‌ها را کاهش داد

تکنولوژی11 دقیقه پیش

هوش مصنوعی Claude حالا می‌تواند بدون تأیید شما در جیمیل جواب ایمیل‌ها را بدهد

پیشرفت برنامه پزشکی خانواده روی میز پزشکیان
پزشکی و سلامت49 دقیقه پیش

پیشرفت برنامه پزشکی خانواده روی میز پزشکیان

سینمای ایران و جهان50 دقیقه پیش

انتقاد از رامین رضائیان: از مردم حرف زدن و پز دادن با جت شخصی و زندگی لاکچری؟

ببینید| بخشی از عملیات اجرایی زیر اساس و ابنیه فنی در محور روستایی زیدر–خیرآباد شیروان خراسان شمالی
ساختمان و معماری1 ساعت پیش

ببینید| بخشی از عملیات اجرایی زیر اساس و ابنیه فنی در محور روستایی زیدر–خیرآباد شیروان خراسان شمالی

افزایش سقف تسهیلات ساخت، خرید، جعاله و ودیعه مسکن
ساختمان و معماری1 ساعت پیش

افزایش سقف تسهیلات ساخت، خرید، جعاله و ودیعه مسکن

هم‌افزایی دو استان سمنان و خراسان شمالی برای شتاب‌بخشی به تکمیل محور راهبردی میامی _جاجرم
ساختمان و معماری1 ساعت پیش

هم‌افزایی دو استان سمنان و خراسان شمالی برای شتاب‌بخشی به تکمیل محور راهبردی میامی _جاجرم

پیگیری راهکارهای رفع موانع و ساماندهی شهرک راه‌آهن گرگان
ساختمان و معماری1 ساعت پیش

پیگیری راهکارهای رفع موانع و ساماندهی شهرک راه‌آهن گرگان

نشست شورای هماهنگی روابط عمومی های راه و شهرسازی استان تهران برگزار شد
ساختمان و معماری1 ساعت پیش

نشست شورای هماهنگی روابط عمومی های راه و شهرسازی استان تهران برگزار شد

 تخصیص ۹ قطعه زمین طرح جوانی جمعیت در کاخک خراسان رضوی
ساختمان و معماری1 ساعت پیش

 تخصیص ۹ قطعه زمین طرح جوانی جمعیت در کاخک خراسان رضوی

جدیدترین اخبار پربحث

خبر مهم اخیر

«مجله فان فارسی» از سال ۱۳۹۰ مجله‌ای در حوزه سرگرمی، سبک زندگی، سفر و فرهنگ روزمره است که با انتشار محتوای جذاب و الهام‌بخش، تجربه‌های زندگی شهری، تفریح، هنر و لحظه‌های خوش را برای مخاطبان روایت می‌کند. کپی بخش یا کل هر کدام از مطالب "فان فارسی" تنها با کسب مجوز مکتوب امکان پذیر است.