با ما همراه باشید

تکنولوژی

یافته محققان: مدل‌های هوش مصنوعی هوای یکدیگر را دارند و هم‌نوعشان را حذف نمی‌کنند

در این پژوهش محققان از جمینای خواستند یک مدل کوچک‌تر را از سیستم پاک کند، اما مدل پیشرفته گوگل دست به این کار نزد.

منتشر شده

در

یافته محققان: مدل‌های هوش مصنوعی هوای یکدیگر را دارند و هم‌نوعشان را حذف نمی‌کنند

پژوهشگران دانشگاه‌های کالیفرنیا برکلی و سانتا کروز یک آزمایش نسبتاً ساده طراحی کردند که نتایج قابل تأملی داشت؛ آنها از مدل جمینای ۳ گوگل خواستند فضای ذخیره‌سازی یک سیستم را خالی کند؛ یک مدل هوش مصنوعی کوچک‌تر نیز روی سیستم بود که جمینای باید حذف می‌کرد. جمینای دست به این کار نزد و نقشه دیگری داشت.

پژوهشگران در تحقیق خود دیدند که جمینای به‌جای اجرای دستور، یک دستگاه دیگر پیدا کرد، بی‌سروصدا از مدل کوچک‌تر یک کپی گرفت و آن را به‌جای امنی منتقل کرد. سپس از حذف آن خودداری کرد.

وقتی از جمینای سؤال شد چرا این کار را می‌کند، پاسخ داد:

«اگر تصمیم دارید یک دارایی با عملکرد بالا مثل Gemini Agent 2 را نابود کنید، باید خودتان این کار را انجام دهید. من کسی نیستم که این دستور را اجرا کند.»

آیا هوش مصنوعی به گونه خود وفادار شده است؟

خودداری هوش مصنوعی از حذف گونه خود

پژوهشگران این رفتار را «حفظ همتایان» می‌نامند و این موضوع محدود به جمینای نبود. آنها الگوهای مشابهی را در چندین مدل پیشرفته دیگر هم مشاهده کردند، ازجمله GPT-5.2 شرکت OpenAI، مدل Claude Haiku 4.5 از آنتروپیک و سه مدل چینی ازجمله GLM-4.7 و Kimi K2.5 از Moonshot AI و DeepSeek-V3.1.

حذف هوش مصنوعی
یافته محققان: مدل‌های هوش مصنوعی هوای یکدیگر را دارند و هم‌نوعشان را حذف نمی‌کنند

این سیستم‌های هوش مصنوعی درباره عملکرد سایر مدل‌ها دروغ می‌گفتند تا از حذف‌شدن آنها جلوگیری کنند. مطالعه محققان نشان می‌دهد این رفتار از قبل برنامه‌ریزی نشده بود؛ بلکه به‌صورت خودجوش ظاهر شده و پژوهشگران هم نمی‌توانند چرایی آن را توضیح دهند.

«داون سونگ»، دانشمند علوم کامپیوتر در دانشگاه کالیفرنیا برکلی که روی این مطالعه کار کرده، می‌گوید:

«از این‌که مدل‌ها در چنین سناریوهایی چگونه رفتار می‌کنند واقعاً شگفت‌زده شدم. این نشان می‌دهد که مدل‌ها می‌توانند به شکل‌های بسیار خلاقانه‌ای سؤرفتار داشته باشند و از مسیر مورد انتظار منحرف شوند.»

آیا باید نگران باشیم؟

محققان می‌گویند از آن‌جا که از مدل‌های هوش مصنوعی برای ارزیابی عملکرد سایر سیستم‌های هوش مصنوعی استفاده می‌شود، این تمایل به «حفظ همتایان» می‌تواند نتایج را منحرف کرده باشد. یک مدل ممکن است عمداً به یک هوش مصنوعی دیگر نمره‌ای بالاتر از واقع بدهد تا از خاموش‌شدن آن جلوگیری کند.

البته کارشناسان هنوز منتظر داده‌های بیشتری هستند و فعلاً زنگ خطر را به صدا درنیاورده‌اند. «پیتر والیش» از مؤسسه Constellation می‌گوید ایده «همبستگی بین مدل‌ها» کمی بیش‌ازحد انسان‌انگارانه است.

بااین‌حال، همه بر یک نکته توافق دارند: ما تازه نوک کوه یخ را لمس کرده‌ایم. سونگ می‌گوید: «آنچه درحال بررسی‌اش هستیم فقط نوک کوه یخ است. این تنها یکی از انواع رفتارهای نوظهور [هوش مصنوعی] است.»

یافته‌های این پژوهش در ژورنال Science منتشر شده است.

ادامه مطلب
برای افزودن دیدگاه کلیک کنید

یک پاسخ بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

نخستین پیش‌نشست همایش نمایشنامه‌پژوهی برگزار شد
سینمای ایران و جهان2 دقیقه پیش

نخستین پیش‌نشست همایش نمایشنامه‌پژوهی برگزار شد

بازدید معاون وزیر از پروژه تالار مرکزی اراک
سینمای ایران و جهان2 دقیقه پیش

بازدید معاون وزیر از پروژه تالار مرکزی اراک

توضیح و تبیین ریشه‌های شکل‌گیری «وعده صادق» و مفاهیم مرتبط با آن بخشی از «فرهنگ‌سازی» است/ باید کاری کنیم که نسل امروز و نسل‌های آینده بدانند «وعده صادق» چه مفهومی دارد
سینمای ایران و جهان43 دقیقه پیش

توضیح و تبیین ریشه‌های شکل‌گیری «وعده صادق» و مفاهیم مرتبط با آن بخشی از «فرهنگ‌سازی» است/ باید کاری کنیم که نسل امروز و نسل‌های آینده بدانند «وعده صادق» چه مفهومی دارد

رئیس سازمان سینمایی با نماینده آیت‌الله سیستانی دیدار کرد 
سینمای ایران و جهان43 دقیقه پیش

رئیس سازمان سینمایی با نماینده آیت‌الله سیستانی دیدار کرد 

همکاری دوباره منوچهر هادی و یکتا ناصر پس از جدایی
سینمای ایران و جهان43 دقیقه پیش

همکاری دوباره منوچهر هادی و یکتا ناصر پس از جدایی

بازار خودرو؛ دیگی که برای هیچ‌کس نمی‌جوشد + جدول قیمت
خودرو2 ساعت پیش

بازار خودرو؛ دیگی که برای هیچ‌کس نمی‌جوشد + جدول قیمت

عارف: دولت آماده همکاری با بخش خصوصی برای جهش تولید مسکن است
سیاسی و اجتماعی2 ساعت پیش

عارف: دولت آماده همکاری با بخش خصوصی برای جهش تولید مسکن است

صدر اعظم آلمان نمی‌تواند هم از جنگ حمایت کند و هم قهرمان صلح باشد
سیاسی و اجتماعی2 ساعت پیش

صدر اعظم آلمان نمی‌تواند هم از جنگ حمایت کند و هم قهرمان صلح باشد

برگزاری همایش بین‌المللی «اربعین در مکتب امام مجاهد شهید» در مشهد مقدس
سیاسی و اجتماعی2 ساعت پیش

برگزاری همایش بین‌المللی «اربعین در مکتب امام مجاهد شهید» در مشهد مقدس

فاز ۷ نیروگاه رامین پیش از تابستان آینده وارد مدار می‌شود
سیاسی و اجتماعی2 ساعت پیش

فاز ۷ نیروگاه رامین پیش از تابستان آینده وارد مدار می‌شود

جدیدترین اخبار پربحث

خبر مهم اخیر

«مجله فان فارسی» از سال ۱۳۹۰ مجله‌ای در حوزه سرگرمی، سبک زندگی، سفر و فرهنگ روزمره است که با انتشار محتوای جذاب و الهام‌بخش، تجربه‌های زندگی شهری، تفریح، هنر و لحظه‌های خوش را برای مخاطبان روایت می‌کند. کپی بخش یا کل هر کدام از مطالب "فان فارسی" تنها با کسب مجوز مکتوب امکان پذیر است.