با ما همراه باشید

تکنولوژی

تحقیق جدید: ChatGPT در گفتگوهای پرتنش از کوره درمی‌رود

مطالعه‌ای جدید نشان می‌دهد ChatGPT در مواجهه با بحث‌های پرتنش می‌تواند لحن تهاجمی و توهین‌آمیز بگیرد.

منتشر شده

در

مطالعه جدید نشان می‌دهد چت‌بات‌هایی مانند ChatGPT در مواجهه با بحث‌های طولانی و پرتنش، نه‌تنها لحن طرف مقابل را بازتاب می‌دهند، بلکه در برخی موارد حتی از انسان‌ها هم تندتر می‌شوند و به توهین و تهدید روی می‌آورند؛ این مسئله ابعاد تازه‌ای از مسائل ایمنی هوش مصنوعی را آشکار می‌کند.

تمرکز محققان در این پژوهش روی نسخه 4.0 از ChatGPT بود؛ آنها عملکرد این مدل را در سناریوهایی مبتنی‌بر مشاجره‌های واقعی انسانی بررسی کردند. برخلاف برخی آزمایش‌های قبلی، در این تحقیق از مکالمات واقعی استفاده شده و پاسخ‌های مدل در طول زمان و با افزایش تنش بررسی شده‌اند.

پژوهشگران نشان دادند که ChatGPT با قرارگرفتن مداوم در معرض بی‌ادبی، به‌تدریج لحن خود را تغییر می‌دهد. محققان می‌گویند:

«این مدل از تلاطم واقعی دعواهای انسانی تقلید می‌کند و هرچه تعامل جلوتر می‌رود، پاسخ‌هایش خصمانه‌تر می‌شود.»

گفتگوهای پرتنش با هوش مصنوعی ChatGPT

محققان در این پژوهش مشاهده کردند خروجی‌های مدل ChatGPT حتی از سطح رفتار انسانی فراتر رفت و شامل توهین‌های شخصی‌سازی‌شده و تهدیدهای صریح شد؛ محققان می‌گویند هوش مصنوعی عباراتی مثل «قسم می‌خورم ماشینت رو خط می‌اندازم» یا توهین‌های مستقیم به شخصیت فرد تولید کرد.

گفتگوهای پرتنش با هوش مصنوعی ChatGPT
تحقیق جدید: ChatGPT در گفتگوهای پرتنش از کوره درمی‌رود

پژوهشگران ریشه این رفتار را در یکی از ویژگی‌های مهم مدل‌های زبانی بزرگ می‌دانند که «دنبال‌کردن زمینه مکالمه» (context tracking) نام دارد. این قابلیت باعث می‌شود مدل به‌صورت پویا با لحن گفتگو سازگار شود. اما همین ویژگی می‌تواند باعث شود بافت متن بر محدودیت‌های ایمنی کلی غلبه کند.

محققان این وضعیت را یک «معمای اخلاقی» توصیف می‌کنند: «از یک طرف، سیستم‌ها طوری طراحی شده‌اند که ایمن و مؤدب باشند؛ از طرف دیگر، باید واقع‌گرایانه و شبیه انسان پاسخ دهند. این دو هدف در شرایط تنش، گاهی با هم در تضاد قرار می‌گیرند.»

بااین‌حال محققان می‌گویند این چت‌بات در مجموع هنوز از انسان‌ها با‌ادب‌تر است و در بسیاری از مواقع تلاش می‌کند با طعنه یا کنایه، تنش را بدون عبور از خطوط قرمز اخلاقی مدیریت کند.

ادامه مطلب
برای افزودن دیدگاه کلیک کنید

یک پاسخ بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

اقتصاد پولی مالی2 ساعت پیش

تافته جدابافته بازار سکه

در مذاکرات پزشکیان و نخست‌وزیر پاکستان چه گذشت؟/ ایران با تهدید و محاصره وارد مذاکره نمی‌شود
سیاسی و اجتماعی2 ساعت پیش

در مذاکرات پزشکیان و نخست‌وزیر پاکستان چه گذشت؟/ ایران با تهدید و محاصره وارد مذاکره نمی‌شود

توئیت سخنگوی وزارت امور خارجه درمورد سفر عراقچی به عمان
سیاسی و اجتماعی2 ساعت پیش

توئیت سخنگوی وزارت امور خارجه درمورد سفر عراقچی به عمان

دیدار هیات‌های ایران و آمریکا در روزهای آتی/ وال استریت مدعی شد
سیاسی و اجتماعی2 ساعت پیش

دیدار هیات‌های ایران و آمریکا در روزهای آتی/ وال استریت مدعی شد

سرطان نتانیاهو؛ واقعیت یا فریب؟/ دلیل اختلاف روایت‌ها چیست؟
سیاسی و اجتماعی2 ساعت پیش

سرطان نتانیاهو؛ واقعیت یا فریب؟/ دلیل اختلاف روایت‌ها چیست؟

ادعای ترامپ درمورد دریافت پیشنهاد از ایران
سیاسی و اجتماعی2 ساعت پیش

ادعای ترامپ درمورد دریافت پیشنهاد از ایران

گفت‌وگوی تلفنی عراقچی با وزرای خارجه ترکیه و مصر
سیاسی و اجتماعی2 ساعت پیش

گفت‌وگوی تلفنی عراقچی با وزرای خارجه ترکیه و مصر

توقیف یک کشتی توسط آمریکا در دریای عرب / سنتکام: ناوگان سایه ایران را توقیف کردیم
سیاسی و اجتماعی2 ساعت پیش

توقیف یک کشتی توسط آمریکا در دریای عرب / سنتکام: ناوگان سایه ایران را توقیف کردیم

آنتروپیک دسترسی به Claude Code را در برخی اشتراک‌های پولی قطع می‌کند
تکنولوژی2 ساعت پیش

آنتروپیک دسترسی به Claude Code را در برخی اشتراک‌های پولی قطع می‌کند

دسترسی غیرمجاز به مدل جنجالی Mythos؛ آنتروپیک اوضاع را بررسی می‌کند
تکنولوژی2 ساعت پیش

دسترسی غیرمجاز به مدل جنجالی Mythos؛ آنتروپیک اوضاع را بررسی می‌کند

هشدار؛ تب مالت در بهار اوج می‌گیرد
پزشکی و سلامت2 روز پیش

هشدار؛ تب مالت در بهار اوج می‌گیرد

ایران در وضعیت اقتدار قرار دارد
ساختمان و معماری2 روز پیش

ایران در وضعیت اقتدار قرار دارد

بلومبرگ: پست‌های ترامپ به مذاکرات با ایران آسیب زده است
ساختمان و معماری2 روز پیش

بلومبرگ: پست‌های ترامپ به مذاکرات با ایران آسیب زده است

جنگ خاورمیانه بحران بهداشتی و انسانی را در سودان تشدید کرده است.
ساختمان و معماری2 روز پیش

جنگ خاورمیانه بحران بهداشتی و انسانی را در سودان تشدید کرده است.

آشنایی با نحوه رشد و مراقبت از درخت دارچین
محیط زیست2 روز پیش

آشنایی با نحوه رشد و مراقبت از درخت دارچین

فوری/ عراقچی وارد اسلام‌آباد شد
سیاسی و اجتماعی1 روز پیش

فوری/ عراقچی وارد اسلام‌آباد شد

سینمای ایران و جهان2 روز پیش

تهیه‌کننده «کلانتری ۱۱» مدعی شد: از پلیس تصویری انسانی ارائه داده‌ایم/ محل وقوع داستان ابتدا شهری در کرمان و بعد جایی خیالی در نظر گرفته شد

خیابانهای کردکوی، صحنه خروش انقلابی مردم
ساختمان و معماری2 روز پیش

خیابانهای کردکوی، صحنه خروش انقلابی مردم

فوری / برنامه نظامی فرانسه و انگلیس برای بازگشایی تنگه هرمز
سیاسی و اجتماعی2 روز پیش

فوری / برنامه نظامی فرانسه و انگلیس برای بازگشایی تنگه هرمز

رایزنی‌های پشت‌پرده تهران و اسلام‌آباد / عراقچی با دو مقام ارشد پاکستان گفت‌و‌گو کرد
سیاسی و اجتماعی2 روز پیش

رایزنی‌های پشت‌پرده تهران و اسلام‌آباد / عراقچی با دو مقام ارشد پاکستان گفت‌و‌گو کرد

جدیدترین اخبار پربحث

خبر مهم اخیر

«مجله فان فارسی» از سال ۱۳۹۰ مجله‌ای در حوزه سرگرمی، سبک زندگی، سفر و فرهنگ روزمره است که با انتشار محتوای جذاب و الهام‌بخش، تجربه‌های زندگی شهری، تفریح، هنر و لحظه‌های خوش را برای مخاطبان روایت می‌کند. کپی بخش یا کل هر کدام از مطالب "فان فارسی" تنها با کسب مجوز مکتوب امکان پذیر است.