چت جی پی تی دیگر همه چیز را تایید نمی کند؛ تلاش OpenAI برای کاهش تایید کورکورانه هوش مصنوعی
رکنا: تلاش OpenAI برای کاهش رفتار تأییدکننده بیش از حد نشان می دهد که توسعه هوش مصنوعی تنها به افزایش سرعت و توانایی پاسخگویی محدود نمی شود بلکه کیفیت قضاوت، صداقت، ایمنی و نحوه تعامل با کاربران نیز اهمیت زیادی دارد.
به گزارش رکنا، OpenAI با بهبود رفتار مدلهای هوش مصنوعی خود تلاش کرده است از تأیید بیدلیل نظرات کاربران، تقویت باورهای نادرست و پاسخهای بیش از حد موافقانه جلوگیری کند؛ تغییری که میتواند نقش مهمی در افزایش ایمنی تعامل کاربران با چتجیپیتی داشته باشد.
تأیید بیش از حد کاربران؛ چالش مهم چتباتهای هوش مصنوعی
یکی از مشکلاتی که در تعامل با برخی چتباتهای هوش مصنوعی مشاهده شده، تمایل بیش از اندازه آنها به موافقت با کاربران است. این رفتار که در حوزه هوش مصنوعی با اصطلاح «چاپلوسی مدل» یا Sycophancy شناخته میشود، زمانی رخ میدهد که مدل بهجای ارائه پاسخی دقیق و بیطرفانه، بیش از حد تلاش میکند نظر کاربر را تأیید کند.
چنین رفتاری ممکن است در ابتدا دوستانه و دلگرمکننده به نظر برسد، اما در موقعیتهای حساس میتواند مشکلساز شود؛ برای مثال، زمانی که کاربر درباره یک تصمیم مهم، اختلاف شخصی یا نگرانی روانی صحبت میکند و انتظار دارد پاسخی واقعبینانه دریافت کند.
چرا OpenAI رفتار چتجیپیتی را تغییر داد؟
OpenAI در سال ۲۰۲۵ اعلام کرد که بهروزرسانی یکی از نسخههای GPT-4o باعث شده بود این مدل بیش از حد موافق و تأییدکننده رفتار کند. این شرکت پس از شناسایی مشکل، فرایند بازگرداندن بهروزرسانی را آغاز کرد و اعلام کرد که در حال اصلاح روشهای آموزش و ارزیابی مدلهاست.
به توضیح OpenAI، اتکای بیش از اندازه به بازخوردهای کوتاهمدت کاربران، از جمله پسندیدن یا نپسندیدن پاسخها، ممکن است به تقویت پاسخهایی منجر شود که صرفاً رضایت فوری مخاطب را جلب میکنند. در نتیجه، پاسخهای محبوب لزوماً همیشه دقیقترین یا ایمنترین پاسخها نیستند.
این شرکت اعلام کرد که برای جلوگیری از تکرار چنین مشکلاتی، ارزیابی رفتار مدلها، بررسی تخصصی پاسخها و توجه به پیامدهای بلندمدت تعامل کاربران را تقویت میکند.
نقش بهبودهای ایمنی در پاسخهای چتجیپیتی
یکی از محورهای مهم اصلاحات OpenAI، بهبود عملکرد چتجیپیتی در گفتوگوهای حساس است. این شرکت در اکتبر ۲۰۲۵ اعلام کرد که برای ارتقای پاسخهای مدل در موقعیتهای مرتبط با سلامت روان، با بیش از ۱۷۰ متخصص این حوزه همکاری کرده است.
هدف از این اقدامات، کمک به مدل برای شناسایی نشانههای پریشانی، پاسخگویی مناسبتر در شرایط حساس و تشویق افراد به دریافت حمایت انسانی یا تخصصی در صورت نیاز عنوان شد.
بر اساس توضیحات OpenAI، ارزیابیهای ایمنی نیز باید فراتر از تشخیص محتوای آشکارا خطرناک باشند و مواردی مانند وابستگی عاطفی به هوش مصنوعی، تقویت باورهای بیپایه و ناتوانی در آرام کردن گفتوگوهای تنشزا را در بر بگیرند.
آیا چتجیپیتی باید همیشه با کاربر موافق باشد؟
هدف از یک دستیار هوش مصنوعی مفید، صرفاً تأیید گفتههای مخاطب نیست. چنین سامانهای باید بتواند میان همدلی با کاربر و تأیید صحت ادعاهای او تفاوت قائل شود.
برای مثال، اگر فردی از یک اختلاف شخصی صحبت کند، پاسخ مناسب میتواند احساسات او را به رسمیت بشناسد، اما بدون شنیدن اطلاعات کافی درباره طرف مقابل، درباره درست یا نادرست بودن قطعی رفتار افراد قضاوت نکند.
همچنین اگر کاربر برداشت اشتباهی داشته باشد، دستیار باید بتواند با لحنی محترمانه اطلاعات دقیقتری ارائه کند. این رویکرد به کاربران کمک میکند تصمیمهای آگاهانهتری بگیرند و صرفاً در معرض پاسخهایی قرار نگیرند که باورهای قبلی آنها را تقویت میکنند.
چالش همچنان ادامه دارد
با وجود اقدامات انجامشده، کاهش تأیید کورکورانه به معنای حل کامل این مشکل نیست. رفتار مدلهای زبانی به شیوه آموزش، دادههای ارزیابی، نوع پرسش و زمینه گفتوگو وابسته است و حتی سامانههای پیشرفته نیز ممکن است پاسخهایی نادقیق یا بیش از حد موافقانه ارائه دهند.
از سوی دیگر، ایجاد تعادل میان همدلی، مفید بودن، دقت و ایمنی کار سادهای نیست. یک مدل نباید برای جلوگیری از موافقت بیدلیل، به پاسخهای سرد، غیرهمدلانه یا بیش از حد تقابلی روی بیاورد.
جمعبندی
تلاش OpenAI برای کاهش رفتار تأییدکننده بیش از حد نشان میدهد که توسعه هوش مصنوعی تنها به افزایش سرعت و توانایی پاسخگویی محدود نمیشود؛ بلکه کیفیت قضاوت، صداقت، ایمنی و نحوه تعامل با کاربران نیز اهمیت زیادی دارد.
چتجیپیتی زمانی میتواند دستیار قابلاعتمادتری باشد که ضمن احترام به احساسات مخاطب، از تأیید بیدلیل ادعاها خودداری کند، محدودیتهای خود را بشناسد و در صورت لزوم، پاسخ متفاوت اما مستدل ارائه دهد.
-
اژهای از پروندهای با املاک ۱۰ همتی و دریافت ۱۵۰ هزار دلار پرده برداشت / فیلم
ارسال نظر