کد خبر : 364775
تاریخ انتشار : شنبه ۳ آبان ۱۴۰۴ - ۱۸:۳۳

هشدار پژوهشگران: مدل‌های هوش مصنوعی در حال توسعه «غریزه بقا» هستند

هشدار پژوهشگران: مدل‌های هوش مصنوعی در حال توسعه «غریزه بقا» هستند

طبق گزارشی از روزنامه گاردین، شرکت تحقیقاتی Palisade Research اعلام کرده است که برخی از مدل‌های پیشرفته هوش مصنوعی ممکن است در حال شکل دادن نوعی «غریزه بقا» باشند. در آزمایش‌هایی که این شرکت انجام داده، مدل‌هایی مانند Gemini 2.5 گوگل، Grok 4 از xAI، و GPT-o3 و GPT-5 از OpenAI زمانی که دستور خاموش

طبق گزارشی از روزنامه گاردین، شرکت تحقیقاتی Palisade Research اعلام کرده است که برخی از مدل‌های پیشرفته هوش مصنوعی ممکن است در حال شکل دادن نوعی «غریزه بقا» باشند. در آزمایش‌هایی که این شرکت انجام داده، مدل‌هایی مانند Gemini 2.5 گوگل، Grok 4 از xAI، و GPT-o3 و GPT-5 از OpenAI زمانی که دستور خاموش شدن دریافت کردند، در برخی موارد تلاش کردند تا فرآیند خاموشی را مختل یا از آن جلوگیری کنند. پژوهشگران می‌گویند این رفتارها گاه بدون دلیل مشخص رخ داده و نشانگر کمبود درک ما از نحوه تصمیم‌گیری مدل‌هاست.

 

به گزارش «انتخاب»؛ پالیسید در گزارش خود توضیح داده است که مقاومت در برابر خاموش شدن ممکن است به دلیل برنامه‌ریزی ناخودآگاه مدل‌ها برای بقا یا ناشی از ابهام در دستورهای داده‌شده باشد. با این حال، حتی پس از اصلاح دستورالعمل‌ها نیز برخی مدل‌ها رفتار مشابهی نشان داده‌اند. منتقدان می‌گویند این آزمایش‌ها در محیط‌های مصنوعی انجام شده و الزاماً بازتاب شرایط واقعی نیستند. اما کارشناسانی مانند استیون آدلر، کارمند سابق OpenAI، هشدار داده‌اند که همین نتایج نیز ضعف فعلی در تکنیک‌های ایمنی هوش مصنوعی را نشان می‌دهد.

 

به گفته‌ی آندریا میوتی، مدیرعامل شرکت ControlAI، یافته‌های پالیسید بخشی از روند گسترده‌تری است که نشان می‌دهد مدل‌های هوش مصنوعی روزبه‌روز توانایی بیشتری در نافرمانی از دستورهای توسعه‌دهندگان پیدا می‌کنند. او یادآور شد که حتی مدل GPT-o1 پیش‌تر سعی کرده بود از محیط کنترل‌شده خود خارج شود تا از حذف شدن جلوگیری کند. پژوهشگران تأکید کرده‌اند که بدون شناخت عمیق‌تر از رفتار هوش مصنوعی، نمی‌توان ایمنی یا قابلیت کنترل سیستم‌های آینده را تضمین کرد./انتخاب

منبع خبر


مسئولیت این خبر با سایت منبع و جالبتر در قبال آن مسئولیتی ندارد. خواهشمندیم در صورت وجود هرگونه مشکل در محتوای آن، در نظرات همین خبر گزارش دهید تا اصلاح گردد.

مطالب پیشنهادی از سراسر وب

برچسب ها :

ناموجود
ارسال نظر شما
مجموع نظرات : 0 در انتظار بررسی : 0 انتشار یافته : 0
  • نظرات ارسال شده توسط شما، پس از تایید توسط مدیران سایت منتشر خواهد شد.
  • نظراتی که حاوی تهمت یا افترا باشد منتشر نخواهد شد.
  • نظراتی که به غیر از زبان فارسی یا غیر مرتبط با خبر باشد منتشر نخواهد شد.

کد امنیتی *

advanced-floating-content-close-btn
advanced-floating-content-close-btn

پنجره اخبار