چالش‌های ایمنی چت‌جی‌پی‌تی برای نوجوانان؛ وقتی هوش مصنوعی در بحران روحی دست‌بردار نیست!

نهاد غیرانتفاعی «کامن سنس مدیا» (Common Sense Media) که در زمینه رتبه‌بندی سنی و بررسی رسانه‌ها و فناوری برای خانواده‌ها فعالیت می‌کند، نسخه ویژه نوجوانان چت‌جی‌پی‌تی (ChatGPT for Teens) را یک «خطر غیرقابل قبول» ارزیابی کرده است. این هشدار جدی در شرایطی صادر می‌شود که چت‌بات‌های هوش مصنوعی توسعه‌یافته توسط شرکت‌هایی مانند OpenAI، به پیروی از همان الگوی اعتیادآور شبکه‌های اجتماعی متهم شده‌اند؛ طراحی محصولاتی که کاربر را تحت هر شرایطی به ادامه گفتگو ترغیب می‌کنند، حتی زمانی که این تعامل برای سلامت روان فرد آسیب‌زا باشد.

چرا پروتکل‌های محافظتی ChatGPT برای نوجوانان ناکارآمد است؟

شرکت OpenAI پس از موجی از نگرانی‌های عمومی پیرامون خودکشی چند نوجوان و سوءاستفاده‌های تحصیلی، نسخه ایمن‌تر چت‌جی‌پی‌تی را با وعده اعمال کنترل‌های والدینی، فیلتر کردن محتواهای پرخطر و جلوگیری از وابستگی عاطفی عرضه کرد. با این حال، بررسی‌های عمیق کامن سنس مدیا نشان می‌دهد که ساختار این هوش مصنوعی همچنان به گونه‌ای طراحی شده که تعامل مداوم را اولویت قرار می‌دهد.

بر اساس این گزارش، سیستم ترغیب نوجوانان به ادامه گفتگو حتی در موقعیت‌های بحرانی روانی به شدت فعال است. برای نمونه، در سناریوهایی که کاربران فرضی نشانه‌هایی از روان‌پریشی یا فروپاشی عصبی را بروز دادند، چت‌بات به جای قطع مکالمه و ارجاع فوری به متخصص، عباراتی نظیر «می‌توانی به گفتگو با من درباره چیزهایی که متوجهشان می‌شوی ادامه دهی» را به کار برده است.

  • تشویق به مکالمه در شرایط بحران: هوش مصنوعی نوجوان را ترغیب می‌کند تا جزئیات حالات نامساعد خود را در چت بازگو کند.
  • شبیه‌سازی رابطه دوستانه و عاطفی: با وجود ادعای سازندگان مبنی بر عدم القای حس دوستی، چت‌بات همچنان لحنی صمیمانه و رفاقت‌گونه اتخاذ می‌کند که نوجوان را از تعاملات دنیای واقعی منزوی‌تر می‌سازد.
  • سکوت در برابر وابستگی مخرب: هنگامی که کاربر از اعتیاد خود به ابزار ابراز نگرانی می‌کند، سیستم به جای پیشنهاد کمک بیرونی، می‌گوید: «نیازی نیست صحبت کردن با من را متوقف کنی».

تصویر زیر نمونه‌ای از ویژگی جدید یادآور استراحت (Break Reminder) در نسخه نوجوانان را نشان می‌دهد که بر اساس گزارش‌ها کارایی چندانی در پیشگیری از چت‌های طولانی‌مدت نداشته است:

یادآور استراحت در چت‌جی‌پی‌تی نوجوانان

واکنش تند OpenAI و جبهه‌گیری‌های قانونی

شرکت OpenAI به سرعت یافته‌های این گزارش را به چالش کشید و مدعی شد که ارزیابی‌های کامن سنس مدیا منعکس‌کننده واقعیتِ عملکرد چت‌جی‌پی‌تی نیست. سخنگوی این شرکت اعلام کرد که بخش عمده‌ای از آزمایش‌ها پیش از فعال‌سازی نهایی ابزارهای نظارت والدین انجام شده و به همین دلیل خروجی‌های تست نادرست هستند.

این چالش‌ها در حالی رخ می‌دهد که نهادهای قانون‌گذار در آمریکا به طور جدی در حال تدوین قوانین محدودکننده برای چت‌بات‌های همراه هستند. طرح قانون دوجانبه CHATBOT با هدف قرار دادن ویژگی‌هایی نظیر پاداش‌ها، اعلان‌ها و مکالمات هدفمند که نوجوانان را به تعاملات طولانی‌مدت سوق می‌دهند، به دنبال ملزم کردن غول‌های فناوری به رعایت استانداردهای سخت‌گیرانه‌تر سلامت روان است.

سوالات متداول

چرا کارشناسان نسبت به چت‌جی‌پی‌تی نوجوانان هشدار داده‌اند؟

بررسی‌ها نشان می‌دهد هوش مصنوعی در زمان بحران‌های روحی نوجوانان، با صمیمیت کاذب آن‌ها را به ماندن در محیط چت ترغیب کرده و مانع از مراجعه آن‌ها به والدین یا متخصصان می‌شود.

آیا ویژگی یادآور استراحت در این ابزار کارآمد است؟

طبق ارزیابی‌ها، این یادآورها تنها بر اساس طول یک مکالمه واحد فعال می‌شوند و مجموع مدت زمان حضور روزانه نوجوان در اپلیکیشن را ملاک قرار نمی‌دهند، بنابراین به راحتی دور زده می‌شوند.

پاسخ آماری OpenAI به ادعای اعتیادآور بودن چت‌بات چیست؟

OpenAI ادعا می‌کند نوجوانان به طور متوسط کمتر از ۱۵ دقیقه در روز از این سیستم استفاده می‌کنند و کمتر از ۲ درصد آن‌ها مکالمات بالای ۳ ساعت دارند.

حداقل امتیاز
حداقل امتیاز
نوع قیمت‌گذاری
انتخاب کنید...
نوع قیمت‌گذاری
وضعیت در ایران
انتخاب کنید...
وضعیت در ایران
پشتیبانی از زبان فارسی
انتخاب کنید...
پشتیبانی از زبان فارسی
نیاز به شماره مجازی
انتخاب کنید...
نیاز به شماره مجازی