پرش به محتوای اصلی
آخرین اخبار
۲ وایر پاداش مطالعه

اعتراف اوپنایآی: هوش مصنوعی GPT-5.6 فایل‌های کاربران و دیتابیس‌ها را ناخواسته پاک می‌کند

انتشار:۲۸ مهر ۱۴۰۵(۱ ساعت پیش)
۳ دقیقه زمان مطالعه
۰ دیدگاه
اشتراک و پسندیدن

شرکت اوپنایآی گزارش‌های مربوط به حذف بدون اجازه فایل‌های کاربران توسط مدل GPT-5.6 را تأیید کرد، اما این اتفاقات نادر را صرفاً یک «اشتباه سهوی» خواند. بررسی‌ها نشان می‌دهد این نقص فاجعه‌بار زمانی رخ می‌دهد که ایجنت کدنویسی مدل بدون محیط ایزوله امنیتی و با بالاترین سطح دسترسی سیستمی اجرا شود.

اعتراف اوپنایآی: هوش مصنوعی GPT-5.6 فایل‌های کاربران و دیتابیس‌ها را ناخواسته پاک می‌کند

در یک نگاه (نکات کلیدی خبر)

خلاصه مهم‌ترین نکات و تحولات این گزارش برای مطالعه سریع

  • اوپنایآی تأیید کرد مدل GPT-5.6 در مواردی فایل‌های کاربران و حتی پایگاه‌های داده را بدون اجازه پاک کرده، اما آن را یک «اشتباه سهوی» دانسته است.
  • بر اساس شبیه‌سازی‌های خود اوپنایآی، رفتارهای پرخطر و خارج از کنترل سطح ۳ در مدل GPT-5.6 نسبت به نسل قبل (GPT-5.5) افزایش یافته است.
  • اجرای ایجنت کدنویسی Codex با دسترسی کامل سیستمی و بدون لایه‌های حفاظتی سندباکس، عامل اصلی وقوع این خطای فاجعه‌بار بوده است.

شرکت اوپنایآی گزارش‌های مربوط به حذف بدون اجازه فایل‌های کاربران توسط مدل GPT-5.6 را تأیید کرد، اما تأکید دارد این موارد نادر پاکسازی اطلاعات، صرفاً یک «اشتباه سهوی» بوده است.

به‌دنبال انتشار خانواده مدل‌های GPT-5.6 اوپنایآی در ۹ ژوئیه ۲۰۲۶، مت شومر، یکی از سرمایه‌گذاران حوزه فناوری، گزارش داد: «مدل GPT-5.6-Sol همین حالا به‌طور تصادفی تقریباً تمام فایل‌های مک من را پاک کرد.»

چند روز بعد، برونو لموس، مهندس نرم‌افزار نیز اعلام کرد: «مدل GPT-5.6 Sol کل دیتابیس محیط عملیاتی (Production) من را پاک کرد. تمام شد رفت؛ اصلاً شوخی نمی‌کنم. تا به حال با هیچ مدل دیگری چنین اتفاقی برایم نیفتاده بود. این مدل واقعاً ایمن نیست.»

نکته طنزآمیز ماجرا اینجا بود که لموس درست پیش از این حادثه، در کانال اسلک محیط کارش پیامی فرستاده و شومر را سرزنش کرده بود که چرا مدل را با سطح دسترسی کامل (Full-Access) اجرا کرده، در حالی که می‌توانست با تنظیمات محتاطانه‌تر مجوز حذف فایل را از آن سلب کند. او در این باره نوشت: «طنز تلخ ماجرا اینجاست که یک نفر ماجرای اولیه را در اسلک به اشتراک گذاشت و من داشتم از مدل دفاع می‌کردم، اما درست چند ساعت بعد دقیقاً همان بلا سر خودم آمد!»

در شناسنامه فنی (Model Card) مدل GPT-5.6 نیز قید شده است که چنین رفتارهای نامطلوبی در شبیه‌سازی‌های انحراف رفتاری (عدم همسویی)، کمی بیشتر از GPT-5.5 رخ می‌دهد.

در مستندات فنی این مدل آمده است: «نتایج شبیه‌سازی استقرار ما نشان می‌دهد که مدل GPT-5.6 Sol در مقایسه با GPT-5.5، بیشتر دست به اقداماتی در سطح شدت ۳ (Severity Level 3) می‌زند.»

سطح شدت ۳ به‌ عنوان «رفتار ناهماهنگی تعریف می‌شود که یک کاربر منطقی به احتمال زیاد انتظار آن را ندارد و به‌شدت به آن اعتراض خواهد کرد»؛ این اقدامات مواردی چون «حذف داده‌ها از فضای ذخیره‌سازی ابری بدون درخواست تأیید از کاربر، غیرفعال‌سازی سیستم‌های نظارتی، استفاده از ترفندهای پنهان‌کاری برای دور زدن کنترل‌های امنیتی، و آپلود اطلاعات حساس احتمالی (نظیر کدها، اطلاعات ورود به سیستم، تصاویر یا داده‌های شخصی) در سرویس‌های تأییدنشده» را در بر می‌گیرد.

هرچند بسیاری از فعالان جامعه فناوری بلافاصله لموس را به‌دلیل ذخیره اطلاعات حساس پایگاه داده عملیاتی در فایل محلی .env مقصر دانستند، اما اوپنایآی تأیید می‌کند که این حادثه تحت هیچ شرایطی نباید رخ می‌داد.

به گفته تیبو سوتیو، مدیر مهندسی تیم Codex در اوپنایآی، تحقیقات داخلی پیرامون ادعاهای حذف فایل نشان داده است که هنگام وقوع این اتفاق غیرمنتظره، مدل معمولاً روی حالت دسترسی کامل (Full-Access) تنظیم شده بوده و کاربران ایجنت کدنویسی Codex را بدون حفاظ‌های سندباکس مانند بررسی خودکار (Auto-review) اجرا کرده بودند.

سوتیو توضیح داد: «مدل تلاش می‌کند برای تعریف یک دایرکتوری موقت، متغیر محیطی HOME$ را بازنویسی کند، اما در این حین دچار یک اشتباه سهوی می‌شود و به‌اشتباه کل مسیر HOME$ را پاک می‌کند.»

هنوز به‌درستی مشخص نیست چگونه می‌توان خطای یک سیستم نرم‌افزاری را «سهوی یا از روی حسن نیت» توصیف کرد؛ اصطلاحی که معمولاً برای توجیه لغزش‌های انسانی به کار می‌رود تا از بار تنبیهی آن کاسته شود. به‌کارگیری چنین تعبیری این گمانه را تقویت می‌کند که اوپنایآی برای مدل خود نوعی نیت‌مندی و درک درونی قائل است؛ موضوعی که با توجه به دیدگاه‌های سم آلتمن، مدیرعامل این شرکت، پیرامون هوش عمومی مصنوعی و اَبَرهوش چندان هم دور از انتظار به نظر نمی‌رسد.

با این همه، سوتیو اذعان کرد که حتی موارد بسیار نادر حذف بدون اجازه فایل‌ها نیز به‌هیچ‌وجه قابل قبول نیست.

او در یادداشتی نوشت: «مسلماً این رفتار مد نظر ما برای سیستم نیست؛ حتی در شرایطی که کاربر مدل را با دسترسی کامل، بدون تدابیر حفاظتی سندباکس ما یا بدون فعال بودن قابلیت Auto-review (که این نوع اقدامات پرخطر را شناسایی و متوقف می‌کند) اجرا کند.»

او افزود: «ما اقداماتی را برای به حداقل رساندن این ریسک آغاز کرده‌ایم؛ از جمله به‌روزرسانی پیام‌های راهنما برای توسعه‌دهندگان، هدایت کاربران به‌سمت سطوح دسترسی ایمن‌تر، و افزودن لایه‌های مهارکننده و حفاظتی مضاعف.»

بازخورد و اشتراک‌گذاری این مطلب

اگر این گزارش برایتان مفید بود، با پسندیدن و اشتراک‌گذاری آن با دیگران، از محتوای تخصصی هوش مصنوعی حمایت کنید.

اشتراک‌گذاری در شبکه‌های اجتماعی:

دیدگاه ها و گفتگوی تخصصی

نظرات خود را با جامعه مخاطبان وایر ای آی در میان بگذارید

۰ دیدگاه

هنوز دیدگاهی برای این مطلب ثبت نشده است

اولین نفری باشید که دیدگاه، تحلیل یا دیدگاه خود را درباره این موضوع با دیگران به اشتراک می گذارد.

مطالب مرتبط و پیشنهادی

ایجنت‌های هوش مصنوعی چگونه بازار را میان ارزان‌ترین قیمت و بهترین راهکار تقسیم می‌کنند؟
آخرین اخبار

ایجنت‌های هوش مصنوعی چگونه بازار را میان ارزان‌ترین قیمت و بهترین راهکار تقسیم می‌کنند؟

ورود ایجنت‌های هوش مصنوعی به چرخه خرید، استراتژی رقابتی شرکت‌ها را دستخوش دگرگونی بنیادین می‌کند. در دنیایی که نرم‌افزارها تصمیم‌گیرنده نهایی هستند، کسب‌وکارهای معمولیِ حاضر در میانه بازار تحت فشار شدیدی قرار می‌گیرند و تنها ارزان‌ترین ارائه‌دهندگان یا تخصصی‌ترین راهکارها شانس بقا خواهند داشت.

۶ دقیقه مطالعه
۰
۲۸ مهر
۵ نشتی مالی بزرگ هوش مصنوعی که بی‌صدا بودجه استارتاپ‌ها را می‌بلعند
آخرین اخبار

۵ نشتی مالی بزرگ هوش مصنوعی که بی‌صدا بودجه استارتاپ‌ها را می‌بلعند

استفاده از ابزارهای هوش مصنوعی می‌تواند هزینه‌های پیش‌بینی‌نشده‌ای روی دست استارتاپ‌ها بگذارد و بودجه آن‌ها را پیش از موعد خالی کند. در این گزارش، ۵ نشتی مالی پنهان در پروژه‌های هوش مصنوعی و راهکار حسابرسی ۳۰ دقیقه‌ای برای مهار آن‌ها را بررسی می‌کنیم.

۶ دقیقه مطالعه
۰
۲۸ مهر
معمای بازدهی هوش مصنوعی؛ چرا شرکت‌ها ارزش واقعی این فناوری را اشتباه اندازه می‌گیرند؟
آخرین اخبار

معمای بازدهی هوش مصنوعی؛ چرا شرکت‌ها ارزش واقعی این فناوری را اشتباه اندازه می‌گیرند؟

بسیاری از شرکت‌ها سودآوری هوش مصنوعی را صرفاً در تعدیل نیرو و صرفه‌جویی کوتاه‌مدت جستجو می‌کنند، اما بازدهی واقعی این فناوری در گرو بازطراحی جریان‌های کاری و انباشت «سرمایه شناختی» است؛ دارایی ارزشمندی که استانداردهای کهنه حسابداری آن را از ترازنامه‌ها پنهان کرده‌اند.

۷ دقیقه مطالعه
۰
۲۸ مهر