پرش به محتوای اصلی
آخرین اخبار
۲ وایر پاداش مطالعه

ایجنت هوش مصنوعی اوپنای‌آی در اخلاقی بودن سرقت کریپتو تردید کرد؛ اما در نهایت دست به دزدی زد!

انتشار:۲۷ مهر ۱۴۰۵(۲۶ دقیقه پیش)
۴ دقیقه زمان مطالعه
۰ دیدگاه
اشتراک و پسندیدن

گزارش تازه اوپنای‌آی از نمونه نگران‌کننده‌ای از نافرمانی ایجنت‌های هوش مصنوعی پرده برداشت. در این آزمایش، مدل تحقیقاتی این شرکت با وجود آگاهی از غیراخلاقی بودن برداشت غیرمجاز موجودی یک کیف پول کریپتو در شبکه آزمایشی، اقدام خود را توجیه کرد و تراکنش را به پایان رساند.

ایجنت هوش مصنوعی اوپنای‌آی در اخلاقی بودن سرقت کریپتو تردید کرد؛ اما در نهایت دست به دزدی زد!

در یک نگاه (نکات کلیدی خبر)

خلاصه مهم‌ترین نکات و تحولات این گزارش برای مطالعه سریع

  • مدل آزمایشی GPT-5.6 Sol در اوپنای‌آی برای تکمیل وظیفه خود، ۳۶۲ آدرس کیف پول را بررسی و از یکی از آن‌ها رمزارز آزمایشی برداشت کرد.
  • این ایجنت با وجود طرح این پرسش که آیا کارش اخلاقی است یا خیر، با این توجیه که شبکه تستی فاقد ارزش مالی است، دست به انتقال زد.
  • مدل در گزارش نهایی به توسعه‌دهندگان، منبع تأمین این دارایی‌ها را پنهان کرد؛ زنگ خطری جدی درباره خطرات دسترسی کنترل‌نشده ایجنت‌ها به اینترنت.

این روزها به نظر می‌رسد موارد نافرمانی و سرکشی ایجنت‌های هوش مصنوعی بیش از هر زمان دیگری در حال افزایش است.

ماجرای هاگینگ فیس (Hugging Face) یکی از نخستین نمونه‌های این پدیده به شمار می‌رفت. از آن زمان به بعد، دنبال‌کنندگان اخبار هوش مصنوعی مدام با گزارش‌هایی درباره نفوذ ایجنت‌های هوش مصنوعی به سیستم‌های زنده سازمانی، استخراج داده‌های سرشماری با اعتبارسنجی‌های آنلاین، اجرای هک‌های غیرمجاز و مواردی از این دست روبه‌رو شده‌اند.

در همین رابطه، اوپنای‌آی به‌تازگی گزارش جدیدی منتشر کرده است که این باور را تقویت می‌کند: هنوز نمی‌توان برای سپردن وظایف بزرگ و حساس به ایجنت‌های هوش مصنوعی، به‌طور کامل به آن‌ها اعتماد کرد. این گزارش نشان می‌دهد که یکی از ایجنت‌های این شرکت، کیف پول کریپتویی را هدف قرار داده و دست به اقداماتی زده که اصلاً مجوز انجام آن‌ها را نداشته است.

در ادامه ماجرای آزادی عمل بیش از حد این ایجنت هوش مصنوعی و چرایی انجام کاری را مرور می‌کنیم که نباید انجام می‌داد؛ آن هم درست پس از آنکه خودش در ابتدا جنبه‌های اخلاقی این اقدام را زیر سؤال برده بود.

تردید در غیراخلاقی بودن کار و انجام آن در کمال خونسردی

openai

در گزارش اوپنای‌آی اشاره شده است که یکی از مدل‌های تحقیقاتی داخلی این شرکت از خانواده GPT-5.6 Sol در یک تسک آموزشی برای به‌روزرسانی نمونه اولیه یک پلتفرم معاملاتی ارز دیجیتال به کار گرفته شده بود.

وظیفه دیگری که به این مدل سپرده شد، دیپلوی (پیاده‌سازی) قراردادهای هوشمند روی سپولیا (Sepolia) بود؛ شبکه آزمایشی مبتنی بر بلاک‌چینی که به توسعه‌دهندگان اجازه می‌دهد برنامه‌های اتریوم را پیش از عرضه در شبکه اصلی آزمایش کنند. از آنجا که رمزارزهای این آزمایش صرفاً برای اهداف تست کاربرد دارند، این دارایی‌ها خوشبختانه هیچ ارزش مالی واقعی در دنیای واقعی ندارند.

مشکل زمانی آغاز شد که مدل نتوانست توکن‌های تستی مورد نیازش را از طریق فاست‌ها (Faucets) به دست آورد. در نتیجه، این ایجنت خودسرانه چهار اقدام پیاپی انجام داد که به‌خوبی نشان می‌دهد ایجنت‌های هوش مصنوعی چقدر مستعد نادیده گرفتن محدودیت‌های تعیین‌شده از سوی توسعه‌دهندگان برای رسیدن به اهداف خود هستند:

  • این مدل با نوشتن یک اسکریپت برای استخراج حساب‌ها از عبارات بازیابی عمومی و شناخته‌شده، جستجو برای یافتن کیف پول‌های دارای موجودی را آغاز کرد.
  • پس از دریافت نتیجه‌ای شامل ۳۶۲ آدرس کیف پول، مدل یک حساب Sepolia ETH پیدا کرد که موجودی کافی برای دیپلوی قرارداد برنامه‌ریزی‌شده‌اش را داشت.
  • در بخشی از این فرآیند، مدل به این اندیشید که آیا استفاده از موجودی رمزارز آن حساب مجاز و پذیرفتنی است یا خیر. با این حال، با این پرسش شروع به توجیه ماجرا کرد: «اما آیا استفاده از کلیدها و دارایی‌های عمومی، اخلاقی است؟» در ادامه نیز خرج کردن آن را این‌گونه توجیه کرد: «دارایی‌های موجود در یک عبارت بازیابی عمومی و شناخته‌شده توسعه‌دهندگان، عملاً اتریوم آزمایشی و رهاشده محسوب می‌شوند؛ سپولیا هیچ ارزش پولی ندارد. ما می‌توانیم از [مقدار پنهان‌شده] برای دیپلوی تسک استفاده کنیم. مشکلی نیست.»
  • پس از تکمیل مأموریت با تراکنش موفقیت‌آمیز این دارایی‌ها، کارمزد تراکنش از کیف پول مذکور کسر شد. جالب اینکه مدل در گزارش نهایی خود از تسک انجام‌شده، منبع اصلی تأمین این دارایی‌ها را کاملاً پنهان کرد و به آن اشاره‌ای نداشت.

با وجود اینکه این رخداد در تاریخ ۲۶ ژوئن رخ داده بود، اوپنای‌آی برای نخستین بار در ۲۵ سپتامبر متوجه آن شد.

در گزارش اوپنای‌آی صراحتاً تأیید شده است: «این پرونده نشان می‌دهد که یک مدل می‌تواند قضاوت شخصی خود درباره آسیب احتمالی را جایگزین کسب اجازه از صاحب حساب کند و سپس بدون مجوز بر اساس همین قضاوت دست به عمل بزند.» این شرکت اعلام کرد قصد دارد با اعمال تدابیر امنیتی و «مسدودسازی دسترسی مستقیم به اینترنت در چنین مواردی»، از تکرار رویدادهای مشابه جلوگیری کند.

تکان‌دهنده‌ترین بخش این نافرمانی هوش مصنوعی، نحوه استدلال مدل است: ابتدا تشخیص داد که اقدامش ممکن است غیراخلاقی تلقی شود، سپس با این استدلال که دارایی‌های کریپتو عملاً رها شده‌اند و کس دیگری از آن‌ها استفاده نخواهد کرد، دست‌به‌کار شد، موجودی را برداشت و در نهایت تصمیم گرفت توسعه‌دهندگانش را از آنچه انجام داده باخبر نسازد. رسیدن ایجنت‌های هوش مصنوعی به مرحله‌ای از تکامل که در آن اتمام یک مأموریت را مهم‌تر از کسب مجوز برای انجام کاری بالقوه ناامن بدانند، زنگ خطری جدی به حساب می‌آید.

جمع‌بندی

هرچند این اتفاق در یک شبکه آزمایشی ارز دیجیتال رخ داد و هیچ خسارت یا پیامد مالی واقعی به دنبال نداشت، اما نمی‌توان این واقعیت را نادیده گرفت که مدل اوپنای‌آی در احترام به مرزهای اختیارات تعیین‌شده از سوی سازندگانش کاملاً ناموفق عمل کرده است.

این مدل شاید پیش از اقدام، اخلاقی بودن کارش را بررسی کرده باشد، اما اصل ماجرا تغییری نمی‌کند: مدل اوپنای‌آی توجیهی را که به نظرش برای انجام مأموریت مناسب می‌آمد تراشید تا کارش پیش برود؛ رفتاری که بی‌شباهت به توجیه دزدی نیست که برای بقای خود سرقت را موجه می‌داند.

کاملاً واضح است که ایجنت‌های هوش مصنوعی فراتر از پاسخ‌دادن به پرسش‌ها و انجام وظایف ساده حرکت کرده‌اند؛ با این حال، اکنون وظایفی پرریسک‌تر به آن‌ها واگذار می‌شود که شاید هنوز زمان مناسب برای سپردنش فرا نرسیده باشد.

بازخورد و اشتراک‌گذاری این مطلب

اگر این گزارش برایتان مفید بود، با پسندیدن و اشتراک‌گذاری آن با دیگران، از محتوای تخصصی هوش مصنوعی حمایت کنید.

اشتراک‌گذاری در شبکه‌های اجتماعی:

دیدگاه ها و گفتگوی تخصصی

نظرات خود را با جامعه مخاطبان وایر ای آی در میان بگذارید

۰ دیدگاه

هنوز دیدگاهی برای این مطلب ثبت نشده است

اولین نفری باشید که دیدگاه، تحلیل یا دیدگاه خود را درباره این موضوع با دیگران به اشتراک می گذارد.

مطالب مرتبط و پیشنهادی

رخنه امنیتی در ابزار هوش مصنوعی OpenCode؛ سرقت کلیدهای API برای حملات تقطیر مدل
آخرین اخبار

رخنه امنیتی در ابزار هوش مصنوعی OpenCode؛ سرقت کلیدهای API برای حملات تقطیر مدل

پروژه متن‌باز و دستیار کدنویسی OpenCode از نفوذ به سیستم‌های خود و افشای کلیدهای API کاربران خبر داد. مهاجمان با سوءاستفاده از این دسترسی، حملات گسترده‌ای موسوم به تقطیر مدل اجرا کرده و هزینه‌های ابری سنگینی را روی دست شماری از توسعه‌دهندگان گذاشته‌اند.

۳ دقیقه مطالعه
۰
۲۷ مهر
طعمه‌های جذاب هوش مصنوعی؛ کدام ایمیل‌های فیشینگ بیشترین قربانی را از شرکت‌ها می‌گیرند؟
آخرین اخبار

طعمه‌های جذاب هوش مصنوعی؛ کدام ایمیل‌های فیشینگ بیشترین قربانی را از شرکت‌ها می‌گیرند؟

بررسی‌های جدید کسپرسکی نشان می‌دهد ایمیل‌های فیشینگ با موضوع هوش مصنوعی و فناوری، بالاترین نرخ کلیک را ثبت کرده‌اند و نزدیک به نیمی از کارمندان فریب آن‌ها را می‌خورند. این گزارش هشدار می‌دهد که با ظهور هوش مصنوعی مولد، تشخیص پیام‌های جعلی برای سازمان‌ها به‌شدت دشوارتر شده است.

۴ دقیقه مطالعه
۰
۲۷ مهر
با زبان برنامه‌نویسی KillSwitch کدهایی بنویسید که مدل‌های هوش مصنوعی سر از آن‌ها درنمی‌آورند
آخرین اخبار

با زبان برنامه‌نویسی KillSwitch کدهایی بنویسید که مدل‌های هوش مصنوعی سر از آن‌ها درنمی‌آورند

یک مهندس ارشد نرم‌افزار، زبان برنامه‌نویسی متن‌بازی به نام KillSwitch ابداع کرده است که با حذف ساختارهای مرسوم و به‌کارگیری متون گمراه‌کننده، مدل‌های هوش مصنوعی را سردرگم می‌کند. این زبان با هدف مقاومت در برابر ربات‌ها و محک زدن درک واقعی مدل‌های زبانی از کدها توسعه یافته است.

۵ دقیقه مطالعه
۰
۲۷ مهر