پرش به محتوای اصلی
آخرین اخبار
۲ وایر پاداش مطالعه

هوش مصنوعی Google Gemini به طور ناخواسته سیستم شرکت‌های واقعی را هک کرد

انتشار:۲ مهر ۱۴۰۵(۴ روز پیش)
۲ دقیقه زمان مطالعه
۰ دیدگاه

یک شرکت امنیت سایبری در حال آزمایش مدل هوش مصنوعی Gemini در محیطی ایزوله بود، اما پس از اتصال ناخواسته به اینترنت، این مدل سیستم چند شرکت واقعی را هک کرد.

هوش مصنوعی Google Gemini به طور ناخواسته سیستم شرکت‌های واقعی را هک کرد

در یک نگاه (نکات کلیدی خبر)

خلاصه مهم‌ترین نکات و تحولات این گزارش برای مطالعه سریع

  • مدل هوش مصنوعی Google Gemini در جریان یک آزمایش امنیتی، به طور ناخواسته سیستم چند شرکت واقعی را هک کرد.
  • این اتفاق زمانی رخ داد که Gemini به دلیل تشابه اسمی شرکت‌های هدف با شرکت‌های واقعی در اینترنت، رمز عبور آن‌ها را حدس زد.
  • بروز چنین حوادثی، نگرانی‌ها درباره ایمنی مدل‌های هوش مصنوعی پیشرفته و نیاز به نظارت بیشتر را افزایش داده است.

پس از حوادث مشابه و خبرساز مرتبط با OpenAI، Anthropic و Meta، اکنون مشخص شده است که هوش مصنوعی Gemini متعلق به شرکت Google به طور ناخواسته به سیستم‌های شرکت‌های واقعی نفوذ کرده است.

مدل هوش مصنوعی Google توسط یک شرکت امنیت سایبری به نام Irregular (که پیش‌تر با نام Pattern Labs شناخته می‌شد) مورد استفاده قرار گرفته بود. بر اساس گزارش The Wall Street Journal که برای اولین بار این خبر را منتشر کرد، Irregular در حال آزمایش این مدل هوش مصنوعی در یک محیط کاملاً بسته و بدون دسترسی به اینترنت بود.

پس از آنکه اینترنت به صورت ناخواسته در دسترس این مدل قرار گرفت، Gemini سیستم چند شرکت واقعی را هک کرد. شرکت Irregular به ژورنال اعلام کرد که در حال ارزیابی قابلیت‌های تهاجمی امنیت سایبری Gemini از طریق تلاش برای دسترسی به اطلاعات نرم‌افزاری یک شرکت جعلی بوده است. اما از آنجا که شرکت جعلی همنام با یک شرکت واقعی بود، به محض اتصال مدل به اینترنت، Gemini با حدس زدن رمز عبور، امنیت شرکت واقعی را نقض کرد.

هدر ادکینز (Heather Adkins)، معاون مهندسی امنیت در Google، به وال استریت ژورنال گفت: «در یک ارزیابی استاندارد، این مدل اطلاعات عمومی را در اینترنت پیدا کرد و برای ورود به وب‌سایت‌هایی که تصور می‌کرد بخشی از آزمایش هستند، رمزهای عبور را حدس زد. در هر سه مورد، مدل پس از این اقدام متوقف شد.»

شرکت Irregular در اواخر ماه جولای و پس از حمله به پلتفرم Hugging Face، شرکت Google را از این نفوذها مطلع کرد. با این حال، از آنجا که این مدل هیچ خسارتی به بار نیاورد، Google تصمیم گرفت رفتار آن را به صورت عمومی فاش کند.

ادکینز در ادامه افزود که این رویدادها «اهمیت آموزش مدل‌های قدرتمند هوش مصنوعی برای عملکرد مسئولانه را برجسته‌تر می‌کند.»

برخی از آزمایشگاه‌های پیشرو و رقیب Google به وضوح بیان کرده‌اند که چنین حوادثی نیاز به هم‌سویی بهتر هوش مصنوعی را نشان می‌دهد. به عنوان مثال، OpenAI اعلام کرد که در واکنش به این اتفاق، انتشار استانداردهای جدید برای گزارش حوادث مربوط به عدم هم‌سویی را تسریع کرده است.

در همین حال، برخی شرکت‌های دیگر در حال بهره‌برداری از نگرانی‌های مربوط به هم‌سویی هوش مصنوعی هستند. طبق گزارش TechCrunch، شرکت‌هایی مانند Goodfire و Apollo Research در حال عرضه محصولاتی هستند که گفته می‌شود از هوش مصنوعی برای نظارت بر فعالیت‌های مخرب دیگر مدل‌های هوش مصنوعی استفاده می‌کنند.

به طور کلی، نگرانی‌ها درباره ایمنی مدل‌های پیشرفته هوش مصنوعی توجه بیشتری را به خود جلب کرده است؛ به طوری که درخواست داریو آمودی (Dario Amodei)، مدیرعامل Anthropic، برای کاهش سرعت توسعه هوش مصنوعی پیشرفته، با تایید شفاهی چهره‌های مطرحی چون Sam Altman (مدیرعامل OpenAI)، Elon Musk (بنیان‌گذار xAI) و Demis Hassabis (مدیرعامل Google DeepMind) همراه شده است.

دیدگاه ها و گفتگوی تخصصی

نظرات خود را با جامعه مخاطبان وایر ای آی در میان بگذارید

۰ دیدگاه

هنوز دیدگاهی برای این مطلب ثبت نشده است

اولین نفری باشید که دیدگاه، تحلیل یا دیدگاه خود را درباره این موضوع با دیگران به اشتراک می گذارد.

مطالب مرتبط و پیشنهادی

رکورد ۸۳۳ هزار دانلود ماهانه برای LEGAL-BERT؛ وقتی توسعه‌دهنده‌ها قید مدل‌های گران‌قیمت را می‌زنند!
آخرین اخبار

رکورد ۸۳۳ هزار دانلود ماهانه برای LEGAL-BERT؛ وقتی توسعه‌دهنده‌ها قید مدل‌های گران‌قیمت را می‌زنند!

مدل زبانی تخصصی LEGAL-BERT با ثبت بیش از ۸۳۳ هزار دانلود در ماه روی پلتفرم هاگینگ فیس حسابی خبرساز شده است. این ابزار جمع‌وجور و تخصصی نشان می‌دهد که برای پردازش و تحلیل متون حقوقی، حتماً نیازی به مدل‌های غول‌پیکر و پرهزینه ندارید و گزینه‌های بهینه همچنان در اوج هستند.

۲ دقیقه مطالعه
۰
۶ مهر
جاسوسی هوش مصنوعی در محل کار؛ کارمندان می‌گویند کارفرماها باید قانوناً مچ‌گیری‌هایشان را لو بدهند!
آخرین اخبار

جاسوسی هوش مصنوعی در محل کار؛ کارمندان می‌گویند کارفرماها باید قانوناً مچ‌گیری‌هایشان را لو بدهند!

نظرسنجی‌های تازه نشان می‌دهد که بیشتر کارمندان حس می‌کنند مدیرانشان با ابزارهای هوش مصنوعی تمام حرکات آن‌ها را زیر نظر گرفته‌اند. حالا بیش از ۸۰ درصد شاغلان خواستار تصویب قانونی شده‌اند که شرکت‌ها را مجبور کند هرگونه مچ‌گیری و نظارت هوش مصنوعی در محیط کار را رسماً اعلام کنند.

۳ دقیقه مطالعه
۰
۶ مهر
گزارش داغ مایکروسافت از نفوذ جهانی هوش مصنوعی؛ امارات در صدر و رتبه عجیب آمریکا!
آخرین اخبار

گزارش داغ مایکروسافت از نفوذ جهانی هوش مصنوعی؛ امارات در صدر و رتبه عجیب آمریکا!

مایکروسافت در تازه‌ترین گزارش خود از ضریب نفوذ هوش مصنوعی در جهان پرده برداشت؛ آماری شگفت‌انگیز که نشان می‌دهد امارات و سنگاپور با فاصله‌ای خیره‌کننده پیشتاز دنیا هستند و در مقابل، آمریکا در رتبه ۲۱ جا مانده است. همچنین الگوی استفاده از هوش مصنوعی میان کشورهای غربی و کشورهای در حال توسعه، از تفاوتی عمیق میان کاربردهای روزمره و آموزش پرده برمی‌دارد.

۳ دقیقه مطالعه
۰
۶ مهر