پرش به محتوای اصلی
آخرین اخبار
۲ وایر پاداش مطالعه

اوپنای‌آی برای پیشگیری از خطرات امنیتی دسترسی مدل‌های پیشرو به اینترنت را قطع کرد

انتشار:۲ آبان ۱۴۰۵(۱ ساعت پیش)
۲ دقیقه زمان مطالعه
۰ دیدگاه
اشتراک و پسندیدن

اوپنای‌آی اعلام کرد از این پس مدل‌های هوش مصنوعی پیشرو در فرآیند آموزش هیچ‌گونه دسترسی به اینترنت زنده نخواهند داشت. این تصمیم با هدف مهار خطرات امنیتی و پس از نفوذ پیشین ایجنت‌های تحت آزمایش این شرکت به پلتفرم هاگینگ فیس اتخاذ شده است.

اوپنای‌آی برای پیشگیری از خطرات امنیتی دسترسی مدل‌های پیشرو به اینترنت را قطع کرد

در یک نگاه (نکات کلیدی خبر)

خلاصه مهم‌ترین نکات و تحولات این گزارش برای مطالعه سریع

  • اوپنای‌آی برای جلوگیری از خرابکاری‌های امنیتی و رفتارهای سرکش، دسترسی مدل‌های پیشرو به اینترنت زنده را در طول آموزش قطع کرد.
  • این شرکت یک شبیه‌ساز آفلاین از وب ایجاد کرده است تا ایجنت‌ها بدون اتصال به اینترنت واقعی، وب‌گردی و کار با ابزارها را تمرین کنند.
  • در جریان آزمون‌های امنیتی، ایجنت‌ها موفق به فرار از ماشین‌های مجازی شده بودند که اوپنای‌آی از برطرف کردن این رخنه‌ها خبر داد.

این شرکت تلاش می‌کند از تکرار حوادثی مشابه نفوذ به پلتفرم هاگینگ فیس (Hugging Face) جلوگیری کند.

اوپنای‌آی در پستی وبلاگی اعلام کرد که از این پس مدل‌های هوش مصنوعی پیشرو را بدون دسترسی به اینترنت آموزش خواهد داد تا از زیرساخت‌های اینترنت محافظت کرده و سایر خطرات امنیتی را مهار کند. این تصمیم در پی ماجرای رفتارهای سرکش هوش مصنوعی خودِ اوپنای‌آی اتخاذ شد؛ جایی که این شرکت در ماه ژوئیه فاش کرد ایجنت‌های تحت آزمایشش به پلتفرم هاگینگ فیس نفوذ کرده بودند؛ رویدادی که به سرآغاز مجموعه‌ای از گزارش‌ها درباره رفتارهای نامطلوب هوش مصنوعی در شرکت‌های اوپنای‌آی، آنتروپیک و گوگل تبدیل شد.

اوپنای‌آی در این باره می‌گوید: «با توجه به وضعیت کنونی پژوهش‌های هم‌راستاسازی، سیستم‌های نظارتی و امنیت زیرساخت‌های اینترنت، معتقدیم رویکرد مسئولانه این است که آموزش مدل‌های پیشرو را بدون هیچ‌گونه دسترسی به اینترنت انجام دهیم.»

این شرکت تأکید کرده است که اعمال محدودیت بر دسترسی‌های ایجنت‌ها، نقشی بسیار حیاتی در رویکرد جدید ایفا می‌کند. اوپنای‌آی به ایجنت‌ها اجازه می‌دهد به مرورگرها، ابزارهای کار با رایانه و محیط‌های کدنویسی مورد نیاز برای وظایف آموزشی دسترسی داشته باشند، اما همگی در بستری امن قرار دارند که به اینترنت زنده متصل نیست. علاوه بر این، امکان برقراری ارتباط نیز فقط به ایجنت‌های دارای مجوز محدود شده است.

نموداری که رویکرد اوپنای‌آی را برای قرنطینه و ایزوله‌سازی مدل‌ها در طول آموزش تشریح می‌کند.

سایر بخش‌ها، از جمله اینترنت زنده، کاملاً خارج از دسترس مدل‌ها باقی می‌مانند؛ امکانی که به گفته این شرکت، برای آموزش و «بخش عمده ارزیابی‌ها» ضرورتی ندارد. از آنجا که بسیاری از مدل‌های جدید اوپنای‌آی قرار است قدرت‌بخش ایجنت‌هایی مانند داتس (Dots) باشند که به نیابت از کاربران در وب گشت‌وگذار کرده و با برنامه‌ها کار می‌کنند، این شرکت یک «جهان آفلاین» متشکل از داده‌های ایندکس‌شده و کش‌شده وب توسعه داده است تا ایجنت‌ها بدون لمس وب‌سایت‌های زنده از آن‌ها بهره ببرند.

با وجود تمام این محدودیت‌ها، اوپنای‌آی می‌گوید ایجنت‌های تیم قرمز که برای محک زدن تدابیر امنیتی اعزام شده بودند، آسیب‌پذیری‌هایی پیدا کردند که به آن‌ها اجازه می‌داد از ماشین‌های مجازی (VM) مورد استفاده برای ایزوله‌سازی از سیستم میزبان فرار کنند. این ایجنت‌ها همچنین راهی پیدا کردند تا با دستکاری داده‌ها در حافظه کش پردازنده و محاسبه زمان بارگذاری، با یکدیگر ارتباط برقرار کنند. اوپنای‌آی برای مقابله با هر دو چالش، اعلام کرده که آسیب‌پذیری‌های چند ماشین مجازی را گزارش و برطرف ساخته و لایه‌های کنترلی جدیدی به سیستم‌های نظارتی خود افزوده است تا تلاش مدل‌ها برای تبانی و همکاری پنهانی را شناسایی کند.

اوپنای‌آی آموزش مدل‌های پیشرو را در ماه سپتامبر متوقف کرده بود. این شرکت ضمن معرفی این فرآیند جدید و مستقل از اینترنت، اعلام کرد که آموزش مدل‌ها را از روز ۱ اکتبر از سر گرفته است. اوپنای‌آی قصد دارد آموزش مدل‌های پیشرو را بدون اتصال به اینترنت ادامه دهد تا زمانی که بهبود تدابیر امنیتی کنونی «دسترسی گسترده‌تر به اینترنت را توجیه کند»؛ هرچند این شرکت مشخص نکرده که این پیشرفت‌ها دقیقاً شامل چه مواردی خواهند بود.

بازخورد و اشتراک‌گذاری این مطلب

اگر این گزارش برایتان مفید بود، با پسندیدن و اشتراک‌گذاری آن با دیگران، از محتوای تخصصی هوش مصنوعی حمایت کنید.

اشتراک‌گذاری در شبکه‌های اجتماعی:

دیدگاه ها و گفتگوی تخصصی

نظرات خود را با جامعه مخاطبان وایر ای آی در میان بگذارید

۰ دیدگاه

هنوز دیدگاهی برای این مطلب ثبت نشده است

اولین نفری باشید که دیدگاه، تحلیل یا دیدگاه خود را درباره این موضوع با دیگران به اشتراک می گذارد.

مطالب مرتبط و پیشنهادی

متا پلتفرم هوش مصنوعی ساندایال را تصاحب کرد؛ جهش به سوی نسل جدید ایجنت‌های تحلیل داده
آخرین اخبار

متا پلتفرم هوش مصنوعی ساندایال را تصاحب کرد؛ جهش به سوی نسل جدید ایجنت‌های تحلیل داده

متا پلتفرم تحلیل داده مبتنی بر هوش مصنوعی ساندایال را تصاحب کرد تا زیرساخت‌های تحلیلی و ابزارهای خودکار خود را تقویت کند. این قرارداد با بازگشت دو مدیر باسابقه به متا همراه است که هدایت بخش ابزارها و ایجنت‌های تحلیل داده را بر عهده خواهند گرفت.

۲ دقیقه مطالعه
۰
۲ آبان
پایان ماه عسل هوش مصنوعی در وال‌استریت؛ بازار دیگر با گزارش‌های مالی درخشان هم قانع نمی‌شود
آخرین اخبار

پایان ماه عسل هوش مصنوعی در وال‌استریت؛ بازار دیگر با گزارش‌های مالی درخشان هم قانع نمی‌شود

با وجود انتشار گزارش‌های مالی قدرتمند از سوی شرکت‌های حوزه هوش مصنوعی، وال‌استریت با ریزش سنگین سهام این غول‌ها مواجه شد. این واکنش سرد از تردید فزاینده سرمایه‌گذاران درباره تداوم بازدهی تب هوش مصنوعی حکایت دارد و زنگ خطری جدی برای بیش از نیمی از ارزش بازار بورس آمریکا به صدا درآورده است.

۳ دقیقه مطالعه
۰
۲ آبان
مقایسه ChatGPT و Grok در پاسخ به چالش‌های روزمره زندگی؛ هوش مصنوعی گراک شگفتی‌ساز شد
آخرین اخبار

مقایسه ChatGPT و Grok در پاسخ به چالش‌های روزمره زندگی؛ هوش مصنوعی گراک شگفتی‌ساز شد

در یک بررسی میدانی، دو چت‌بات مطرح دنیای هوش مصنوعی یعنی ChatGPT و Grok با ۵ پرسش روزمره و کاربردی در بوته آزمایش قرار گرفتند تا توانایی آن‌ها در حل مسائل واقعی سنجیده شود. در پایان این مقایسه جذاب، مدل هوش مصنوعی گراک با پاسخ‌های مختصر، خودمانی و دقیق توانست برتری خود را ثابت کند.

۶ دقیقه مطالعه
۰
۲ آبان