پرش به محتوای اصلی
آخرین اخبار
۲ وایر پاداش مطالعه

سیل گزارش‌های توهمی هوش مصنوعی کار دست گوگل داد: توقف برنامه پاداش کشف باگ!

انتشار:۲۰ مهر ۱۴۰۵(۱ ساعت پیش)
۳ دقیقه زمان مطالعه
۰ دیدگاه
اشتراک و پسندیدن

هجوم گزارش‌های بی‌کیفیت و باگ‌های ساختگی تولیدشده توسط هوش مصنوعی، صدای غول‌های فناوری را درآورده است. گوگل به تازگی برنامه پردرآمد پاداش کشف آسیب‌پذیری در نرم‌افزارهای متن‌باز را به دلیل این اسپم‌های توهمی متوقف کرده تا سازوکار آن را بازطراحی کند.

سیل گزارش‌های توهمی هوش مصنوعی کار دست گوگل داد: توقف برنامه پاداش کشف باگ!

در یک نگاه (نکات کلیدی خبر)

خلاصه مهم‌ترین نکات و تحولات این گزارش برای مطالعه سریع

  • گوگل به دلیل هجوم سرسام‌آور گزارش‌های بی‌کیفیت و باگ‌های توهمی ساخته‌شده با هوش مصنوعی، برنامه پاداش کشف آسیب‌پذیری متن‌باز (OSS VRP) را موقتاً متوقف کرد.
  • پیش از این، محققان امنیتی کلاه‌سفید تا سقف ۳۱ هزار دلار از گوگل و ۱۵۰ هزار دلار از اینتل پاداش می‌گرفتند، اما گزارش‌های اسپم هوش مصنوعی عملاً درآمد این متخصصان را به خطر انداخته است.
  • تولید انبوه محتوای بی‌کیفیت توسط مدل‌های زبانی کل اینترنت را پر کرده و پژوهشگران هشدار می‌دهند چرخه «ورودی بی‌کیفیت، خروجی بی‌کیفیت» حتی کیفیت خود مدل‌های هوش مصنوعی را هم به قهقرا می‌برد.

برنامه‌های پاداش کشف باگ (Bug Bounty) همیشه قراری دو سر برد بودند: سازمان‌های بزرگ روزنه‌های امنیتی خود را می‌بندند و هکرهای ماهر هم در ازای پیدا کردن این آسیب‌پذیری‌ها دستمزد خوبی به جیب می‌زنند. اما با پیشرفت و همه‌گیری هوش مصنوعی، ورق برگشته و این برنامه‌ها زیر بار سیل عظیمی از گزارش‌های بی‌کیفیت دفن شده‌اند؛ گزارش‌هایی که به جای پژوهشگران واقعی، توسط مدل‌های زبانی بزرگ (LLM) تولید شده‌اند و پر از باگ‌های ساختگی، غیرقابل نفوذ یا اصطلاحاً خطاهای توهمی هستند.

این وضعیت به جای آنکه کمکی به شرکت‌ها بکند، به مانعی بزرگ تبدیل شده و گوگل را مجبور کرده درست مانند پروژه‌های کِرل (Curl)، اینتل (Intel) و هکر‌وان (HackerOne)، برنامه پاداش نقدی خود موسوم به «برنامه گزارش آسیب‌پذیری نرم‌افزارهای متن‌باز» (به اختصار OSS VRP) را به حالت تعلیق درآورد. این برنامه از پردرآمدترین برنامه‌های باگ‌بانتی در دنیای وب بود و توقف آن یعنی متخصصان امنیت و هکرهای کلاه‌سفید یکی از بهترین راه‌های کسب درآمد از مهارت‌هایشان را از دست داده‌اند. جالب است بدانید گوگل در این برنامه برای آسیب‌پذیری‌های بسیار خطرناک تا ۳۱٬۳۳۷ دلار پاداش پرداخت می‌کرد و این رقم در اینتل حتی به ۱۵۰ هزار دلار هم می‌رسید.

البته این به معنای پایان همیشگی برنامه OSS VRP نیست. گوگل می‌گوید با اینکه اکثر قریب به اتفاق گزارش‌های خودکار کاملاً فاقد اعتبار و بی‌مصرف هستند، اما این شرکت متعهد شده ساختار برنامه را کاملاً بازطراحی کند و نسخه تازه آن را در اوایل سال ۲۰۲۷ به نمایش بگذارد. تا آن زمان، شکارچیان باگ می‌توانند روی سایر بخش‌های پاداش آسیب‌پذیری و پچ‌های امنیتی گوگل حساب باز کنند که همچنان فعال هستند. البته یک گزینه هیجان‌انگیز دیگر هم پیش روی آن‌هاست: تلاش برای شکار جایزه ۲ میلیون دلاری اپل در ازای یافتن آسیب‌پذیری‌هایی که قدرتی در حد بدافزارهای جاسوسی پیشرفته دارند!

هوش مصنوعی تا مغز استخوان اینترنت نفوذ کرده است

تصویری از صفحه گوشی هوشمند با حباب‌های گفتگو حاوی کلمات هوش مصنوعی

شاید غافلگیر شوید اگر بدانید این روز‌ها بخش اعظم محتوایی که در اینترنت می‌بینید، ساخته دست هوش مصنوعی است؛ از مقالات و قطعات موسیقی گرفته تا پست‌ها و کامنت‌های شبکه‌های اجتماعی که همگی با مدل‌های زبانی نگارش شده‌اند. هنرمندان به درستی از این بهمن محتوایی انتقاد می‌کنند و آن را خروجی‌هایی پیش‌پاافتاده می‌دانند، اما این بحران گریبان خود غول‌های هوش مصنوعی را هم گرفته است. پژوهشگران هشدار می‌دهند وقتی هوش مصنوعی از محتوای تولیدشده توسط خودش تغذیه کند، به مرور کندذهن‌تر و بی‌کیفیت‌تر می‌شود؛ پدیده‌ای که در علوم داده به قانون «ورودی آشغال، خروجی آشغال» (Garbage in, Garbage out) شهرت دارد. از آنجا که ابزار‌هایی مانند ChatGPT با داده‌های عمومی وب از جمله پلتفرم ردیت آموزش می‌بینند، یک چرخه فرسایشی و معیوب شکل می‌گیرد. دقیقاً به همین دلیل است که شرکت‌هایی مثل گوگل و آنتروپیک (Anthropic) به سراغ پروژه‌های عظیمی برای اسکن کتاب‌های چاپی رفته‌اند؛ زیرا این کتاب‌ها محتوایی دست‌نخورده و کاملاً انسانی از دورانی هستند که هوش مصنوعی هنوز به جان اینترنت نیفتاده بود.

البته این بدان معنا نیست که هوش مصنوعی کاربرد مفیدی ندارد. این فناوری توانمندی شگفت‌انگیز خود را در تشخیص زودهنگام برخی سرطان‌ها، دسترس‌پذیر کردن ابزار‌ها با تبدیل گفتار به متن و زیرنویس زنده، و حتی طراحی داروهای انقلابی برای بیماری‌هایی نظیر پارکینسون اثبات کرده است. حتی در دنیای کشف باگ نیز دستی بر آتش دارد و اخیراً توانسته بیش از ۱٬۰۰۰ آسیب‌پذیری را در لینوکس شناسایی کند. با این حال، تفاوت در اینجاست که گزارش‌های اسپم و بی‌کیفیت معمولاً توسط کاربرانی ارسال می‌شوند که درک درستی از امنیت سایبری ندارند و بدون کوچک‌ترین راستی‌آزمایی، توهمات هوش مصنوعی را به عنوان رخنه امنیتی واقعی جا می‌زنند.

ابزار‌های هوش مصنوعی به زودی فراگیرتر، رایگان‌تر و پرقدرت‌تر خواهند شد و می‌توانند حجم نامحدودی از محتوایی را خلق کنند که در نگاه اول کاملاً درست به نظر می‌رسد. در نتیجه، سوءاستفاده از این ابزار‌ها نیز رشد چشمگیری خواهد داشت؛ در حالی که انسان‌ها هنوز آمادگی لازم را برای مواجهه با آن ندارند. غول‌هایی مثل گوگل ناچارند سازوکارهای کنترل کیفیت بسیار قدرتمندتری بسازند و منابع زیادی را خرج کنند تا شاید در میان این اقیانوس بیکران از اسپم، چند قطره باگ واقعی و ارزشمند بیرون بکشند.

بازخورد و اشتراک‌گذاری این مطلب

اگر این گزارش برایتان مفید بود، با پسندیدن و اشتراک‌گذاری آن با دیگران، از محتوای تخصصی هوش مصنوعی حمایت کنید.

اشتراک‌گذاری در شبکه‌های اجتماعی:

دیدگاه ها و گفتگوی تخصصی

نظرات خود را با جامعه مخاطبان وایر ای آی در میان بگذارید

۰ دیدگاه

هنوز دیدگاهی برای این مطلب ثبت نشده است

اولین نفری باشید که دیدگاه، تحلیل یا دیدگاه خود را درباره این موضوع با دیگران به اشتراک می گذارد.

مطالب مرتبط و پیشنهادی

شاهکار پروژه Maya: اجرای مدل غول‌پیکر ۳۲۱ میلیاردی GLM فقط با یک کارت گرافیک!
آخرین اخبار

شاهکار پروژه Maya: اجرای مدل غول‌پیکر ۳۲۱ میلیاردی GLM فقط با یک کارت گرافیک!

پروژه متن‌باز Maya با یک ترفند مهندسی هوشمندانه، اجرای محلی مدل ۳۲۱ میلیارد پارامتری GLM-5.3-Flash را روی سیستم‌های لینوکسی مجهز به یک کارت گرافیک انویدیا ممکن کرده است. این ابزار با توزیع هوشمند وزن‌های مدل میان حافظه گرافیک، رم سیستم و حافظه SSD، مدلی را که پیش‌تر به صدها گیگابایت حافظه شتاب‌دهنده نیاز داشت، در دسترس سیستم‌های معمولی قرار می‌دهد.

۲ دقیقه مطالعه
۰
۲۰ مهر
۱۰ ترند بزرگ هوش مصنوعی که تا سال ۲۰۲۷ محیط کار و آینده شغلی شما را متحول می‌کنند
آخرین اخبار

۱۰ ترند بزرگ هوش مصنوعی که تا سال ۲۰۲۷ محیط کار و آینده شغلی شما را متحول می‌کنند

تا سال ۲۰۲۷ محیط‌های کاری شاهد تحولی بی‌سابقه خواهند بود؛ جایی که همکاران شما شاید ایجنت‌های هوش مصنوعی باشند و ربات‌های انسان‌نما در کنار انسان‌ها کار کنند. بررسی ۱۰ ترند کلیدی آینده کار نشان می‌دهد که چگونه اتوماسیون، استخدام‌های الگوریتمی و نسل بومی هوش مصنوعی نحوه اشتغال ما را دگرگون خواهند کرد.

۸ دقیقه مطالعه
۰
۲۰ مهر
شبیه‌سازی عجیب روان‌درمانگر با هوش مصنوعی؛ وقتی مراجعان کلون پزشکشان را می‌سازند!
آخرین اخبار

شبیه‌سازی عجیب روان‌درمانگر با هوش مصنوعی؛ وقتی مراجعان کلون پزشکشان را می‌سازند!

برخی مراجعان برای درک بهتر روند درمان یا تمرین پیش از جلسات مشاوره، دست به ساخت پرسونای هوش مصنوعی از روان‌درمانگر خود می‌زنند. این پدیده نوظهور با وجود انگیزه‌های اولیه منطقی، با خطرات پنهانی مانند گمراهی بیمار، توهم مدل و نقض حریم خصوصی همراه است. کارشناسان هشدار می‌دهند تکیه بر این شبیه‌سازی‌ها می‌تواند رابطه واقعی پزشک و بیمار را کاملاً مخدوش کند.

۱۴ دقیقه مطالعه
۰
۲۰ مهر