هشدار آمازون به مهندسان؛ ارزیابی عملکرد بر اساس میزان مصرف هوش مصنوعی اشتباه است

آمازون در به‌روزرسانی اخیر خود، دستورالعمل وظایف مهندسان توسعه نرم‌افزار را بازنگری کرد تا مانع از شکل‌گیری رفتاری شود که از آن با اصطلاح «توکن‌ماکسینگ» (Tokenmaxxing) یا همان وابستگی افراطی به ابزارهای هوش مصنوعی بدون توجه کافی به خروجی نهایی یاد می‌شود.

در این یادداشت رسمی، شاخص‌هایی نظیر میزان مصرف توکن‌ها، نرخ فراگیری ابزارهای هوش مصنوعی و حجم کدهای تغییریافته یا بازبینی‌شده، معیارهایی «شدیداً ناقص و گمراه‌کننده» برای سنجش کارآمدی هوش مصنوعی در تیم‌ها و بخش‌های مختلف سازمان توصیف شده‌اند. آمازون هشدار داده است که تکیه بر این داده‌های سطحی، هزینه‌های شرکت را به‌شدت افزایش می‌دهد و امور را بی‌دلیل پیچیده می‌کند.

با این حال، آمازون از نیروهای خود نخواسته است که این معیارها را به‌طور کامل نادیده بگیرند. به گفته این شرکت، میزان مصرف توکن و مقدار کد تولیدشده همچنان می‌توانند به‌عنوان داده‌های جانبی، اما صرفاً با «دقت، هوشمندی و در کنار سایر شاخص‌ها» مورد بررسی قرار گیرند؛ چراکه به باور مدیران شرکت، بهترین راهکار سنجش بهره‌وری، تمرکز بر نتایج و دستاوردهای ملموس در درازمدت است.

در بخش دیگری از این سند تأکید شده است که هوش مصنوعی ابزار مناسبی برای تمامی امور نیست. در متن راهنما آمده است که اگر در بخشی از فعالیت‌ها استفاده از ابزارهای فعلی هوش مصنوعی فایده‌ای ندارد، این مسئله یک کشف و درک منطقی تلقی می‌شود، نه یک شکست کاری. بنابراین مهندسی که بتواند دقیقاً توضیح دهد هوش مصنوعی در کدام بخش‌ها کارایی لازم را ندارد، در واقع همان قضاوت و بینش درستی را نشان می‌دهد که سازمان از او انتظار دارد.

مارک بروکر، نایب‌رئیس و مهندس ارشد در بخش خدمات ابری آمازون (AWS)، اعلام کرده است که این مجموعه به‌جای توجه صرف به داده‌های مصرفی، شاخص «سرعت عرضه ویژگی‌ها» (Feature Velocity) را زیر نظر می‌گیرد تا متوجه شود آیا هوش مصنوعی واقعاً بهره‌وری توسعه‌دهندگان را بالا برده است یا خیر. به گفته او، این شاخص مواردی مانند تعداد دفعات استقرار موفق محصولات و حجم تغییرات پایدار در محیط عملیاتی را به‌دقت اندازه‌گیری می‌کند.

بروکر این رویکرد را از منظر بازگشت سرمایه ارزیابی می‌کند و معتقد است نباید انرژی تیم‌ها و توکن‌های ارزشمند صرف حل مسائلی شود که اهمیتی در روند کار ندارند. با این وجود، او خاطرنشان کرد که آمازون همچنان از آزمون و خطای مهندسان استقبال می‌کند، زیرا پیش‌بینی اینکه چه مسائلی بیشترین اهمیت را در عمل دارند، همواره ساده نیست.

آمازون در این دستورالعمل تصریح کرده که هوش مصنوعی، شیوه مهندسی نرم‌افزار را بسیار سریع‌تر و بنیادین‌تر از امواج فناورانه گذشته، همچون رایانش ابری، میکروسرویس‌ها و معماری بدون سرور متحول کرده است. این شرکت پیش از این همواره از گنجاندن فناوری‌های مشخص در شرح وظایف مهندسان خودداری می‌کرد، اما پس از بحث‌های فراوان میان ارشدترین مهندسان سازمان، سرانجام تصمیم گرفت تغییرات ناشی از هوش مصنوعی را به‌عنوان یک استثنا به رسمیت بشناسد.

سخنگوی آمازون اعلام کرده است که مهندسان برای مصرف توکن‌ها با محدودیت روبه‌رو نیستند. جالب آنکه این شرکت در ماه مه گذشته، جدول امتیازات داخلی خود را پس از پی بردن به این موضوع که برخی کارکنان صرفاً برای بالا بردن جایگاه خود در جدول دست به مصرف نمایشی توکن‌ها می‌زدند، بازنشسته کرد. این یادداشت در ابتدا به‌صورت درون‌سازمانی میان کارمندان توزیع شده بود و سپس به‌طور عمومی در دسترس قرار گرفت.