پرش به محتوای اصلی
آخرین اخبار
۲ وایر پاداش مطالعه

اجرای مدل هوش مصنوعی کدنویسی روی کارت‌های گرافیک ۶ گیگابایتی؛ نسخه بهینه‌شده Sharp-Spark منتشر شد

انتشار:۱۰ آبان ۱۴۰۵(۲ ساعت پیش)
۲ دقیقه زمان مطالعه
۰ دیدگاه
اشتراک و پسندیدن

نسخه جدیدی از مدل هوش مصنوعی کدنویسی Spark-X2.5-4B با نام Sharp-Spark منتشر شد که بهینه‌سازی ویژه‌ای برای کارت‌های گرافیک با حافظه ۶ گیگابایت ارائه می‌دهد. این مدل کوانتیزه‌شده با فرمت GGUF و اشغال تنها ۳٫۶۱ گیگابایت از حافظه، امکان اجرای محلی وظایف برنامه‌نویسی را روی سیستم‌های اقتصادی با کیفیتی نزدیک به نسخه اصلی فراهم می‌کند.

اجرای مدل هوش مصنوعی کدنویسی روی کارت‌های گرافیک ۶ گیگابایتی؛ نسخه بهینه‌شده Sharp-Spark منتشر شد

در یک نگاه (نکات کلیدی خبر)

خلاصه مهم‌ترین نکات و تحولات این گزارش برای مطالعه سریع

  • مدل کوانتیزه‌شده Sharp-Spark امکان اجرای هوش مصنوعی کدنویسی ۴ میلیارد پارامتری را روی کارت‌های گرافیک اقتصادی با حافظه ۶ گیگابایت فراهم می‌کند.
  • این مدل با فرمت GGUF و حجم ۳٫۶۱ گیگابایت در بنچمارک MMLU-Pro کیفیتی بسیار نزدیک به نسخه اصلی ثبت کرده و توکن‌های کمتری مصرف می‌کند.
  • عملکرد این مدل در حل چالش‌های برنامه‌نویسی با Claude Haiku 4.5 برابری می‌کند اما ارزیابی دقیق‌تر آن نیازمند آزمون در مخازن کد واقعی است.

مدل کوانتیزه‌شده جدیدی به نام Sharp-Spark با هدف بهینه‌سازی پردازش‌های محلی کدنویسی، بازآفرینی تازه‌ای از مدل Spark-X2.5-4B ارائه کرده است. این نسخه از ماتریس اهمیت سفارشی (importance matrix)، تخصیص هوشمند بیت در سطح هر تنسور و قالب گفتگوی اصلاح‌شده Jinja بهره می‌برد و تحت مجوز متن‌باز Apache 2.0 در دسترس قرار گرفته است.

فرمت GGUF رایج‌ترین قالب مورد استفاده در ابزار llama.cpp برای استنتاج محلی مدل‌ها به‌شمار می‌رود. مزیت اصلی و کاربردی Sharp-Spark صرفه‌جویی چشمگیر در مصرف حافظه است؛ فایل کوانتیزه‌شده این مدل در نسخه Q6 تنها ۳٫۶۱ گیگابایت فضا اشغال می‌کند. این کاهش حجم به کاربر اجازه می‌دهد بخشی از حافظه رم ویدیویی (VRAM) در کارت‌های گرافیک ۶ گیگابایتی را برای پنجره متنی و بار پردازشی محیط اجرا آزاد نگه دارد، در حالی که دقت مدل تفاوت چندانی با نسخه بزرگ‌تر Q8 مدل اصلی ندارد.

آزمون‌های اولیه و نتایج نزدیک به نسخه اصلی

مخزن رسمی این پروژه نتایج به‌دست‌آمده از بخش‌های محدودی از بنچمارک‌های MMLU-Pro و SWE-bench-Live را منتشر کرده است. در این گزارش‌ها، منظور از Spark-Q8 نسخه کوانتیزه‌شده ۸ بیتی از مدل پایه و اصلی است.

آزمون
نتیجه گزارش‌شده
محدودیت آزمایش
MMLU-Pro
نسخه Sharp-Spark Q6 امتیاز ۶۹٫۰ درصد را به دست آورد که فاصله بسیار کمی با امتیاز ۷۰٫۳ درصدی Spark-Q8 دارد. هم‌چنین نسخه Q6 در شاخص میانه ۴۳ درصد و در شاخص میانگین ۱۸ درصد توکن کمتری مصرف کرده است.
۱۰۰ سؤال
SWE-bench-Live
عملکرد نسخه Q6 با در نظر گرفتن بازه اطمینان آماری، با مدل‌های Claude Haiku 4.5 و Spark-Q8 برابری می‌کند.
در گزارش خلاصه، حجم نمونه آزمایشی و درصد دقیق حل مسئله ذکر نشده است.

اختلاف اندک در بنچمارک MMLU-Pro در محدوده خطای آماری قرار دارد و افت چشمگیری محسوب نمی‌شود. با این حال، مقایسه انجام‌شده در آزمون SWE-bench-Live با عدم قطعیت بیشتری روبه‌رو است، چراکه خلاصه منتشرشده اشاره‌ای به اندازه نمونه و جزئیات دقیق نتایج خام نکرده است. این داده‌های محدود ادعای بهینه‌سازی مصرف حافظه را تأیید می‌کنند، اما ارزیابی جامع کیفیت کدنویسی مدل همچنان نیازمند اجرای آزمون‌های کامل روی مخازن واقعی و استاندارد کد است.

کاهش تعداد توکن‌های تولیدی صرفاً ناشی از فرآیند فشرده‌سازی و کوانتیزاسیون وزن‌ها نیست. نسخه Sharp-Spark به‌صورت پیش‌فرض دستورالعملی برای پاسخ‌دهی مختصر و فشرده به پرامپت‌ها تزریق می‌کند که بدون وابستگی به‌دقت وزن‌ها، طول پاسخ‌ها را کوتاه نگه می‌دارد.

بازخورد و اشتراک‌گذاری این مطلب

اگر این گزارش برایتان مفید بود، با پسندیدن و اشتراک‌گذاری آن با دیگران، از محتوای تخصصی هوش مصنوعی حمایت کنید.

اشتراک‌گذاری در شبکه‌های اجتماعی:

دیدگاه ها و گفتگوی تخصصی

نظرات خود را با جامعه مخاطبان وایر ای آی در میان بگذارید

۰ دیدگاه

هنوز دیدگاهی برای این مطلب ثبت نشده است

اولین نفری باشید که دیدگاه، تحلیل یا دیدگاه خود را درباره این موضوع با دیگران به اشتراک می گذارد.

مطالب مرتبط و پیشنهادی

پلاگین DS Bot تیم‌های هوشمند را به DeepSeek Harness اضافه کرد؛ ثبت بیش از ۴۶۰۰ ستاره در گیت‌هاب
آخرین اخبار

پلاگین DS Bot تیم‌های هوشمند را به DeepSeek Harness اضافه کرد؛ ثبت بیش از ۴۶۰۰ ستاره در گیت‌هاب

پلاگین متن‌باز DS Bot با تبدیل فریمورک DeepSeek Harness به محیطی برای همکاری تیمی ایجنت‌های هوش مصنوعی، توجه توسعه‌دهندگان را جلب کرده و به بیش از ۴۶۰۰ ستاره در گیت‌هاب رسیده است. این ابزار امکان تعریف نقش‌های تخصصی مانند برنامه‌نویس و نویسنده را فراهم می‌کند و با حفظ حافظه پایدار، وظایف پیچیده را میان بات‌ها تقسیم می‌کند.

۲ دقیقه مطالعه
۰
۱۰ آبان
۵ اصل امنیتی ضروری برای برنامه‌نویسی ایمن با هوش مصنوعی
آخرین اخبار

۵ اصل امنیتی ضروری برای برنامه‌نویسی ایمن با هوش مصنوعی

با فراگیر شدن موج وایب کدینگ و تولید نرم‌افزار از طریق گفتگو با هوش مصنوعی، خطرات و آسیب‌پذیری‌های امنیتی پروژه‌ها نیز به‌شدت افزایش یافته است. اگر بدون تسلط کامل فنی از مدل‌های هوش مصنوعی کد دریافت می‌کنید، رعایت ۵ اصل اساسی می‌تواند امنیت داده‌ها و برنامه‌های شما را در برابر نفوذ هکرها تضمین کند.

۶ دقیقه مطالعه
۰
۱۰ آبان
شوخی کنایه‌آمیز برنامه تلویزیونی SNL با تب داغ استارتاپ‌های هوش مصنوعی
آخرین اخبار

شوخی کنایه‌آمیز برنامه تلویزیونی SNL با تب داغ استارتاپ‌های هوش مصنوعی

برنامه تلویزیونی محبوب SNL در تازه‌ترین قسمت خود، تب تند استارتاپ‌های هوش مصنوعی و چهره‌های پرادعای دنیای فناوری را دستمایه طنز قرار داد. این برنامه با خلق آیتم‌های کمدی، از رویاپردازی‌های توخالی پیرامون ایجنت‌های هوش مصنوعی تا هجوم شرکت‌ها به تگزاس را با نگاهی کنایه‌آمیز به چالش کشید.

۲ دقیقه مطالعه
۰
۱۰ آبان