مدل Chronos-Bolt Mini آمازون؛ پیش‌بینی هوشمند سری‌های زمانی با سرعت ۲۵۰ برابری و بدون نیاز به آموزش

خانواده مدل‌های Chronos-Bolt آمازون از توانمندی مدل‌های پایه ازپیش‌آموزش‌دیده برای پیش‌بینی سری‌های زمانی بهره می‌گیرند. نسخه سبک‌وزن Bolt Mini با ۲۱ میلیون پارامتر، بر پایه ستون‌فقرات بهینه‌شده انکودر-دیکودر T5 توسعه یافته و تاکنون بیش از یک میلیون بار در Hugging Face دانلود شده است.

در زمان اجرا، توسعه‌دهنده تنها تاریخچه منظمی از داده‌های عددی و بازه زمانی مورد نظر برای پیش‌بینی را به مدل ارائه می‌دهد. این مدل بدون نیاز به آموزش اختصاصی برای هر مجموعه‌داده، مهندسی ویژگی‌ها یا جستجوی ابرپارامترها، پیش‌بینی‌های احتمالی دقیقی تولید می‌کند. همین ویژگی باعث می‌شود Bolt Mini به‌عنوان یک مبنای کارآمد در حالت صفرالگو (Zero-Shot) برای حجم وسیعی از سری‌های زمانی به‌کار رود، هرچند استقرار آن در محیط‌های عملیاتی همچنان نیازمند همگام‌سازی فرکانس، آزمون داده‌های گذشته (Backtesting)، بررسی کالیبراسیون و پایش مداوم خواهد بود.

حذف حلقه زمان‌بر رمزگشایی با روش بخش‌بندی داده‌ها

نسخه اصلی Chronos مشاهدات مقیاس‌بندی‌شده را به توکن‌های گسسته تبدیل می‌کرد و توکن‌های آینده را به‌صورت خودبازگشتی و با استفاده از تابع هزینه انتروپی متقاطع پیش‌بینی می‌نمود. در مقابل، مدل Chronos-Bolt داده‌های تاریخی را به تکه‌ها یا بخش‌هایی متشکل از چند مشاهده متوالی تقسیم می‌کند، این بخش‌ها را از انکودر عبور می‌دهد و مقادیر احتمالاتی را برای کل بازه پیش‌بینی تنها در یک مرحله رمزگشایی به‌دست می‌آورد.

کدگذاری بخش‌بندی‌شده طول توالی ورودی را به‌شکل چشمگیری کوتاه‌تر می‌کند، در حالی که خروجی مستقیم چندمرحله‌ای، چرخه کند تولید توکن‌به‌توکن را کاملاً حذف می‌نماید. طبق گزارش آمازون، مدل‌های سری Bolt تا ۲۵۰ برابر سریع‌تر اجرا می‌شوند و تا ۲۰ برابر حافظه کمتری در مقایسه با مدل‌های نسل اول Chronos مصرف می‌کنند. در ارزیابی‌های پژوهشگران، حتی مدل Chronos-Bolt Base با وجود آنکه بیش از ۶۰۰ برابر سریع‌تر اجرا می‌شد، از نظر دقت پیش‌بینی نیز از نسخه بزرگ‌تر Chronos Large پیشی گرفت. البته نوع سخت‌افزار، اندازه دسته پردازشی، طول داده‌های ورودی و افق پیش‌بینی بر این نسبت‌ها تأثیر دارند و برای سنجش نهایی باید بارهای کاری واقعی بررسی شوند.

آموزش مبتنی بر توزیع‌های آماری

مدل Chronos-Bolt از معماری بهینه‌شده T5 گوگل بهره می‌برد که بر اساس طراحی ساختاریافته انکودر-دیکودر بنا شده است.