پلتفرم telemetry.dev معرفی شد؛ ابزاری برای رصد دقیق عملکرد و هزینه‌های ایجنت‌های هوش مصنوعی

معرفی پلتفرم

پلتفرم telemetry.dev سامانه‌ای تخصصی برای مشاهده‌پذیری و پایش مدل‌های زبانی بزرگ (LLM Observability) و ایجنت‌های هوش مصنوعی است که بر پایه استاندارد متن‌باز OpenTelemetry توسعه یافته است. این پلتفرم در تاریخ ۳۱ اکتبر ۲۰۲۶ در پایگاه Product Hunt رونمایی شد و با کسب حدود ۱۲۸ رأی مثبت، در رتبه سوم برترین محصولات روز قرار گرفت.

این سرویس هر بار اجرای ایجنت هوش مصنوعی را به‌عنوان یک ردپای واحد (Trace) ثبت و تحلیل می‌کند. در این ساختار، هر فراخوانی مدل، استفاده از ابزارها و بازیابی اطلاعات به‌صورت یک واحد عملیاتی یا اسپن (Span) درمی‌آید که اطلاعاتی نظیر مدت‌زمان پاسخ‌دهی، تعداد توکن‌های مصرفی، هزینه مالی و خطاهای رخ‌داده را در خود نگه می‌دارد. بدین ترتیب، هنگام بروز اختلال در محیط‌های عملیاتی، توسعه‌دهنده به‌سرعت درمی‌یابد که کدام مرحله با شکست مواجه شده و هزینه آن اجرا چقدر بوده است. نسخه جدید این ابزار قابلیت‌های مهمی چون مدیریت پرامپت‌ها، ابزارهای ارزیابی خودکار (Evals)، سیستم هشداردهی، رابط خط فرمان (CLI) و یک سرور MCP را در دسترس کاربران قرار داده است.

قابلیت‌های کلیدی

• ردپاها و اسپن‌ها (Traces and Spans): ثبت اختصاصی هر درخواست یا اجرای کامل ایجنت در قالب یک ردپای مجزا که کلیه فراخوانی‌های مدل، اقدامات ابزارها و مراحل بازیابی داده‌ها را با محاسبه دقیق تاخیر، توکن، هزینه و خطاها گزارش می‌دهد.
• مدیریت پرامپت‌ها (Prompt Management): امکان ویرایش، بهبود و اعمال پرامپت‌های تازه بدون نیاز به استقرار مجدد کدهای سامانه.
• ابزارهای ارزیابی (Evals): اجرای نگارش‌های جدید پرامپت روی مجموعه‌داده‌های آزمایشی و ارزیابی نمرات کیفی در مقایسه با داده‌های محیط واقعی پیش از انتشار عملیاتی.
• سیستم هشدارهای هوشمند (Alerts): ارسال اعلان‌های آنی هنگام تجمع خطاها، جهش نامتعارف هزینه‌ها یا گرفتار شدن ایجنت در حلقه‌های نامتناهی.
• رابط خط فرمان و سرور MCP: امکان اتصال مستقیم ایجنت‌های برنامه‌نویسی نظیر Claude Code و سامانه‌های مشابه برای خواندن و بررسی مستقیم داده‌های ردپا جهت رفع نقص خودکار.
• یکپارچه‌سازی و اتصال آسان: ارائه کیت‌های توسعه نرم‌افزار برای پایتون و تایپ‌اسکریپت با پشتیبانی از ابزارهای OpenAI، Anthropic، کتابخانه Vercel AI SDK و فریمورک LangChain، همراه با سازگاری کامل با صادرکننده‌های استاندارد OpenTelemetry.

تعرفه‌ها و پلن‌های مالی

طرح رایگان telemetry.dev شامل ۳۰ هزار واحد ورودی در ماه (یک واحد به ازای هر اسپن، لاگ یا داده متریک) بدون نیاز به ثبت اطلاعات کارت اعتباری است؛ هم‌چنین پلن‌های تجاری Pro برای تیم‌هایی که حجم پردازش بالاتری دارند ارائه می‌شود.

مقایسه با ابزارهای رقیب

این سامانه رقیب مستقیم پلتفرم‌هایی چون Langfuse، LangSmith، Helicone و Arize Phoenix محسوب می‌شود. نقطه تمایز اصلی آن، اتکای کامل بر معماری استاندارد OpenTelemetry، تمرکز اختصاصی بر چالش‌های ایجنت‌ها، سیستم‌های هشدار حلقه بی‌پایان و عرضه سرور MCP به منظور تسهیل خطایابی هوشمند است.

راهنمای گام‌به‌گام راه‌اندازی

1. ثبت‌نام رایگان در وب‌سایت https://telemetry.dev/ بدون نیاز به کارت اعتباری.
2. نصب کیت‌های توسعه پایتون یا تایپ‌اسکریپت، یا هدایت صادرکننده فعلی OpenTelemetry به سوی سرورهای telemetry.dev.
3. اجرای ایجنت هوش مصنوعی و بررسی گزارش‌های تحلیلی شامل میزان توکن، هزینه‌ها و خطاهای هر اسپن در محیط داشبورد.
4. انتقال پرامپت‌ها به بخش مدیریت، آماده‌سازی یک مجموعه‌داده کوچک و اجرای ارزیابی‌های کیفی قبل از به‌کارگیری در محیط واقعی.
5. فعال‌سازی سیستم هشدار برای پیش‌گیری از هزینه‌های تصاعدی، افزایش خطاها و حلقه‌های تکرار ایجنت.
6. اتصال اختیاری سرور MCP به ابزارهای کدنویسی هوشمند برای جست‌وجو و تحلیل ردپای خطاها هنگام فرآیند اشکال‌زدایی.

این پلتفرم برای چه کاربرانی ایده‌آل است؟

• تیم‌هایی که ایجنت‌های مبتنی بر مدل‌های زبانی را در محیط‌های واقعی تجاری مستقر کرده‌اند و به شفافیت کامل در هزینه‌ها و عملکرد نیاز دارند.
• توسعه‌دهندگانی که از قبل از استاندارد OpenTelemetry بهره می‌برند و تمایلی به استفاده از کیت‌های اختصاصی و محدودکننده دیگر ندارند.

پیوندهای رسمی

• وب‌سایت رسمی: https://telemetry.dev/
• صفحه محصول در Product Hunt: https://www.producthunt.com/products/telemetry-dev