دستیار هوشمند Jev Chat برای پاسخ‌گویی خودکار در Android معرفی شد

دستیار Jev Chat از طریق سرویس دسترسی‌پذیری Android پیام‌ها را می‌خواند

پروژه Jev Chat Assistant، یک اپلیکیشن متن‌باز Android مبتنی بر Kotlin با مجوز MIT است که با ارائه یک لایه روی صفحه برای تحلیل پیام‌های در حال نمایش و پیشنهاد پاسخ، نزدیک به ۲۰۰۰ ستاره در گیت‌هاب کسب کرده است. نسخه‌های تاییدشده از این برنامه، پیام‌های دایرکت شبکه‌های WeChat، QQ و X را پشتیبانی می‌کنند، اما پشتیبانی از Feishu هنوز محدود است. کاربر هر پیشنهاد را بررسی کرده و سپس گزینه ارسال را لمس می‌کند؛ این برنامه از هیچ‌یک از APIهای پلتفرم‌های پیام‌رسان، پکیج‌های دستکاری‌شده یا هوک‌های مبتنی بر Xposed استفاده نمی‌کند.

این پروژه به توسعه‌دهندگان Android یک الگوی ملموس برای قرار دادن دستیار مبتنی بر مدلهای زبانی روی برنامه‌های بسته ارائه می‌دهد. البته محدودیت‌های آن نیز نشان‌دهنده دامنه کاربرد این الگو است: این سرویس نیازمند دسترسی‌های گسترده در سطح دستگاه است، متن مکالمات به ارائه‌دهندگان مدل‌های خارجی ارسال می‌شود، پشتیبانی از WeChat به یک راهکار دور زدنِ خاص متکی است و رابط‌های کاربری سفارشی نیازمند استفاده از فناوری پردازش تصویر یا OCR هستند.

دسترسی‌پذیری به لایه یکپارچه‌سازی تبدیل می‌شود

سرویس‌های دسترسی‌پذیری در Android ساختار درختی از عناصر رابط کاربری شامل برچسب‌ها، پیام‌ها، دکمه‌ها و فیلدهای متنی را در اختیار قرار می‌دهند. برنامه Jev Chat Assistant گره‌های مکالمه در حال نمایش را می‌خواند، پیام‌های قابل مشاهده را استخراج می‌کند و تحلیل خود را در یک لایه روی صفحه نشان می‌دهد. این اپلیکیشن هیچ دسترسی مستقیمی به دیتابیس پیام‌ها یا حساب‌های کاربری ندارد.

برنامه WeChat با مبهم‌سازی بخش‌هایی از درخت رابط کاربری خود، فرآیند استخراج را پیچیده می‌کند. این پروژه برای دور زدن محدودیت، نام کلاس سرویس دسترسی‌پذیری خود را مشابه SelectToSpeakService در Android انتخاب کرده است تا بتواند محتوای رابط کاربری را با موفقیت استخراج کند.