توسعه قاب عکس هوشمند با Raspberry Pi؛ تشخیص پرندگان از روی صدا با یادگیری ماشین محلی

قاب عکس هوشمند پرندگان با Raspberry Pi؛ شنیدن صدا پیش از تصویرسازی

یک توسعه‌دهنده نروژی با ترکیب چندین مؤلفه متن‌باز، پروژه‌ای به نام fugleramme خلق کرده است؛ قاب عکسی هوشمند که صدای آواز پرندگان اطراف را شناسایی می‌کند و تصویر آن‌ها را با استفاده از نقاشی‌های تاریخ طبیعی قرن نوزدهم به نمایش می‌گذارد. تمام مراحل این پایپ‌لاین یادگیری ماشین به‌صورت کاملاً محلی روی Raspberry Pi اجرا می‌شود؛ بنابراین فایل‌های صوتی ضبط‌شده هرگز از دستگاه خارج نخواهند شد.

پروژه fugleramme یک موتور رندر فشرده پایتونی بر پایه BirdNET-Go است که ورودی میکروفون، طبقه‌بندی و تنظیمات تشخیص صدا را مدیریت می‌کند. این سیستم موارد شناسایی‌شده اخیر را بررسی کرده، تصاویر پرندگان مربوطه را روی یک پنل جوهر الکترونیکی Inky Impression ترکیب می‌کند و نمای یکسانی را در قالب وب‌کیوسک ارائه می‌دهد. در صورت عدم دسترسی به پنل جوهر الکترونیکی، می‌توان این رابط بصری را از طریق درگاه HDMI یا مرورگر وب در شبکه محلی نیز مشاهده کرد.

راهنمای میدانی با قابلیت به‌روزرسانی خودکار

هر بار بازنشانی نمایشگر، صفحه‌ای شبیه به کتاب‌های پرنده‌شناسی دوره ویکتوریا را خلق می‌کند. این پروژه از طراحی‌های برگزیده تاریخ طبیعی در مالکیت عمومی بهره می‌برد که پس‌زمینه آن‌ها حذف شده است. گونه‌های شناسایی‌شده روی پس‌زمینه‌ای از کاغذ بافت‌دار چیده می‌شوند؛ به‌طوری‌که پرندگان بزرگ‌تر نزدیک به مرکز کادر قرار می‌گیرند و مقیاس اندازه آن‌ها متناسب با جرم واقعی بدنشان تنظیم می‌شود.

گونه‌هایی که تصویر آماده‌ای برای آن‌ها وجود نداشته باشد، در ترکیب‌بندی نمایش داده نمی‌شوند. همچنین در صورتی که طی بازه زمانی تعیین‌شده هیچ پرنده‌ای شناسایی نشود، قاب عکس تنها یک نشیمنگاه خالی را به تصویر می‌کشد.