UnitASRをAndroidにつなぐ

r u o T n a p a J k c a t s 5 M a k a s O g n i r p S 5 2 20 Unit ASR を Android につなぐ 辛さ等級 🌶🌶🌶 (3辛=甘口) [email protected] 2025/05/02 M5stack Japan Tour 2025 Spring Osaka

・正方形のM5Stack買わない人です StickとかATOMは持ってます ESP32はモジュールのが好きです ・ハンダ付けが面倒です ・3Dプリンタとかレーザーカッターとかいっぱいです ・平日毎日、技術ネタブログ書いてます @kinneko FANBOXで検索してくだちい ・薄い本書きます BOOTHで検索してくだちい ・Maker系イベント出展してます 直近は「NT金沢2025」 6/21[土],22[日] ・去年転職しましたが、今月末で定年退職年齢ですw ・ネットワーク屋と組み込みLinux屋の自認があります いろいろやりすぎて何の人かは相手によって違います ・クラウド嫌いですが、食べるのにクラウド使います

M5Stack LLMモジュール使ってみた シリーズ https://kinneko.booth.pm/ 基本編 本文275ページ 周辺機器編 本文105ページ buildroot編 本文82ページ

• https://kinneko.booth.pm/

https://zenn.dev/fairydevices/articles/8c12677feb3be7 $ # " !

• https://zenn.dev/fairydevices/articles/8c12677feb3be7

これで使えるの超便利！ Wi-Fi 電源

フレキの再接続に疲れたら... あなたもUSB有線LAN、USB無線LANに取り組む時！ コピれば動く！ (そこまで簡単じゃないw) M5Stack̲LLM̲USBNIC̲ASIX: ASIX USB-NIC用ビルド済みドライバ https://github.com/kinneko/5Stack̲LLM̲USBNIC̲ASIX M5Stack̲LLM̲USBWIFI Realtek RTL8188EUS)向けUSB-WiFi用ビルド済みドライバ https://github.com/kinneko/M5Stack̲LLM̲USBWIFI

https://zenn.dev/fairydevices/articles/5797a570187763 $ # " !

• https://zenn.dev/fairydevices/articles/5797a570187763

カメラ搭載首掛けAndroidのサービス開発してます @kinneko Android (組込み,アプリ) AWS, GCP, Azure AI, Rust 音声処理 等 「リファラル採用」積極展開中！ 人がたりませんw 勤務地：文京区湯島とかフルリモートとか

本日のお題 Unit ASR を Android につなぐ

https://zenn.dev/fairydevices/articles/279cb81b1eda18 $ # " !

• https://zenn.dev/fairydevices/articles/279cb81b1eda18

THINKLETは 作業者支援の ツール Android (AOSP) カメラ, SIM, WiFi, 5chマイク搭載 首掛けでブレない映像 操作する画面がない クラウドから操作するAPI提供 ZoomやTeamsに接続できるLINKLETも https://mimi.fairydevices.jp/technology/device/thinklet/

• https://mimi.fairydevices.jp/technology/device/thinklet/

Our Invention 現場の声に応えた新規デバイスの紹介 負担なく現場導入が可能なワーカー支援デバイスを開発。装着者の見ているもの、聴いているものをリアルタイムにデータ化し、 今までにない情報活用を可能とする 人とAIをつなぐ、機械との協働を実現する THINKLET 高性能マイク（５個） 4G LTE／Wi-Fi 通信機能 各種センサー／GPS エッジAI搭載 超広角カメラ 人が得意なことは人に、AIが得意なことはAIに任せる役目を担うウェアラブルデバイス Copyright © 2024 Fairy Devices Inc. All rights reserved. 3

Connected Worker Solutionによる支援イメージ A 高難易度の課題のみ リアルタイム支援 B • AIのソリューションが 一時対応 • 必要に応じて熟練工 にエスカレーション 高度な現場作業に 非熟練者が対応可能 デジタル化による現場 スキルの技能伝承 C 作業報告書の自動作成 作業の自動判定 AI支援 /対応のレコメンド 危険アラート 作業手順指示 /完了確認 多言語翻訳 Copyright © 2024 Fairy Devices Inc. All rights reserved. スループット強化 4

保守・メンテナンスに活用 導入に際して現地側の教育を必要とせず、早期に遠隔支援体制を確立可能。 遠隔支援体制によって設備の維持管理を低コストに実現できる。 専門家による作業支援 ✓ 遠隔・諸島部などのアクセスが 難しい地域でも、非常時対応 や定期メンテナンスでの活用 専門的サポート 点検記録の遠隔確認 点検レポート Copyright © 2024 Fairy Devices Inc. All rights reserved. ✓ 点検などの内容を動画＋高解 像度画像で記録し、レポート 化することで、遠隔での点検業 務が実現 5

THINKLETは 作業者支援の ツール ボタンで操作 音声操作機能はナシ 両手が使えない現場もある 汚れ, 手袋, 水仕事, 両手がふさがる作業など 音声で動作指示できればいい 手ぶらコントロールの実現

THINKLETは 作業者支援の ツール 音声操作するには？ KWSやASRが必要 ・常時稼働 ・処理重い ・電池食う KWS: Keyword Spotting "OK Google"/"Alexsa"的なの ASR: Automatic Speech Recognition（自動音声認識）

Unit ASR ご存知です？ マイコンで音声コマンド シリアルにデータ吐く 安い！($7.50, 1507円) マイク, アンプとスピーカ内蔵 意外に認識精度が高い

, + マイコンで音声コマンド * ) シリアルにデータ吐く ) ( Unit ASR'安い！($7.50, 1507円) " & マイク, アンプとスピーカ内蔵 % $ ご存知です？ # 意外に認識精度が高い " !

1,507円 どこの御家庭 にもあるやつ (1166円) シリアル % 無償貸出 無料 USB !"#$%&'"())*+,

1,507円 82円 (1166円) 無償貸出 シリアル USB TTL OTG 無料 !"#$%&'"())*+,

USBシリアルで接続 Flutterでアプリ作成 くっつけ ました $ # " !

音声で指示 ・録画の開始 くっつけ ・録画の停止 ました

くっつけ ました #$

展示も見てね！ Module THINKLETを UnitASRで LLMを 音声操作 単体で動作 AtomS3R で 小智AI