FoundryのAvatarを召喚してみる

Microsoft Foundryのアバターを召喚してみる 2026/01 XR ミーティング @takabrz1 Takahiro Miyaura

宮浦 恭弘 (Miyaura Takahiro) Microsoft MVP for Mixed Reality 2018 XR は趣味です - 2025 大阪駆動開発( とHolomagicians) コミュニティに生息 HoloLens 日本販売してからxR 系技術に取組む 新しい技術や、MRに使えそうな技術を調べる 技術Tips : https://qiita.com/miyaura https://zenn.dev/miyaura 最近興味があって取り組んでいるもの ○ Microsoft Mesh ○ Snapdragon Spaces ○ Mixed Reality Toolkit v3.0.0 ○ Vision Pro もそろそろ・・・ @takabrz1 ※よかったらこれを機にお知り合いになってください

• https://qiita.com/miyaura
• https://zenn.dev/miyaura

Microsoft Foundryの話 去年のIgniteの話を少しだけ 2026/01/21 © 2026 Takahiro Miyaura 3

Microsoft Foundry The AI app and agent factory Azure 上で提供されるAI エージェントの開発、運用を管理するプラットフォーム Models Agent Service IQ Tools Machine Learning Control Plane Cloud Edge Security, compliance, and governance 引用: Microsoft.Let your agentic apps talk with Azure Speech.Microsoft Ignite 2025.2025,11,p.3.https://ignite.microsoft.com/ en - US/sessions/BRK198, （参照 2026 - 01 - 21 ）.

Azure Speech product overview Speech to Text Text to Speech MCP MCP New @Ignite 2025! Speech Translation • Real-time transcription • Pre-built neural & HD voices • Real-time speech translation • Fast transcription • Custom voices • Live interpreter • Batch transcription • Text to Speech avatar • Video translation • Custom speech • Video or Photo LLM Speech PuPr • LLM powered Transcription and Translation More tasks coming soon 引用: Microsoft.Let your agentic apps talk with Azure Speech.Microsoft GA PuPr Voice Live • Real-time API for building voice agents • Choice of models • Built-in • Bring your own Ignite 2025.2025,11,p.4.https://ignite.microsoft.com/ GA en - US/sessions/BRK198, （参照 2026 - 01 - 21 ）.

GA | Announcing new capabilities Voice Live API Voice-enable any agent with advanced, real-time voice GenAI Model choice High quality global locale coverage More engaging with Avatar Easy customization aka.ms/voice-live 引用: Microsoft.Let your agentic apps talk with Azure Speech.Microsoft Ignite 2025.2025,11,p.14.https://ignite.microsoft.com/ en - US/sessions/BRK198, （参照 2026 - 01 - 21 ）.

• https://aka.ms/voice-live

Create Engaging, Personalized Voice Agents Video Avatar (GA) Photo Avatar • • • • • • Trained from video High - fidelity and professional Full/half body avatar Gesture support 10+ hours model training time 引用: Microsoft.Let your agentic apps talk with Azure • • • • Speech.Microsoft Preview | Ignite 2025 Built from a photo, using Microsoft Research’s VASA Talking - head avatar Expressive & creative More cost effective 0 model training time Ignite 2025.2025,11,p.17.https://ignite.microsoft.com/ - 1 model en - US/sessions/BRK198, （参照 2026 - 01 - 21 ）.

このAvatarを空間に召喚することがようやくできたという話 • 通信の仕組みが・・・ • 認証が・・・ 2026/01/21 © 2026 Takahiro Miyaura 8

Avatarを使う時は2種類の通信手段を使う ユーザからの送信ルートとアバターの映像受信の2系統 本来のWebRTCは双方向通信可能ですが・・・ ○ Foundry では生成AI への入力 ○Foundry のサーバ ○ 生成AI からの応答 ○文字情報はFoundry サーバ ○映像と音声はWebRTC経由 【参考】 Avatar を使わない場合 ○全てFoundry サーバで処理する 2026/01/21 © 2026 Takahiro Miyaura 9

アバター利用時のFoundry接続にAPIKEYが使えない Azure Entra ID 認証が必要 Unity のアプリからネイティブブラウザは使えないので ○Unity 内でWebView を利用 2026/01/21 © 2026 Takahiro Miyaura 10

まとめ 2026/01/21 © 2026 Takahiro Miyaura 11

まとめ Microsoft Foundry 上のAI エージェントをアバターで召喚 Microsoft Foundry はエンタープレイズ向け なので、そうそう使わないかもですが。。。 最近注目されているXR ×AI 的な流れ ○ XR 技術と生成AI を組合わせるシーンはこれからも増えてきそう ○ XR 技術だと、音声やジェスチャー、カメラ画像で直接生成AI を呼べる ○ UX表現としても文字、音声、アバター以外にもXR なら色々使えそう 2026/01/21 © 2026 Takahiro Miyaura 12

Qiita記事にしました。 Unityでの実装については後日投稿予定 Voice Live API でAvatar とリアルタイム会話を実現する サンプルコード ○ https://github.com/TakahiroMiyaura/V oiceLiveAPISamples https://qiita.com/miyaura/items/e7b7a12258fb118a9701 2026/01/21 © 2026 Takahiro Miyaura 13

• https://qiita.com/miyaura/items/e7b7a12258fb118a9701
• https://github.com/TakahiroMiyaura/V

大阪駆動開発 関西を中心に、IT系のおもしろそうなことを 楽しんでやるコミュニティ