ホロラボ R&D チームの技術（ホロラボカンファレンス 2022 発表スライド）

8.8K Views

May 13, 22

#hololens #mixed reality #holoconf22 #HoloLab #AR #Unity #ライブラリ開発 #Project Spirare

スライド概要

ホロラボカンファレンス 2022 「ホロラボ R&D チームの技術」のスライドです。

ホロラボカンファレンス 2022 イベントページ
https://hololab.connpass.com/event/241174/

ホロラボカンファレンス 2022 タイムテーブル
https://confengine.com/conferences/hololab-conference-2022/schedule/rich

ホロラボ

@HoloLab

スライド一覧

ホロラボです Unityを使用したHoloLensのアプリ開発を中心にしています。最近では建設業でのBIMデータ、製造業でのCAD データ、空間の3Dスキャン(点群データやメッシュデータ)も扱っています。物理世界とデジタル世界をどのように連携するか。ということを日々考えています。

またはPlayer版

埋め込む »CMSなどでJSが使えない場合

ダウンロード

ダウンロード(pdf - 3.81MB)

関連スライド

3DモデルとPower BIの悪魔合体「建物みえるくん」をつくってみた！

holoconf23 bim

ホロラボ 35K

トヨタのxR活用事例ご紹介～ホロラボとの開発秘話を中心に (ホロラボカンファレンス 2022 トヨタ自動車株式会社栢野様発表スライド)

hololens mixed reality holoconf22

ホロラボ 32.2K

BIMから3次元モデルを消してみたら、意外に便利でした

holoconf23 bim

ホロラボ 30.1K

3DGS･フォトグラメトリ比較と最新事例

ホロテク24

ホロラボ 20.4K

三菱重工業との取り組み事例　～HoloLensなどを活用した現場向けコミュニケーションツールの開発～

holoconf22 hololens mixed reality

ホロラボ 18.3K

⽵中⼯務店の“建設DX”と “open BIM”と“xR” (ホロラボカンファレンス 2022 株式会社竹中工務店橋口様、川上様発表スライド)

hololens mixed reality holoconf22

ホロラボ 13.7K

各ページのテキスト

ホロラボ R&D チームの技術

自己紹介古田裕介たるこす (@tarukosu) 株式会社ホロラボ Researcher 2

https://twitter.com/tarukosu

目次 • 社内ライブラリ, OSS • HoloLabToolkit • PLATEAU データ活用 • IFC インポーター • 位置合わせライブラリ • Unity Editor 上でのAR アプリ動作確認ツール • 機械学習 • Project Spirare （社内の研究開発プロジェクト） • 概要 • Spirare Editor デモ • デモ動画紹介 • Project Spirare の今後 Copyright© HoloLab Inc. 2022 All rights reserved 6

10.

11.

12.

13.

14.

https://github.com/HoloLabInc/MixedRealityToolkit-Unity-Ja

15.

16.

17.

18.

19.

CityGML インポートの仕組み • Unity の ScriptedImporter を利用 • Unity 標準でサポートされていない拡張子のファイルがプロジェクトにインポートされた際、C# スクリプトで定義したインポート処理を実行させられる CityGML C# でオブジェクトにパース Copyright© HoloLab Inc. 2022 All rights reserved Unity の Mesh や GameObject を生成 19

20.

21.

Unity 用 IFC インポーター • IFC (Industry Foundation Classes) とは • 建物などのモデルデータのためのオープンなフォーマット • Revit, ArchiCAD などの BIM ソフトウェアから出力できる • IFC ファイルを Unity プロジェクトにインポートして表示できるライブラリを作成 Copyright© HoloLab Inc. 2022 All rights reserved 21

22.

23.

24.

25.

26.

27.

https://github.com/HoloLabInc/HoloLab.Immersal

28.

29.

30.

31.

32.

33.

34.

35.

36.

37.

38.

39.

40.

[beta]

poml の構成要素
(例) 地理座標による屋外での位置合わせ
• <model> 要素
src に指定された3D モデル
(.glb) を表示

• <image> 要素
src に指定された画像
(.png/.jpg/etc...) を表示

• <placement> 要素
対象の要素の位置や方向を指定
• 地理座標情報 (屋外)
• 位置合わせなどの情報 (室内)

<model src="https://spiraresamplecontents.web.app/models/Dolphin.glb"
scale="2.8871,2.8871,2.8871">
<placement latitude="35.56245539083789"
longitude="139.71668882303538"
ellipsoidal-height="59.723061631433666"
enu-rotation="0,0,-0.2366683,0.9715906" />
</model>

<image src="https://hololab.co.jp/assets/img/about/about_logo.png">
<placement latitude="35.56245539083789"
longitude="139.71668882303538"
ellipsoidal-height="59.723061631433666"
enu-rotation="0,0,-0.2366683,0.9715906" />
</image>

屋内ではマップ原点からの相対位置で記述することも可能

Copyright© HoloLab Inc. 2022 All rights reserved

40

41.

42.

43.

44.

45.

Spirare Editor • poml の作成機能と web サーバーの機能を一体化 • GUI で poml を編集、即時配信 • AR デバイスでリアルタイムに確認しつつ編集可能 (ビルド不要) Spirare Editor GUI Client Side Data PC poml Web Server Copyright© HoloLab Inc. 2022 All rights reserved mobile AR device 45

46.

47.

48.

49.

50.

51.

52.

Project Spirare が目指すもの • 汎用的な AR コンテンツのフォーマット定義 • 特定のゲームエンジンやアプリケーションに非依存 • 実行時ロード • 提供元が異なる複数のコンテンツを同時に表示可能 • AR のための Web のような仕組み Web ブラウザで Web ページを表示 Copyright© HoloLab Inc. 2022 All rights reserved 52

53.

Project Spirare と WebAR • WebAR は Web ブラウザを使って AR アプリを実行する仕組み • Project Spirare は AR 用に設計された Web のような仕組み WebAR Project Spirare ・ Web ブラウザで表示可能・ poml フォーマットを解釈できるアプリケーションで表示可能・コンテンツ作成には Web AR に対応したライブラリが必要・ AR コンテンツをシンプルに記述できる・複数コンテンツを同時に表示可能・複数コンテンツの同時表示はできない Copyright© HoloLab Inc. 2022 All rights reserved 53

54.

55.

WebAssembly • Web ブラウザを含む様々な環境で動作可能なプログラム • WebAssembly からホストアプリケーションの関数を呼び出せる • ホストアプリケーションから WebAssembly の関数を呼び出せる Update (毎フレーム呼び出される） WebAssembly GetPosition （オブジェクト位置の取得）ホストアプリケーション（Spirare クライアントアプリ） SetPosition （オブジェクト位置を更新） Copyright© HoloLab Inc. 2022 All rights reserved WebAssembly ランタイム 55

56.

57.

本日のセッション内容 • 社内ライブラリ, OSS • HoloLabToolkit • PLATEAU データ活用 • IFC インポーター • 位置合わせライブラリ • Unity Editor 上でのAR アプリ動作確認ツール • 機械学習 • Project Spirare （社内の研究開発プロジェクト） • 概要 • Spirare Editor デモ • デモ動画紹介 • Project Spirare の今後 Copyright© HoloLab Inc. 2022 All rights reserved 57