AR-Extensions.mp4
PLATEAUの3D都市モデルを使ったARアプリケーション開発を行うための支援機能を提供します。
- PLATEAU SDK-AR-Extensions for Unityで提供される機能
- Geospatial API を用いたAR空間での3D都市モデルの位置合わせ
- インポート (PLATEAU SDK) もしくはストリーミング (Cesium for Unity) により配置された3D都市モデルを、ビルドされたAR空間内で実際の建物の位置に配置します。
- 3D都市モデルの位置がずれる場合にUIにより位置を調整することができます。
- ARマーカー（現実空間に配置された特定の画像をカメラで認識させて位置を取得する機能）を用いて位置を調整することができます。
- オクルージョンのためのアセットや調整機能
- AR空間内で3D都市モデルを用いて3Dオブジェクトを遮蔽する機能をオクルージョンと呼びます。
- AR Extensions ではオクルージョンマスクを設定するためのマテリアルやスクリプトを用意しています。
- Geospatial API を用いたAR空間での3D都市モデルの位置合わせ
| 更新日時 | 更新内容 |
|---|---|
| 2024/01/30 | テンプレートプロジェクトの公開 |
| 2023/12/25 | マーカーによるPLATEAUモデルの位置合わせ機能 |
| 2023/10/28 | AR Extensions 初回リリース |
| 2024/2/20 | インストール方法に関する手順をREADMEに追記 |
- PLATEAU SDK-AR-Extensions for Unity 利用マニュアル
- 目次
- 検証済環境
- 事前準備
- 利用手順
- ライセンス
- 注意事項/利用規約
- Windows11
- macOS Ventura 13.2
- Android 13
- iOS 16.7.1
- Unity 2021.3.35
- URP (Universal Rendering Pipeline)
Warning
HDRP (High Definition Rednering Pipeline) および Built-in Rendering Pipeline では動作しません。
本リポジトリでは構築済みのテンプレートプロジェクトを提供しています。以下の利用手順ではこのテンプレートプロジェクトを基本としたARアプリの構築手順を説明します。
AR Extensions リポジトリの “/~Templates” ディレクトリの中にある “AR Template” ディレクトリを任意の場所にコピーし、Unity Hub でコピーしたプロジェクトを開いてください。
テンプレートプロジェクトの詳細はこちらのドキュメントをご参照ください。
テンプレートプロジェクトのUnityバージョンは2021.3.35f1です。手元にない場合は Unity Hub よりインストールしてください。
AR用テンプレートプロジェクトを利用せず、既存のプロジェクト等で PLATEAU SDK-AR-Extensions for Unity を利用する場合は以降の手順を参考に各種パッケージをインストールしてください。
AR Extensions は PLATEAU SDK-Toolkits for Unity の機能を利用しているため、AR Extensionsを利用するためにはこちらをインストールする必要があります。
こちらを参照して PLATEAU SDK-Toolkits for Unity をインストールしてください。
PLATEAU SDK-AR-Extensions では Google ARCore Extensions の機能である Geospatial API を利用するため、こちらをインストールする必要があります。
Unityプロジェクトに Google ARCore Extensions をインストールする方法は公式ドキュメントに記載されているため、こちらを参照して Google ARCore Extensions をインストールしてください。
- Unityエディターを開き、「Window」メニューから「Package Manager」を選択します。
- 「Package Manager」ウィンドウの左上にある「＋」ボタンをクリックし、「Add package from tarball...」を選択します。
- ファイル選択ダイアログで PLATEAU SDK-AR-Extensions for Unity パッケージの tarball (.tgzファイル) を選択します。
AR Extensions では各機能を使用したサンプルアセットおよび構築済みのARシーンを提供しています。このサンプルに含まれるシーンを用いることで、PLATEAUの3D都市モデルを使ったARアプリケーションをすぐに体験することができます。
また、構築済みのアセットを見ることで、各機能の具体的な使い方を理解することもできます。
メニューからPackage Managerを開き、AR Extensions のサンプルをインポートしてください。
インポートされたサンプルは “Assets/Samples” ディレクトリに配置されます。以下の手順では Assets/Samples/PLATEAU AR Extensions for Unity/${AR Extensions バージョン}/AR Samples のディレクトリを「サンプルフォルダ」とします。
サンプルフォルダの Scenes ディレクトリには以下のシーンが含まれています。
- Sample01_PlateauSdkAR.unity
- PLATEAU SDKでインポートした3D都市モデルを用いたARシーンです。
- 銀座の周辺の3D都市モデルを用いたサンプルとなっているため、このシーンを銀座以外の場所で利用する際には別途3D都市モデルをインポートして差し替える必要があります。
- Sample02_PlateauCesiumAR.unity
- ストリーミングにより配置されたPLATEAUの3D都市モデル（3DTiles）を用いたARシーンです。
- ストリーミングでは対象の地域を選択する必要がありますが、サンプルでは地域を選択するUIを用意しています。
- ストリーミングを用いた3D都市モデルの利用方法についてはPLATEAU SDK Maps Toolkitを参照してください。
- Boot.unity
- シーン選択のサンプルとしてBootシーンを用意しています。このシーンを起動シーンに選択し、他のシーンを合わせて登録するとシーン選択画面を表示し、任意のシーンを起動することができます。
以下のドキュメントを参考にPLATEAU SDKでARアプリケーションを利用する付近の3D都市モデルをインポートします。
都市モデルのインポート
インポートが完了したら、「3D都市モデルのAR空間内位置合わせ機能」の項目を参考に、位置合わせコンポーネント ( PlateauARPositioning )を設定してください。
Geospatial API を利用するためには、 Google Cloud プロジェクトを用意し、ARCore API の認証を設定する必要があります。ARCore API を有効化し、API認証を設定することで端末から Geospatial API を利用することができるようになります。設定方法については別のドキュメントにて解説されているため、そちらを参考に設定してください。
PLATEAU Tutorials TOPIC14｜VR・ARでの活用[3/3]｜Google Geospatial APIで位置情報による3D都市モデルのARを作成する
Unityエディターメニューの File > Build Settings を開き、ビルドするサンプルシーンをシーン一覧に登録します。
Build Settingsに表示されているプラットフォームからAndroidもしくはiOSを選択し、「Switch Platform」を押下してプラットフォームを切り替えます（この操作には数分かかります）。
その後、Build Settingsの「Build」ボタンを押下し、出力先を選択してビルドを開始します（iOSの場合はフォルダ、Androidの場合は.apkファイルもしくはAndroid Gradleプロジェクト）。
ビルドが完了したら、各プラットフォームに合わせて端末へアプリケーションをインストールしてください。
サンプルアプリの右上の設定メニューでは下記のような設定を行うことが可能です。
手動位置合わせ
3D都市モデルの座標位置をxyzの三軸に沿って移動させ、位置を調整することが可能です。
建物マテリアルの色設定
表示する3D都市モデルの色をRGBAスライダーを動かすことで変更することが可能です。
メニューより PLATEAU > PLATEAU Toolkit > AR Extensions を選択し、AR Extensions ウィンドウを開いて、それぞれの機能を利用することができます。
PLATEAU SDKを用いてシーンにインポートされた3D都市モデルオブジェクト ( PLATEAUInstancedCityModel )のマテリアルを一括で変更します。
設定するマテリアルを選択し、「シーン上の都市モデルのマテリアルを変更」を押下することでマテリアルが変更されます。
「ARオクルージョン遮蔽用マテリアルの参照を取得」を押下すると、遮蔽用マテリアルの参照がフィールドに設定されます。ARオクルージョン機能の利用方法については後述する「ARオクルージョン機能の利用方法」を参照してください。
AR Extensions が提供する PlateauARPositioning コンポーネントを3D都市モデルにアタッチして設定することで、その3D都市モデルをAR空間内の実際の位置に自動的に配置することができます。
サンプルプロジェクトに設定済みのコンポーネントが含まれているので、以下の手順の参考にしてください。
新しくゲームオブジェクトを作成し、 PlateauARPositioning コンポーネントをアタッチします。以下ではこのオブジェクトを「位置合わせオブジェクト」と呼ぶことにします。
Geospatial Controller ( PlateauARGeospatialController ) はサンプルに含まれる「AR」プレハブの中にある「GeospatialController」を利用するか参考にして新しく作成したものを設定します。
Geoid Height Provider は新たにゲームオブジェクトを作成し、サンプルの GsiGeoidHeightProvider をアタッチして設定します。
Note
これらのオブジェクトは位置合わせオブジェクトが必要とするコンポーネントですが、具体的な実装は AR Extensions に含まれておらず、これらは抽象的なインターフェースとして提供されています。これはそれぞれの機能が利用されるアプリケーションに大きく依存するためです。そのため、これらのインターフェースの具体的な実装はサンプルとしてそれぞれ GeospatialController クラスと GsiGeoidHeightProvider クラスとして提供されています。
- 3D都市モデルオブジェクトを位置合わせオブジェクトの子オブジェクトとして配置します。
PlateauARPositioningのPlateau City Modelに3D都市モデルオブジェクトをセットします。
CesiumGeoreferenceがアタッチされているオブジェクトを位置合わせオブジェクトの子オブジェクトとして配置します。PlateauARPositioningのCesium GeoreferenceとCesium 3D Tilesetにそれぞれ対象のオブジェクトをセットします。
PlateauARPositioning は SetOffset(Vector3 offset) というメソッドを公開しています。このメソッドにオフセット値を渡すことで、Geospatial API によって配置される位置を調整することができます。
現実世界に配置したARマーカー画像を用いた地面の高さの位置合わせ機能です。
PlateauARMarkerGroundController を位置合わせオブジェクトにアタッチして使用します。
Building Layer に3D都市モデルのレイヤーを指定します。ARオクルージョンを設定している場合、3D都市モデルのレイヤーは遮蔽するオブジェクト用レイヤーが設定されているはずなので、そちらを設定します。
ARTrackedImageManager を以下のドキュメントを参照して設定します。その後、設定した ARTrackedImageManager を PlateauARMarkerGroundController にセットします。
AR Tracked Image Manager コンポーネント
ARTrackedImageManager の XRReferenceImageLibrary に登録したARマーカー画像をARアプリケーションの実行時に認識させることで、その画像を認識した場所を地面として高さを調整することができます。
地面の位置合わせを適用するためには、次のように取得できる高さの差を位置合わせオブジェクトのオフセットに指定することで建物の地面の高さを調整することができます。
Vector3 offset = Vector3.zero;
offset.y = -m_ARMarkerGroundController.HeightGap;
m_ARPositioning.SetOffset(offset);Note
ARマーカーを用いた高さ合わせ機能は後述のARマーカーを用いた位置合わせ機能とは異なる機能で、単体で使用することはできません。 高さ合わせ機能はGeospatial APIを使用する際に、表示高さをARマーカーを用いて補正する機能です。 位置合わせ機能はGeospatial APIの代わりにマーカーを使用して位置合わせを行う機能なので、Geospatial APIと併用することができません。
Geospatial APIなどを利用する代わりにARマーカーを利用することで、オフライン環境やGPSが取得できないトンネル・屋内などの環境でも3D都市モデルをAR空間上に位置を合わせて表示させることができます。
- AR環境の構築
- AR Extensions のサンプルシーンを参考に、
AR SessionやAR Session Originをシーンに用意します。 - サンプルシーンで使用しているプレハブをそのまま利用しても問題ありません。
- AR Extensions のサンプルシーンを参考に、
- 利用する3D都市モデルのインポート
- PLATEAU SDKを用いてシーン上に任意の3D都市モデルをインポートしてください。
- 空のゲームオブジェクトを作成し、位置と回転はそれぞれ (0, 0, 0) に設定します。
- 分かりやすいように、 "ARMarkerCityModel" などの名前を設定してください。
- 作成したゲームオブジェクトに
PlateauARMarkerCityModelコンポーネントをアタッチします。- 以降の手順では作成したゲームオブジェクトをARマーカー位置合わせオブジェクトと呼びます。
PlateauARMarkerCityModelの各フィールドを設定します。都市モデルオブジェクトにインポートした3D都市モデルを設定します。マーカー画像ライブラリにAR Tracked Image Managerがアタッチされたオブジェクトを設定します。
マーカー画像ライブラリを設定すると、ARマーカー設定が行えるようになります。「+」ボタンを押下し、マーカー設定を追加します。- マーカー設定のプルダウンから位置合わせに使用するARマーカーを選択します。
- 選択するとマーカー設定の右側に使用するARマーカーのプレビューが表示されます。
- マーカー設定のトランスフォームに設定するためのゲームオブジェクトをARマーカー位置合わせオブジェクトの子オブジェクトとして新しく作成し、設定します。
- このオブジェクトはARマーカーを配置する場所を示すために使用されます。
- ここでは "ARMarkerPoint" という名前を設定し、以降の手順ではARマーカー位置オブジェクトと呼びます。
- 前の手順で作成したARマーカー位置オブジェクトを実空間でARマーカーを配置したい場所に一致する、3D都市モデル上の位置に配置します。
- マーカー設定に指定したゲームオブジェクトはシーン上で以下の画像のようにプレビューが表示されます。
- 端末で読み取るためのARマーカーを印刷して用意します。
- AR Extensions のサンプルで提供しているマーカーは "Assets/Samples/PLATEAU SDK AR Extensions for Unity/{AR Extensions バージョン}/ARSamples/ar-marker.pdf" から印刷することができます。
以上でARマーカー位置合わせの設定は完了です。
ARマーカー位置合わせを設定したシーンをビルド設定に追加し、アプリケーションをビルドして端末にインストールしてください。
印刷したARマーカーを設定したARマーカー位置オブジェクトに対応する場所に置き、アプリケーションで読み取ると、ARマーカーから計算した相対位置に3D都市モデルが表示されます。
Note
ARテンプレートプロジェクトではARオクルージョンのための設定が構築されています。そのため、ARテンプレートをベースに開発をする場合はARオクルージョンのプロジェクト設定は不要です。
遮蔽するオブジェクトが使用するマテリアルを用意します。このマテリアルが遮蔽する側の透明のマテリアルになります。このマテリアルは後述するAR Occlusion Renderer Featureによって描画時に差し替えられます。
Warning
このマテリアルを直接遮蔽する側のオブジェクトに設定しないのでご注意ください。
ARオクルージョンを設定するためには、遮蔽する側と遮蔽される側の2つのレイヤーを用意する必要があります。ここでは遮蔽する側をAR Occluder、遮蔽される側をAR Occludeeとして説明しますが、必ずしも名前が一致している必要はありません。レイヤーの順序は他の要件を考慮の上設定してください。
Universal Renderer DataはURPプロジェクトの描画の設定をするファイルです。URP描画設定は状況に合わせた複数のURP設定が用意されていることもあり、UnityでURPプロジェクトを作成すると、3つのUniversal Renderer Dataとそれらに対応したUniversal Renderer Pipeline Assetがデフォルトで作成されます（HighFidelity、Balanced、Performant）。
それぞれ、想定されるプラットフォームのスペックなどに合わせた描画設定がされています。例えば、モバイル向けにビルドする場合はBalancedやPerformantを使用し、PC向けにはHighFidelityやBalanced を使用します（これらはProject SettingsのQualityタブからプラットフォームごとに設定することができます）。
ARオクルージョンによって遮蔽されるオブジェクト（AR Occludeeレイヤー）は後述するARオクルージョン用のRenderer Featureによって描画されます。そのため、デフォルトで描画されるレイヤーからAR Occludeeレイヤーを削除します。描画はOpaque Layer MaskとTransparent Layer Maskの2つがあるため、それぞれからAR Occludeeレイヤーのチェックを解除してください。
ARオクルージョンを動作させるためにはRenderer Featureに AR Extensions が用意する PlateauAROcclusionRendererFeature を追加する必要があります。
“Add Renderer Feature” から上記のRenderer Featureを追加し、それぞれのフィールドを設定してください。
| AR Occludee Mask | 作成した遮蔽されるオブジェクトのレイヤーマスク |
| AR Occluder Mask | 作成した遮蔽するオブジェクトのレイヤーマスク |
| AR Occluder Material | 作成した遮蔽オブジェクト用の透明マテリアルの参照 |
ここまでで、設定ファイルの変更は完了です。
遮蔽する側のオブジェクトのレイヤーを作成したAR Occluderレイヤーに変更します。
親オブジェクトだけでなく、すべての子オブジェクトのレイヤーも一括で変更してください（親オブジェクトのレイヤーを変更すると、子オブジェクトのレイヤーを変更するかどうかのウィンドウが表示されます）。
AR Extensions パッケージの Materials フォルダに遮蔽するオブジェクトに設定するための “ZWrite” というマテリアルを用意しています。遮蔽する側のオブジェクトにはこのマテリアルを設定してください。
AR Extensions ウィンドウに用意している機能を使うことで、シーン内の都市モデルのマテリアルを一括で変更することができます。ストリーミングを用いる場合は Cesium3DTileset コンポーネントの Opaque Material フィールドを設定してください。
遮蔽されるオブジェクトのレイヤーを作成したAR Occludeeレイヤーに変更します。
以上で、ARオクルージョンをオブジェクトに設定することができます。
- 本リポジトリはMITライセンスで提供されています。
- 本システムの開発はユニティ・テクノロジーズ・ジャパン株式会社が行っています。
- ソースコードおよび関連ドキュメントの著作権は国土交通省に帰属します。
- 本ツールをアンインストールした場合、本ツールの機能で作成されたアセットの動作に不備が発生する可能性があります。
- 本ツールをアップデートした際は、一度 Unity エディターを再起動することを推奨しています。
- パフォーマンスの観点から、3km²の範囲に収まる3D都市モデルをダウンロード・インポートすることを推奨しています。
- インポートする範囲の広さや地物の種類（建物、道路、災害リスクなど）が量に比例して処理負荷が高くなる可能性があります。
- 本リポジトリの内容は予告なく変更・削除される可能性があります。
- 本リポジトリの利用により生じた損失及び損害等について、国土交通省はいかなる責任も負わないものとします。