Spatial Mapping とは

Spatial Mappingの設定が気になる from Takahiro Miyaura

www.slideshare.net

ドキュメントでは色々書いてあるけど，miyauraさんのスライドを引用すれば
カメラやセンサー情報を分析し，現実空間の状況（壁，机など）をデジタル的に把握すること．
HoloLensを起動する時のモヤモヤ～の奴．この機能がないと現実世界の状況がわからない．

概念の概要で，Spatial Surface ObserverとSpatial Surfaceの説明が書いてある．

The application provides the Spatial Surface Observer with one or more bounding volumes, to define the regions of space in which the application wishes to receive spatial mapping data. For each of these volumes, spatial mapping will provide the application with a set of Spatial Surfaces. （アプリケーションは、アプリケーションが空間マッピングデータの受信を希望する空間の領域を定義するために、1 つ以上の境界ボリュームを Spatial Surface Observer に提供します。これらのボリュームのそれぞれについて、空間マッピングは、アプリケーションにSpatial Surfaceのセットを提供する。）

またObserverだ．

Spatial Mapping VS Scene Understanding WorldMesh

HoloLens 2では，Scene Understanding SDKを使用して，静的バージョンの空間マッピングデータを
問い合わせできるらしい．ドキュメントの解釈が難しい…．

以前，自分がRTした@Futo_Horioさんの呟きとqiita記事がわかりやすい．

HoloLens 2 新機能
Scene understanding を試してみた。

Spatial Mapping で取得した
環境メッシュデータを処理して、
壁、床、天井 etc に分類したり..

複雑な形状の環境メッシュでも
AIの推論機能を駆使して、
シンプルな Quad に変換してくれる。#HoloLens2 #MixedReality #SpatialComputing pic.twitter.com/ldygDqWldD
— Futo Horio (@Futo_Horio) 2020年2月27日

qiita.com

Spatial Mapping APIとScene Understanding SDKの違いが分かりやすくまとめられている．
Spatial Mapping はどこに物体が存在しているのか？がわかるけれど，それが具体的に何なのかは教えてくれない．
Scene Understanding は Spatial Mappingで得たマッピング情報に加えてその物体が何なのかラベル付けできるようになる感じ．

今度機会があればサンプルプロジェクトをいじってみよう．