#Hololens – #SpatialMapping, tutorial sobre cómo buscar superficies simples (Un tile de 1×1 en el piso)

Hola !

En el post anterior expliqué como utilizar Spatial Understanding para tener más control sobre el proceso de escaneo que realiza Hololens. En ese ejemplo, se realizaban los siguientes pasos

• Cuando se lanzaba la App, Hololens comenzaba el proceso de escaneo
• Cuando se llegaba a un mínimo de planos encontrados, se finalizaba el mismo
• En todo momento se mostraba el estado del escaneo en un FPS

El ejemplo de hoy es la continuación del anterior, en el que una vez finalizados los pasos anteriores

• Buscaremos una superficie de tamaño 1×1 en el piso, cuando se haga AirTap / Click en un holograma

La siguiente animación muestra el proceso de scanning (X6 speed, no apto para personas que se mareen) y luego el mapeo en el piso donde se puede ver como se “pintan” los mosaicos del tamaño encontrado.

Estos son los pasos a seguir.

1. Create a 3D project in Unity3D
2. Import HoloToolkit package
3. Configure project to
   1. Support HoloLens projects (UWP, VR, etc)
   2. enable Spatial Mapping feature
4. Clean Scene elements
5. Add
   1. Hololens Camera
   2. Cursor With Feedback
   3. Input Manager
   4. Spatial Mapping
   5. Spatial Understanding
   6. FPS Display
6. Add Empty element
   1. Rename to CodeManagers
   2. Add new C# Script named “GameStartScanner.cs”
7. Add Empty Element
   1. Rename to HoloCollection
   2. Add 3D Cube element to HoloCollection
   3. Rename to “InteractiveCube”
8. Set this properties to Cube
   1. Position: x: 0, y:0, z:1.2
   2. Scale: x: 0.2, y:0.2, z:0.2
9. Add a new C# Script to the cube named “Scanner Analyzer”

El proyecto debe quedar similar al siguiente

Y el script para la nueva clase está debajo, y lo mejor es revisar un par de apuntes interesantes sobre la misma

• Esta clase está basada en el ejemplo de Spatial Mapping de HoloToolkit
• La misma usa clases auxiliares que son parte del proyecto,
  • AnimatedBox.cs
  • AnimationCurve3.cs
  • GameStartScanner.cs
  • Line.cs
  • LineData.cs
  • ScannerAnalyzer.cs
• La funcionalidad de esta clase se activa cuando la clase que creamos en el post anterior “GameStartScanner.cs” termina el proceso de scan del entorno
• En el Update se verifica si se está “buscando” una superficie de 1×1 en el suelo, en caso afirmativo se dibuja la misma
• El proceso de búsqueda se realiza en “OnInputClicked”, que se activa cuando hacemos AirTap o click sobre el Cube
• En esta funcion también se define el tamaño de superficie a buscar con las variables, minWidthOfWallSpace y var minHeightAboveFloor
• En la línea 54 comienza el proceso de búsqueda utilizando los tamaños a buscar y las funciones
  • SpatialUnderstanding.Instance.UnderstandingDLL.PinObject(_resultsTopology);
  • SpatialUnderstandingDllTopology.QueryTopology_FindPositionsOnFloor()
• En el 1er paso se crea un puntero en memoria con todos los elementos de trabajo y el 2do paso es el que “filtra” por los que estén en el suelo y con el tamaño deseado
• Lo siguiente es dibujar los frames en el piso, este código está basado en lo ejemplos de Spatial Mapping. Son líneas y líneas que merecen una buena tarde refactoring.

Código de ejemplo

El código completo del ejemplo se puede descargar desde aquí (link).

Saludos @ Toronto

El Bruno

References

• GitHub, HoloToolkit
• GitHub, HoloToolkit Unity
• Windows Dev Center, Case study – Expanding the spatial mapping capabilities of HoloLens
• El Bruno, How to Import the HoloToolkit Unity
• El Bruno, How to place a Hologram using AirTap and HoloToolkit
• El Bruno, Creating a menu with options with HoloToolkit
• El Bruno, Using voice commands to display a menu with HoloToolkit
• El Bruno, How to create a 3D text always visible using HoloToolkit
• El Bruno, How to create a HUD (3D text always visible without HoloToolkit)
• El Bruno, How to detect hands using HoloToolkit
• El Bruno, Windows 10, Xbox One Controller, Bluetooth and some lessons learned
• El Bruno, How to use Fire Buttons actions with an XBoxOne Controller
• El Bruno, HoloToolkit compiled packages for Unity3D in GitHub
• El Bruno, How to detect AirTap and Click actions using HoloToolkit
• El Bruno, Detect user hand interactions using #HoloToolkit
• El Bruno, Moving and rotating Holograms using an XBoxOne Controller
• El Bruno, Spatial Understanding vs Spatial Mapping, and a tutorial on how to use them