#Kinect – More information about the depth sensor in Project Kinect for #Azure (and #Hololens Bonus!)

Hi!

During the past Faculty Summit 2018, one of the exhibitions presented some details of the future [Project Kinect for Azure]. The following video gives a demonstration of the quality of the depth sensor in near and remote mode. In both demonstrations you can see that the same is much more powerful than the sensors we know.

And a special focus at 01:50 in the video, when a reference is made that this technology will be used in the next version of Hololens. The tracking options for the new device will be impressive.

Greetings @ Burlington

El Bruno

References

Advertisements

#Kinect – Mas información sobre el sensor de profundidad en Project Kinect for #Azure (#Hololens bonus!)

Buenas!

Durante el pasado Faculty Summit 2018, una de las exposiciones presentaba algunos detalles del futuro [Project Kinect for Azure]. El siguiente video da una demostración de la calidad del sensor de profundidad en modo cercano y en modo lejano. En ambas demonstraciones se puede apreciar que el mismo es mucho mas potente que los sensores que conocemos.

Y un detalle especial en el minuto 01:50 cuando se hace referencia a que esta tecnología se utilizara en la próxima version de Hololens. Tomando esto como base, las opciones de tracking del nuevo device serán impresionantes.

Saludos @ Burlington

El Bruno

References

#Build – Project #Kinect for Azure

0.jpg

Hi!

About 6 months ago I commented in a post the official “goodbye” of Microsoft Kinect. After many years working with this device, it was a very unpleasant feeling to have to put it aside.

Well, today among the stack of new features that were presented in Microsoft Build, there is one that I have to review

Project Kinect for Azure

As it turns out, in the middle of the IoT Edge presentation, when you least expect it, a slide appears talking about Project Kinect for Azure. And smart, if you did not see it, you lost. Luckily, Alex Kipman, had published a few minutes before a complete article on LinkedIn Press about it.

Let’s go for it. Although Microsoft has discontinued Microsoft Kinect, that does not mean that it has left aside the research and development related to depth sensors. Hololens is an excellent example of how it has advanced in aspects such as size and energy consumption, also having an excellent capacity for perception. And the sensors in Hololens belong to “the 3rd generation of depth sensors”.

Note: 1st generation Kinect for Xbox 360, 2nd generation Kinect for Xbox One, 3rd generation Hololens.

Well, Project Kinect for Azure presents the 4th generation of depth sensors. I still do not know what the characteristics and capabilities of these new sensors will be, although I would like to speculate that they will be designed to natively integrate some of the capabilities of Azure Cognitive Services. In addition to the improvements that can be expected in terms of quality, capacity, etc.

It’ a happy time to be a Kinect Developer again!

Greetings @ Burlington

El Bruno

References

#Build – Project #Kinect for Azure

0.jpg

Buenas!

Hace unos 6 meses comentaba en un post el “adiós” oficial de Microsoft Kinect. Después de muchos años trabajando con este device, era una sensación no muy agradable el tener que dejarlo de lado.

Pues bien, hoy entre la pila de novedades que se presentaron en Microsoft Build, hay una que tengo que reseñar

Project Kinect for Azure

Pues resulta que en medio de la presentación de IoT Edge, cuando menos te lo esperabas aparece una slide hablando de Project Kinect for Azure. Y listo, si no lo viste, perdiste. Por suerte, Alex Kipman, había publicado unos minutos antes un completo articulo en LinkedIn Pulse al respecto.

Vamos a ello. Si bien Microsoft ha discontinuado Microsoft Kinect, eso no quiere decir que haya dejado de lado la investigación y desarrollo relacionados a sensores de profundidad. Hololens es un excelente ejemplo de cómo se ha avanzado en aspectos como el tamaño y el consumo de energía, teniendo además una excelente capacidad de percepción. Y los sensores en Hololens pertenecen a “la 3ra generación de sensores de profundidad”.

Nota: 1ra generación Kinect for Xbox 360, 2da generación Kinect for Xbox One, 3ra generación Hololens.

Pues bien, Project Kinect for Azure presenta la 4ta generación de sensores de profundidad. Todavía no tengo en claro cuáles serán las características y capacidades de estos nuevos sensores, aunque me animo a especular que estarán pensados para integrar de forma nativa algunas de las capacidades de Azure Cognitive Services. Además de las mejoras que se pueden esperar en términos de calidad, capacidad, etc.

It’ a happy time to be a Kinect Developer again!

Saludos @ Burlington

El Bruno

References

#Opinion – Bye #Kinect, thanks!

image_thumb17

Today I start without a [Hello!], because based on some news today it should be a sad day. I summarize it in a simple line

Microsoft has decided to discontinue the manufacture of Kinect.

Matthew Lapsen (Xbox Devices Marketing Manager) together with Alex Kipman have made this news to the public, so that’s it. Several years after the launch, the path of Kinect has come to an end. During its launch was the best-selling device in history, Kinect broke several records and generated a hype that few devices at Microsoft have been achieved.

It also time to finally stop listening and left behind to the ones who predicted the failure of Kinect (don’t get me start here). And I say “left behind”, because knowing a bit about how the market has evolved, it is easy to see how the ideas that were housed inside Kinect today exist in many everyday devices.

During the past 2 days I read, at least 10 articles that commented that Microsoft has decided to stop making Kinects, and has passed the baton to Apple which incorporates them in their new iPhone X.

Actually, iPhone X uses 3D scanning capabilities to perform tasks such as Face recognition or to animate some very cute Emojis. This is Kinect technology evolved up to today, a miniaturized sensor inside a $1000 device which allows us to animate Emojis faces! Chan! I sorry, I lost myself.

I once wrote about the reason for the rejection of many people about Kinect, so I will not touch the topic (link). What I do is remember the more than 20 events I gave all around Europe and America sharing my experiences creating Apps for Kinect.

Thank all the people who had the patience to attend these events,and hear how excited I was with each SDK breakthrough. I would also like to thank everyone who helped me with Kinect Apps tests in my house and my office. Remember that to try Apps that used Kinect, the most normal thing was always to have someone in front of it. Here Victor gets the biggest THANK YOU!

hackerman

Finally add that Kinect is one of the few products I have had so much fun. I have been fortunate to present the capabilities of Kinect to many people, clients and events and the truth is that it is one of the moments where I have heard the best ideas to create Apps.
I have not had such a grateful and enthusiastic public until these last years with Hololens.

Note: Hololens have a pair of mini Kinect embedded in the Helmet.

Well, I thank Kinect for everything. I will keep my 4 devices in the collection of gadgets and surely when I have grandchildren I can explain how fabulous it was to detect that a person raised his hand over his head or waved and with that make an App!

Happy Coding!

El Bruno

References

#Opinion – Adios #Kinect, GRACIAS!

image_thumb17

Hoy empiezo sin un [Hola!], ya que internamente es un día que debería ser triste. Lo resumo en una simple línea

Microsoft ha decidido descontinuar la fabricación de Kinect.

Matthew Lapsen (Xbox Devices Marketing Manager) junto con Alex Kipman lo han hecho público. Y listo, varios años después del lanzamiento, el camino de Kinect ha llegado a su fin. Atrás quedan anécdotas como que durante su lanzamiento fue el device más vendido de la historia, que batió varios récords y que genero un hype que pocos devices en Microsoft han logrado.

También quedan atrás todos aquellos que pronosticaban el fracaso de Kinect de una forma avanzada. Y digo quedan atrás, porque conociendo un poco como ha evolucionado el mercado, es fácil ver como las ideas que se alojaban dentro de Kinect hoy existen en muchos devices cotidianos.

Hoy he leído, por lo menos 10 artículos que comentaban que Microsoft ha decidido dejar de fabricar Kinects, y le ha pasado el testigo a Apple que los incorpora en su nuevo iPhone X. En realidad, iPhone X aprovecha capacidades de escaneado 3D para realizar tareas como Face recognition o para animar unos Emojis la mar de cuquis. En eso ha quedado Kinect hoy, miniaturizado en un device de $1000 que nos permite animar las caras de Emojis. ¡Chan! Me empiezo a ir por las ramas.

Alguna vez escribí sobre el porqué del rechazo de muchas personas sobre Kinect, así que no tocare el tema (link). Lo que, si hare es recordar los más de 20 eventos que di por Europa y America hablando de Kinect, y sobre como podíamos crear Apps con el mismo.

Agradecer a toda la gente que tuvo la paciencia de asistir a estos eventos, y escuchar lo emocionado que estaba con cada avance del SDK. También agradecer a todos los que me ayudaron con pruebas de Kinect Apps en la oficina. Recordemos que para probar Apps que usaban Kinect, lo más normal era siempre tener a alguien al frente de la misma. ¡Aquí Victor se lleva el GRACIAS más grande!

hackerman

Finalmente comentar que con pocos productos me he divertido tanto. He tenido la suerte de presentar las capacidades de Kinect a muchas personas, clientes y eventos y la verdad es que es de los momentos en donde he escuchado las mejores ideas para crear Apps. No he vuelto a tener público tan agradecido y entusiasmado hasta estos últimos años con Hololens. Que conviene recordar que tiene un par de mini Kinect embebidas en el Helmet.

Pues bien, yo le doy las gracias a Kinect. Me quedo con mis 4 devices en la colección de gadgets y seguramente cuando tenga nietos les poder explicar lo fabuloso que era poder detectar que una persona levantaba la mano sobre la cabeza o saludaba y con eso hacer una app!

Happy Coding!

El Bruno

References

#Kinect – #KinectSdk is part of the #WindowsSDK on #Windows10 (almost …)

1dyg15

Hello!

When Microsoft released Windows 10 Anniversary Version, one interesting news was related to adding part of the Kinect functionalities into the core of Windows 10. In addition to the camera, features such as IR or depth sensor can now be used with own operating system APIs. (my post on this)

As well, this week is has made official the incorporation of these features. And to be part of Windows 10, you can access them using a Kinect V2 or any other compatible device. In the references section, I will add some examples that have been published on GitHub. Most of them are in the Windows Universal Samples in CameraFrames.

An example of this can be the creation of a UWP app that uses Kinect, and which can be used in the same way on a PC or XBox One. Or a UWP app that use Kinect to perform tasks of Depth, and other Computer that uses an Intel Real Sense camera to perform the same task.

Important: If you are thinking about starting to migrate apps, better leave this on hold. The bodies / skeletons detection feature still is not part of Windows 10.

Greetings @ Toronto

El Bruno

References

#Kinect – #KinectSdk ya es parte de #Windows10

1dyg15

Hola !

Cuando Microsoft liberó la Versión Aniversario de Windows 10, también se comentó que parte de las funcionalidades que posee Kinect pasarían ser parte del Core de Windows 10. Además de la cámara, funcionalidades como IR o el sensor de profundidad ahora puede ser utilizadas con APIs propias del Sistema Operativo. (mi post al respecto)

Pues bien, esta semana se ha hecho oficial la incoporación de estas funcionalidades. Y al ser parte de Windows 10, se puede acceder a las mismas utilizando un Kinect V2 o algún otro device compatible. En la sección de referencias, agregaré algunos ejemplos que se han publicado en GitHub. La mayoría de ellos está en la sección de Windows Universal Samples en CameraFrames.

Un ejemplo de esto puede ser la creación de una app UWP que utilice Kinect, y que se pueda utilizar de la misma manera en un PC o en XBox One. O una app UWP que utilice Kinect para realizar tareas de Depth, y otro PC que utilice una cámera de Intel Real Sense para realizar la misma tarea.

Importante: Si estás pensando en empezar a migrar apps, mejor dejarlo en pausa. La detección de bodies / skeletons todavía no es parte de Windows 10.

Saludos @ Toronto

El Bruno

References

#Fusion4D – Ahora si que motion capture nos da un Wooow !!! (Por cierto: #Hololens les da las gracias!)

Hola!

La idea para hoy era continuar con mi serie de posts de Myo, pero Fusion4D merece una entrada rápida.

El equipo de Microsoft Research ha creado y compartido una nueva técnica basada en el analizar y aprendizaje de movimiento de frames RGBD y la han llamado Fusión4D. Esta técnica combina la fusión volumétrica con la valoración de un campo de deformación suave a través de vistas RGBD para manejar grandes movimiento en modo frame a frame. 

En caso de que el video no haya sido suficientemente claro, se procesa en tiempo real !

Y esto nos lleva a imaginar el nuevo mundo de oportunidades: interacción virtual en tiempo real con dispositivos como Hololens o Oculus?; ¿realizar esta exploración de 4D en tiempo real usando Kinects? y mucho más.

Así que los tiempos están cambiando y este tipo de tecnologías va a cambiar la forma en que interactuamos con los dispositivos, con otras personas y tal vez la forma en la que podemos atrapar Pokemons en un parque.

Saludos @ Toronto

El Bruno

Source: https://www.microsoft.com/en-us/research/publication/fusion4d-real-time-performance-capture-of-challenging-scenes/

#Fusion4D – Here is why motion capture must get a Wooow !!! (BTW: #Hololens says thanks!)

Hi !

So, today was initially the day to continue with my series of Myo posts, but Fusion4D deserves a quick entry.

Microsoft Research’s team have created and shared a new learning-based technique to analyze movement across the RGBD frames. Fusion 4D combines volumetric fusion with estimation of a smooth deformation field across RGBD views to handle large frame-to-frame motion. It supports both incremental reconstruction, improving surface estimation over time, and the parameterization of non-rigid scene motion.

And, just in case > THIS IS REALTIME!

Now is time to imagine the new world of opportunities from here: realtime virtual interaction with devices like Hololens or Oculus?; perform this 4D realtime scan using Kinects? and more.

So times are changing and this types of technologies will change the way we interact with devices, with other people, and maybe the way we can catch Pokemons in a park.

Greetings @ Toronto

El Bruno

Source: https://www.microsoft.com/en-us/research/publication/fusion4d-real-time-performance-capture-of-challenging-scenes/