¿Se puede usar el sistema LIDAR de Apple para escanear en 3D?

Captura de escaneo LIDAR 3D de un camión [Source: Keven Peters/YouTube]

Con el lanzamiento del nuevo hardware de Apple, parece que millones tendrán un escáner LIDAR 3D en sus bolsillos o bolsos, pero ¿realmente se puede usar para escanear en 3D?

El hardware LIDAR apareció por primera vez en un lanzamiento de iPad a principios de este año, y muchos se preguntaron qué estaba haciendo Apple. Sin embargo, a medida que ha pasado el tiempo, se ha vuelto bastante claro lo que está pasando.

Escaneo LIDAR 3D

LIDAR, si no lo sabe, es esencialmente una cámara de profundidad: emite una serie de haces de luz y calcula el retraso que se produce en el reflejo de cada uno de esos haces. Esto significa que al convertir los retrasos de tiempo en distancias dividiéndolos por la velocidad de la luz, pueden crear un mapa de profundidad 3D de la escena actual.

Esto es útil para Apple en una variedad de formas, siendo la más importante para el enfoque óptico de la cámara. En lugar de depender de un solo punto para el enfoque a distancia, la cámara tiene una gran cantidad de información de profundidad para diferentes partes de la escena. Esto permite que el software de IA incorporado haga cosas mágicas con el enfoque y otros trucos como fondos borrosos para retratos.

Otra característica habilitada por LIDAR en dispositivos móviles es la capacidad de realizar aplicaciones de realidad aumentada (AR) mucho más precisas. Uno, por ejemplo, le permite colocar muebles del catálogo de IKEA en la vista de la cámara. Esto significa que puedes ver cómo se vería esa mesa en tu sala de estar. Del mismo modo, puede medir el tamaño de los objetos.

Pero hay una cosa más que se puede hacer con este hardware LIDAR: escaneo 3D. El concepto aquí es que, si bien el sistema LIDAR produce un solo mapa de profundidad, es posible mover la cámara para generar muchas imágenes LIDAR que se pueden unir en un modelo 3D mediante software.

Si ese es el caso, en teoría, cualquier persona con un dispositivo Apple equipado con LIDAR podría capturar escaneos 3D de cualquier cosa, y eso es un gran problema.

¿O es eso? ¿LIDAR realmente permite el escaneo 3D fácil, o es tan difícil como sabemos los veteranos del escaneo 3D?

Escaneo LIDAR de la vida real

Keven Peters decidió averiguarlo y produjo un video de sus experiencias en el escaneo 3D, bueno, todo lo que encontró a su alrededor. Utilizó su nuevo iPhone 12 Pro, que es uno de los dispositivos equipados con LIDAR, para realizar el escaneo y eligió la «Aplicación de escáner 3D» gratuita para hacerlo.

Mala captura de escaneo LIDAR 3D de un objeto pequeño [Source: Keven Peters/YouTube]

Peters descubrió que no podía escanear correctamente ningún elemento más pequeño, y esto probablemente se deba al tamaño de la matriz LIDAR. Si bien es probable que muchos estén familiarizados con la cámara de profundidad que realiza el reconocimiento facial, resulta que el sensor LIDAR tiene una matriz de haz mucho menos densa. Estas imágenes de iFixIt muestran la diferencia.

Aquí está la vista de la «matriz de puntos» infrarroja de la cámara frontal del iPhone que se usa para el reconocimiento facial:

Rayos infrarrojos de un escáner facial de iPhone. Tenga en cuenta el número de puntos [Source: iFixit]

Y aquí está la vista de la matriz de puntos LIDAR, observe la diferencia:

Rayos infrarrojos del nuevo escáner iPad Pro LiDAR. Tenga en cuenta el número de puntos [Source: iFixit]

Ahora puede imaginar el desafío de capturar detalles con ese tipo de información de recopilación de «red» suelta.

Malas capturas de escaneo LIDAR 3D debido a la reflectividad [Source: Keven Peters/YouTube]

Sin embargo, Peters persistió en sus experimentos, centrándose en cambio en objetos más grandes, como automóviles y edificios. Desafortunadamente, encontró el problema de la reflectividad que molesta a los escáneres 3D profesionales: los haces de luz rebotan en direcciones peculiares y no se reflejan de vuelta al sensor, estropeando el escaneo. En el video, Peters deambula por las calles en busca de autos con pintura opaca para escanear sujetos.

Edición de una captura de escaneo LIDAR 3D en Blender [Source: Keven Peters/YouTube]

Después de capturar algunos escaneos razonables, Peters usó Blender para repararlos lo suficiente para la impresión 3D y, de hecho, pudo imprimir en 3D con éxito réplicas de algunos en su impresora 3D de escritorio.

Camión impreso en 3D basado en captura de escaneo 3D LIDAR [Source: Keven Peters/YouTube]

Sin embargo, es mucho más trabajo de lo que imaginaba, y ese es casi siempre el caso cuando uno intenta realizar un escaneo 3D. Debido a esta dificultad, ahora es poco probable que veamos una avalancha de escaneos 3D imprimibles de los millones de teléfonos móviles equipados con LIDAR.

Asegúrese de ver el video, ya que lo lleva a través de toda la experiencia de escaneo LIDAR 3D.

Un pensamiento para cerrar: ahora hay una muy buena razón para NO lavar su automóvil.

A través de YouTube