Lidar en el iPhone 12 Pro: lo que puede hacer ahora y por qué es importante para el futuro

El sensor lidar del iPhone 12 Pro, un círculo negro en la parte inferior derecha de la unidad de la cámara, abre las opciones de RA y mucho más.

Patrick Holland / CNET

Apple estará en el mercado de lidar, una tecnología completamente nueva para la empresa iPhone 12 familia, específicamente para iPhone 12 Pro y iPhone 12 Pro Max. (El iPhone 12 Pro ya está a la venta con el iPhone 12 Pro Max después de unas semanas). Peer peer en uno de los nuevos modelos de iPhone 12 Pro, o el último iPad Pro, y verá un pequeño punto negro cerca de la lente de la cámara, aproximadamente del mismo tamaño que el flash. Este es un sensor lidar y es un nuevo tipo de detección de profundidad que podría cambiar varias formas interesantes.

Si Apple se sale con la suya, lidar es un término que comenzará a escuchar mucho ahora, así que echemos un vistazo a lo que sabemos, para qué lo usará Apple y hacia dónde podría ir esta tecnología a continuación. Y si se pregunta qué está haciendo ahora mismo, también he pasado algún tiempo con la tecnología.

¿Qué significa lidar?

Lidar es la abreviatura de detección y rango de luz y existe desde hace algún tiempo. Utiliza láseres para hacer rebotar objetos y regresar a la fuente láser, midiendo la distancia cronometrando un viaje o haciendo volar un pulso de luz.

¿Cómo funciona el lidar en la detección de profundidad?

Lidar es un tipo de cámara de tiempo. Algunos otros teléfonos inteligentes miden la profundidad con un solo pulso de luz, mientras que un teléfono inteligente con este tipo de tecnología lidar emite ondas de pulsos de luz en un aerosol de puntos infrarrojos, cada uno midiendo con su propio sensor y creando un campo de puntos que mapean distancias y pueden «conectar» dimensiones de espacio y objetos. en él. Los pulsos de luz son invisibles para el ojo humano, pero pueden verse con una cámara de visión nocturna.

¿No es como un Face ID en un iPhone?

Lo es, pero con un mayor alcance. La idea es la misma: Apple Cámara TrueDepth con función Face ID también dispara una serie de láseres infrarrojos, pero solo puede funcionar a unos pocos pies. Los sensores de la tapa trasera del iPad Pro y del iPhone 12 Pro funcionan a una distancia de hasta 5 metros.

Lidar ya está en muchas otras tecnologías

Lidar es una tecnología que está creciendo en todas partes. Usado para coches autopropulsadoso conducción asistida. Usado para robótica y drones. Auriculares de realidad aumentada como HoloLens 2 tienen tecnología similar y mapean espacios espaciales antes de insertar objetos virtuales 3D en ellos. Pero también tiene una historia bastante larga.

Antiguo accesorio de detección de profundidad de Microsoft Xbox Kinect, era una cámara que también tenía un escaneo de profundidad infrarrojo. PrimeSense, la empresa que ayudó a crear la tecnología Kinect, adquirida por Apple en 2013. Ahora tenemos un Apple TrueDepth para detección facial y un sensor lidar trasero.

El iPhone 12 Pro funciona mejor con lidar

Las cámaras de lapso de tiempo en los teléfonos inteligentes tienden a usarse para mejorar la precisión y la velocidad de enfoque, y el iPhone 12 Pro hace lo mismo. Apple promete un mejor enfoque con poca luz, hasta seis veces más rápido con poca luz. La detección de profundidad Lidar también se utiliza para mejorar los efectos del modo de retrato nocturno. Hasta ahora, esto tiene un impacto: lea más en nuestra revisión del iPhone 12 Pro.

La ventaja es un mejor enfoque y también existe la posibilidad de que el iPhone 12 Pro también pueda agregar más datos de fotos en 3D a las imágenes. Aunque esta función aún no se ha descargado, la cámara de ángulo frontal Apple TrueDepth se ha utilizado de manera similar con las aplicaciones, y los desarrolladores externos han podido sumergirse y desarrollar algunas ideas locas. Ya está sucediendo.

También mejora enormemente la realidad aumentada.

Lidar permite que el iPhone 12 Pro inicie aplicaciones AR mucho más rápido y cree un mapa rápido de la habitación y agregue más detalles. Un montón de Actualización de AR de Apple en iOS 14 utilizan lidar para ocultar objetos virtuales detrás de los reales (llamados oclusiones) y para colocar objetos virtuales en mapeos de habitaciones más complejas, como una mesa o una silla.

Lo probé en Apple Arcade, Hot Lava, que ya usa lidar para escanear la habitación y todos sus obstáculos. Pude colocar objetos virtuales en las escaleras y tener cosas escondidas detrás de objetos de la vida real en la habitación. Espere que muchas más aplicaciones de AR comiencen a agregar dicho soporte lidar para experiencias más ricas.

lente-snapchat-con-lidar.pnglente-snapchat-con-lidar.png

Otra ola de lentes Snapchat comenzará a recibir imágenes de detección de profundidad utilizando el lidar del iPhone 12 Pro.

Snapchat

Pero además, existe otro potencial con una cola más larga. Muchas empresas sueñan con auriculares que combinen objetos virtuales y reales: gafas AR, en qué Facebook está trabajando, Qualcomm, Snapchat, Microsoft, Salto mágico y muy probablemente Apple y otros, dependerán de tener mapas del mundo 3D avanzados en los que se colocarán los objetos virtuales en capas.

Estos mapas en 3D ahora se crean usando escáneres y equipos especiales, casi como la versión mundial de estos autos, Google Maps. Sin embargo, existe la posibilidad de que los propios dispositivos de las personas puedan eventualmente ayudar al crowdsourcing de esta información, o agregar datos adicionales en tiempo de ejecución. Los auriculares AR como Magic Leap y HoloLens escanean previamente su entorno antes de poner cosas en él, y la tecnología AR impulsada por lidar de Apple funciona de la misma manera. En ese sentido, el iPhone 12 Pro y el iPad Pro son como auriculares AR sin una parte de auriculares … y podrían allanar el camino para que Apple eventualmente fabrique sus propias gafas.

occipital-canvas-ipad-pro-lidar.pngoccipital-canvas-ipad-pro-lidar.png

Escaneo 3D de una habitación desde Occipital’s Canvas, habilitado por el lidar sensible a la profundidad en el iPad Pro. Espere lo mismo para el iPhone 12 Pro y tal vez más.

Occipital

El escaneo 3D puede ser una aplicación excelente

Lidar se puede utilizar para conectar objetos y habitaciones 3D y superponer imágenes fotográficas en la parte superior, una técnica llamada fotogrametría. Esta podría ser otra ola de tecnología de captura para uso práctico. mejoras para el hogar, o incluso las redes sociales y periodismo. La capacidad de capturar datos 3D y compartir esta información con otros podría abrir estos teléfonos y tabletas LIDAR como herramientas para capturar contenido 3D. Lidar también se puede utilizar sin un elemento de cámara para obtener medidas de objetos y espacios.

Probé varias aplicaciones de escaneo 3D LIDAR tempranas en el iPhone 12 Pro con éxito mixto (Aplicación 3D Scanner, Lidar Scanner y Record3D), pero se pueden usar para escanear objetos o mapear ubicaciones con una velocidad sorprendente. El alcance de escaneo efectivo de un lidar de 16 pies es suficiente para llegar a la mayoría de las habitaciones de mi casa, pero en áreas exteriores más grandes requiere más movimiento. Nuevamente, la cámara frontal Apple TrueDepth ya hace esas cosas en una distancia más corta.


Jugando ahora:
Ver este:

Nuestra descripción detallada de los dispositivos iPhone 12 y 12 Pro

13:48

Apple no es el primero en investigar dicha tecnología en el teléfono.

Google tenía la misma idea en mente cuando Proyecto Tango – una de las primeras plataformas de RA que solo en dos teléfonos — fue creado. El campo de la cámara avanzada también tenía sensores infrarrojos y podía mapear habitaciones, crear escaneos 3D y mapas de profundidad para AR y mediciones en interiores. Los teléfonos Tango equipados con Google duraron poco y fueron reemplazados por algoritmos de visión por computadora que realizaban tomas de cámara en profundidad estimadas sin la necesidad del mismo hardware. Pero el Apple iPhone 12 Pro parece un sucesor mucho más avanzado con las capacidades de este lidar, que se extiende a automóviles, auriculares AR y muchos más.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *