Investigadores del MIT Media Lab han descubierto una aplicación realmente asombrosa para el sensor LiDAR integrado en tu iPhone y iPad Pro . Puede detectar y rastrear objetos que están completamente fuera del campo de visión de la cámara. Sí, eso significa ver más allá de las esquinas.
Este tipo de imagen, denominada imagen sin línea de visión (NLOS, por sus siglas en inglés), no es un concepto nuevo. Sin embargo, las demostraciones anteriores se basaban en láseres de laboratorio potentes y costosos, con escasa aplicación en el mundo real.
Lo que hace que esta investigación sea tan interesante es que el equipo del MIT la llevó a cabo utilizando el mismo sensor LiDAR de bajo consumo que ya está integrado en nuestros teléfonos inteligentes.
¿Cómo funciona?
El equipo utiliza el sensor LiDAR para permitirnos ver más allá de las esquinas, incluso objetos que no están directamente en nuestro campo de visión. La clave está en el movimiento. A medida que el dispositivo se mueve, el sistema rastrea simultáneamente la forma y la posición del objeto, así como la posición de la cámara a lo largo del tiempo.
El equipo lo denomina modelo de muestreo de apertura, que básicamente combina una serie de lecturas imperfectas y con ruido para crear información útil. Los resultados no son imágenes nítidas de lo que se esconde a la vuelta de la esquina, sino inferencias cada vez más detalladas. El sistema puede indicar la presencia de algo, su movimiento y su forma aproximada. Es similar a la ecolocalización, pero con luz.
¿Qué puede hacer realmente?
El equipo demostró cuatro capacidades específicas: el seguimiento de un solo objeto, la reconstrucción de su forma, el seguimiento de varios objetos a la vez y algo particularmente interesante para la robótica, que es la autolocalización de la cámara utilizando puntos de referencia ocultos.
Esto último es muy importante. Un robot o sistema autónomo capaz de orientarse mediante objetos que no puede ver directamente tiene una enorme ventaja en el mundo real. También puede contribuir a mejorar la tecnología de conducción autónoma o los drones de reparto para tareas como la prevención de accidentes.
Lamentablemente, por ahora no puedes probar esto en tu smartphone, «ya que eso requeriría que estas empresas publicaran sus datos sin procesar, algo que a menudo no hacen», explicó Siddharth Somasundaram, uno de los investigadores del proyecto. Sin embargo, los investigadores han hecho público su código y el hardware del sensor se puede ensamblar por menos de 50 dólares.