Qué es el ToF en una cámara de móviles

  • El sensor ToF mide la profundidad de la escena calculando el tiempo que tarda la luz infrarroja en ir y volver, generando un mapa 3D muy preciso.
  • En móviles se usa para mejorar el modo retrato, el enfoque en foto y vídeo, la realidad aumentada y las funciones de medición y escaneo 3D.
  • En el frontal permite reconocimiento facial 3D más seguro y control por gestos sin tocar la pantalla, incluso en entornos con poca luz.
  • Aunque tiene limitaciones de resolución y problemas con luz intensa, su bajo consumo, precisión y tamaño lo hacen ideal para smartphones.

Qué es el ToF en una cámara de móviles

La cámara se ha convertido en el gran reclamo de los móviles, sobre todo cuando hablamos de gamas media y alta. Cada generación estrena nuevos sensores, más megapíxeles como en el Xiaomi Mi Note 10, zooms más locos y tecnologías que hace nada solo veíamos en entornos profesionales. Entre todas ellas, un término empieza a sonar con fuerza en las fichas técnicas: ToF.

Puede que hayas visto “cámara ToF” o “sensor de profundidad ToF” al mirar móviles de Samsung, Huawei P40, HONOR, LG, Oppo u otras marcas y te hayas quedado igual. No es una moda pasajera ni algo puramente de marketing: detrás hay una tecnología de medición de profundidad muy madura que viene de la industria y la investigación, que se usó en dispositivos como Kinect, y que ahora está encontrando su sitio en el móvil para mejorar foto, vídeo, seguridad, gestos y realidad aumentada.

Qué es el ToF en una cámara de móviles

ToF viene de “Time of Flight”, que traducido es “tiempo de vuelo”. En un smartphone, cuando hablamos de cámara o sensor ToF nos referimos a un tipo de cámara de profundidad que calcula la distancia a cada punto de la escena usando luz infrarroja. A este tipo de sistemas también se les llama cámaras de tiempo de vuelo, cámaras de profundidad 3D o directamente cámaras ToF.

El concepto se parece mucho a un sónar o un radar, pero usando luz en vez de sonido. El móvil emite un haz de luz infrarroja hacia lo que tiene delante, esa luz choca con objetos y personas, rebota y vuelve al teléfono. Midiendo el tiempo que tarda en hacer ese viaje de ida y vuelta, y sabiendo a qué velocidad se mueve la luz, el sistema puede calcular a qué distancia está cada punto que ve el sensor.

Esa medición no se hace para un único punto, sino para miles o cientos de miles repartidos por toda la escena. De esta forma, el móvil obtiene un mapa de profundidad en 3D en el que cada píxel no solo guarda color o intensidad, sino también qué tan lejos está. Con ese mapa, el software entiende la escena con volumen: sabe qué está delante, qué detrás, dónde hay huecos, bordes, esquinas, etc.

Conviene tener claro que la cámara ToF no sustituye a la cámara “normal” del móvil. No está pensada para que hagas fotos y vídeos directamente con ella, sino para trabajar en segundo plano como un sensor de apoyo. Proporciona datos muy precisos de profundidad que el procesador combina con la imagen RGB de las otras cámaras para mejorar el modo retrato, el enfoque, el reconocimiento facial en 3D, la realidad aumentada o el control por gestos.

En algunos móviles de gama alta, se integra más de un sensor ToF: uno en la parte trasera, pensado sobre todo para fotografía, vídeo, AR y mediciones; y otro en el frontal, centrado en desbloqueo facial avanzado y gestos en el aire. Ejemplos claros los encontramos en terminales como el Galaxy S10 5G de Samsung o en algunas propuestas de LG, HONOR, Huawei u Oppo.

Componentes de una cámara ToF en el smartphone

Una cámara ToF no es solo un “puntito” negro más junto a las lentes del móvil; es un pequeño sistema completo con varios elementos que trabajan juntos. Aunque a simple vista se vea como un agujerito, por dentro la cosa tiene bastante miga.

El corazón del conjunto es el sensor ToF, una matriz de píxeles especializada. A primera vista se parece a un sensor de imagen clásico (tipo CMOS o CCD), pero sus píxeles están diseñados para registrar cómo llega la luz infrarroja que emite el propio móvil: miden su intensidad, pero también cambios de fase y el desfase temporal respecto a lo que se ha emitido. Cada minúscula celdilla actúa como un cronómetro ultrarrápido para la luz que le entra.

Delante del sensor encontramos un módulo óptico sencillo, es decir, una lente dedicada que se encarga de enfocar la luz reflejada desde la escena hacia el captador. No suele ser tan compleja como la óptica de la cámara principal, pero cumple un papel similar: definir el ángulo de visión y garantizar que la luz llegue nítida a cada píxel de la matriz ToF.

Para que todo esto funcione hace falta una fuente de luz infrarroja propia, normalmente en forma de LED o láser que emite luz NIR (near infrared) con longitudes de onda típicas entre 850 y 940 nm. Esa luz suele ir modulada a frecuencias del orden de decenas de MHz (alrededor de 20 MHz en muchos diseños) para que el sensor pueda diferenciar sin problemas el pulso “de la casa” de la luz ambiental y aplicar técnicas de cambio de fase que refinan mucho el cálculo de distancia.

La última pieza clave del puzzle es el procesador de profundidad. Puede ser un chip específico integrado en el módulo de cámara o un bloque dentro del ISP (Image Signal Processor) del propio SoC del móvil. Su misión es transformar los datos crudos que salen del sensor (valores de píxeles, fases, tiempos) en un mapa de profundidad limpio, filtrar ruido, gestionar una posible imagen IR 2D y preparar la información para que el sistema operativo, las apps y el resto de cámaras la aprovechen en tiempo real.

Cómo funciona el ToF paso a paso

Aunque por debajo haya bastante ingeniería, el principio físico del ToF se puede explicar de forma bastante intuitiva. Básicamente, el sistema mide cuánto tarda un pulso de luz en salir, rebotar en un objeto y volver al sensor. Ese es el famoso “tiempo de vuelo”. A partir de ahí, todo se reduce a multiplicar y dividir.

El proceso completo se repite muchas veces por segundo y se puede dividir en una serie de fases que se ejecutan de forma continua mientras la cámara ToF está activa:

  • Emisión: el emisor infrarrojo lanza pulsos de luz IR modulada hacia la escena frente al móvil.
  • Interacción con la escena: esos pulsos viajan por el aire, chocan contra personas, muebles, paredes, plantas, etc., y parte de esa luz rebota de vuelta hacia el teléfono.
  • Detección: el sensor ToF captura la luz infrarroja que vuelve; cada píxel recibe la señal reflejada de un punto concreto del entorno.
  • Medición temporal o de fase: el sistema calcula la diferencia entre la señal que se emitió y la que se está recibiendo, ya sea midiendo tiempo puro o el cambio de fase de la onda modulada.
  • Cálculo de distancia: con la fórmula distancia = (velocidad de la luz × tiempo de vuelo) / 2, el procesador obtiene qué tan lejos está cada punto; se divide entre dos porque se considera ida y vuelta.
  • Generación del mapa de profundidad: se reúnen todas esas distancias en una matriz, creando un mapa de profundidad en el que cada píxel tiene asociado un valor de distancia.

Lo más importante es que todo el campo de visión se mide en un único “disparo”. No hace falta hacer barridos ni enfocar un plano tras otro, como ocurre con otros sistemas. Cada fotograma de la cámara ToF ya contiene de golpe la información de profundidad de toda la escena que ve, lo que permite trabajar en tiempo real con bastante holgura.

Si alguna vez has usado un Kinect de Xbox 360 o Xbox One, te haces una buena idea de lo que consigue este enfoque: reconocer personas, objetos y gestos con bastante precisión en 3D. En esencia, los móviles con ToF trasladan ese mismo concepto a un formato mucho más pequeño y portátil, adaptándolo a las limitaciones de espacio y consumo propias de un smartphone.

En algunos diseños, además, la luz infrarroja se modula a frecuencias concretas para evitar confusiones con la luz de fondo y mejorar la robustez de las mediciones. Conociendo la frecuencia de modulación, el sistema puede calcular distancias con técnicas de cambio de fase incluso cuando las condiciones de iluminación ambiente son complicadas.

Ventajas de la tecnología ToF

Qué es el ToF en una cámara de móviles

Medir profundidad no es algo exclusivo del ToF; se puede hacer con visión estereoscópica, luz estructurada, láseres tradicionales o incluso con algoritmos puros sobre una cámara 2D. Sin embargo, el enfoque de tiempo de vuelo tiene una combinación de ventajas muy interesante para los móviles.

Una de las grandes bazas es el bajo consumo energético. El sistema necesita únicamente una fuente de luz infrarroja y un sensor especializado para obtener de forma directa información de distancia y amplitud en cada píxel, sin depender de procesados pesadísimos que expriman el procesador durante largos ratos. Frente a técnicas como la luz estructurada (que proyecta patrones complejos) o la visión estereoscópica pura (que requiere mucha potencia de cálculo), el ToF suele ser más eficiente en términos de batería.

Otra ventaja muy clara es la alta precisión en la medición de profundidad. Bien diseñado y calibrado, un módulo ToF es capaz de medir con errores muy reducidos, en rangos de milímetros o centímetros dependiendo de la distancia al objeto y de la calidad del sistema. Esto marca la diferencia cuando se quiere lograr un modo retrato “fino”, un buen desenfoque selectivo o una reconstrucción 3D de objetos con cierto detalle.

También destaca su capacidad de trabajar en tiempo real con muy poca latencia. El sensor ToF puede capturar mapas de profundidad completos a gran velocidad (fotograma a fotograma), algo vital para aplicaciones en las que hace falta respuesta inmediata: seguimiento de personas u objetos, gestos en el aire, realidad aumentada, robótica cercana al usuario, etc.

Además, este tipo de cámaras ofrece un rango dinámico amplio en profundidad y tolera bastantes condiciones de luz. Al contar con su propia iluminación infrarroja, no dependen tanto de que haya luz visible en la escena. Pueden funcionar con poca luz e incluso en la oscuridad, lo que resulta ideal para reconocimiento facial nocturno, control por gestos en ambientes poco iluminados o fotografía con ayudas de profundidad en interiores.

Por último, hay que mencionar que, comparadas con otros sistemas 3D como ciertos LiDAR de largo alcance o equipos de luz estructurada complejos, las cámaras ToF son relativamente económicas y compactas. Esto las hace mucho más fáciles de integrar en productos de consumo masivo como teléfonos, tablets, cámaras domésticas, robots de limpieza o dispositivos de realidad aumentada.

Desventajas y limitaciones de los sensores ToF

Como cualquier tecnología, el ToF también tiene su cruz y presenta una serie de limitaciones técnicas y de diseño que hay que gestionar bien para sacarle partido.

La primera suele ser evidente: la resolución del sensor ToF acostumbra a ser baja en comparación con la de las cámaras fotográficas clásicas del móvil. Los mapas de profundidad tienen suficiente detalle para separar sujeto y fondo, controlar gestos o medir objetos de tamaño medio, pero se quedan cortos si lo que queremos es un modelado 3D extremadamente fino o trabajar con detalles muy pequeños.

Otro problema frecuente son los artefactos originados por la luz dispersa. Superficies muy brillantes, muy cercanas o con geometrías raras pueden reflejar más luz de la cuenta hacia el sensor, generando manchas, halos o errores de medición que luego se manifiestan como “dientes” o cortes raros en el mapa de profundidad. El software tiene que entrar ahí a corregir lo que puede.

Ligado a lo anterior aparecen las múltiples reflexiones en zonas con esquinas y superficies cóncavas. En esos escenarios, la luz puede hacer varios rebotes antes de regresar al sensor, introduciendo un retraso adicional que el sistema interpreta como más distancia de la real. Ese tipo de errores añade incertidumbre y obliga a filtrar muy bien los datos para que el resultado final sea fiable.

La luz ambiental intensa, especialmente el sol directo, es otro enemigo clásico de los sensores ToF. A plena luz del día, la cantidad de infrarrojo que llega del entorno puede saturar con rapidez los píxeles, complicando mucho distinguir el pulso que emite el propio móvil de todo el ruido de fondo. En esas condiciones, el alcance útil del sensor puede reducirse y la precisión bajar notablemente.

Más allá de lo puramente técnico, hay una limitación física bastante prosaica: el espacio interior en el móvil. Un módulo ToF necesita su sensor, su óptica y su emisor infrarrojo, ocupando prácticamente lo mismo que una cámara convencional. En un chasis en el que cada milímetro cuenta para meter batería, altavoces, módem, antenas, motores de vibración y demás, reservar hueco para otro “ojo” extra no es trivial para los fabricantes.

ToF frente a LiDAR: en qué se parecen y en qué se diferencian

Muchas veces se mete en el mismo saco al ToF y al LiDAR porque, en el fondo, ambos se basan en medir distancias con luz y en el concepto de tiempo de vuelo. Aun así, en la práctica suelen implementarse de forma distinta y con objetivos un poco diferentes, aunque cada vez se mezclen más conceptos entre ambos.

En los sistemas LiDAR clásicos, sobre todo los que se usan en vehículos autónomos y cartografía avanzada, lo normal es emplear láseres más potentes y ópticas específicas para escanear el entorno a distancias grandes, de decenas o incluso cientos de metros. Su precisión y alcance son muy altos, pero también lo son el tamaño y el coste de los equipos.

Las cámaras ToF de consumo, en cambio, buscan ser compactas, integrables y razonablemente baratas. Están pensadas para trabajar en rangos cortos y medios, típicos de la distancia entre un usuario y su móvil, una tele, una consola o un robot doméstico. No necesitan ver a 100 metros, sino entender bien lo que ocurre a unos centímetros o unos pocos metros alrededor del dispositivo.

En electrónica de consumo, por tanto, el ToF suele ser la opción preferida cuando se quiere ofrecer profundidad 3D integrada sin disparar los costes. El LiDAR, aun compartiendo la idea básica, se reserva normalmente para aplicaciones donde la precisión extrema y el largo alcance justifican invertir bastante más en hardware.

Eso no quita que, a nivel de marketing, algunas marcas usen los términos casi indistintamente o hablen de “LiDAR” cuando lo que integran es una forma avanzada de ToF. Lo importante es entender que en el móvil lo habitual es un ToF compacto con emisores LED o láser modestos, diseñado para tareas de corto alcance como fotografía, AR cercana y biometría.

Usos del ToF en las cámaras de los móviles

Más allá de la teoría, lo que interesa es qué aporta un sensor ToF en el uso real del smartphone. Sus aplicaciones se agrupan en cuatro grandes bloques: fotografía, vídeo, seguridad/biometría y control por gestos y realidad aumentada, aunque también da juego para mediciones y escaneo 3D.

Modo retrato y efectos de desenfoque

Seguramente la mejora más visible para el usuario medio es en fotografía, especialmente en el famoso modo retrato y en cualquier escena donde queremos separar bien sujeto y fondo para aplicar un desenfoque tipo bokeh. Aquí el mapa de profundidad 3D que genera el ToF marca la diferencia.

Con un sensor ToF, el móvil sabe con bastante exactitud qué partes de la imagen están más cerca y cuáles más lejos. Ese conocimiento permite recortar mejor el contorno de la persona u objeto principal, evitando errores típicos de recorte en el pelo, en las gafas, en los dedos o en elementos finos. El desenfoque del fondo puede aplicarse de manera progresiva y coherente con la distancia, generando un efecto más natural.

En móviles como el Huawei P30 Pro, el HONOR View 20 o algunos Galaxy de Samsung, el fabricante ha presumido abiertamente del papel de la cámara ToF para mejorar el modo retrato, apoyando a los sensores principales de alta resolución y a los grandes angulares. El resultado son fotos con un look mucho más “profesional” para redes sociales y retratos.

El beneficio no se limita a personas: sirve también para mascotas, objetos, comida y cualquier situación donde interese un fondo suavemente difuminado. El ToF da a la cámara la información de profundidad que los algoritmos de software necesitan para decidir qué enfocar, qué desenfocar y con qué intensidad.

Enfoque y seguimiento en vídeo

Si pasamos al vídeo, el ToF se convierte en un aliado del enfoque continuo: el mapa de profundidad en tiempo real permite seguir con precisión a un sujeto en movimiento, incluso si entra y sale del plano o se acerca y aleja del móvil a buena velocidad.

Muchos smartphones solo con enfoque por contraste o detección de fase tienen problemas cuando la escena es complicada o hay poca luz. Con un sensor ToF apoyando, el procesador sabe en cada instante qué objeto está a qué distancia y puede ajustar la lente sin tanto titubeo, reduciendo los típicos “vaivenes” de enfoque que arruinan una toma.

Esto se agradece sobre todo en vídeo de acción, niños, mascotas o eventos con mucho movimiento, donde mantener al protagonista nítido y bien separado del fondo es clave. El ToF aporta una capa extra de información que los algoritmos de enfoque pueden usar para priorizar sujetos y anticipar cambios de plano.

En algunos casos, además, se combina la información de profundidad con detección de rostros o cuerpos mediante inteligencia artificial. De esta manera, el sistema no solo sabe dónde hay algo, sino también qué es, lo que ayuda a decidir qué debe permanecer enfocado y qué puede dejarse fuera de foco.

Reconocimiento facial 3D y seguridad

Otro de los grandes usos del ToF en la parte frontal del teléfono es la autenticación biométrica avanzada mediante reconocimiento facial en 3D. En lugar de basarse únicamente en una imagen plana de la cara, el móvil es capaz de reconstruir su volumen, analizando la profundidad de distintos puntos del rostro.

Un sensor de este tipo puede llegar a leer cientos de miles de puntos en la superficie de la cara en un solo disparo, tal y como han señalado algunas marcas. Eso permite generar un patrón muy detallado de la geometría facial, difícil de engañar con fotos, vídeos o máscaras básicas, y que se puede contrastar con la plantilla registrada en el dispositivo.

La ventaja adicional es que, al usar infrarrojos, este reconocimiento funciona bien en la oscuridad o con poca luz. No hace falta deslumbrar al usuario con la pantalla ni depender de la iluminación ambiente. El sensor ToF ve en IR y, siempre que no haya interferencias brutales, puede identificar al propietario en milisegundos.

Algunos fabricantes han ido más allá con la biometría: el LG G8 ThinQ, por ejemplo, utiliza el ToF frontal para analizar el patrón de venas de la mano. El usuario muestra la palma a unos centímetros del sensor y el sistema reconoce tanto la forma de la mano como la distribución de los vasos sanguíneos, ofreciendo un método de desbloqueo alternativo bastante curioso.

Control por gestos sin tocar el móvil

La posibilidad de controlar el smartphone moviendo la mano en el aire empieza a ser una realidad gracias a los sensores ToF. Al disponer de una lectura precisa de profundidad en la zona cercana a la pantalla, el teléfono puede detectar la posición de la mano, su distancia y ciertos movimientos básicos.

En el citado LG G8 ThinQ, por ejemplo, el sistema Air Motion permite responder llamadas, poner o pausar música, cambiar de canción o subir y bajar el volumen simplemente haciendo gestos por encima del móvil. El sensor ToF frontal se encarga de interpretar esos cambios de posición y de profundidad de la mano.

Para que funcione, el usuario suele tener que colocar la mano abierta a unos centímetros de los sensores, alejarla ligeramente y luego moverla en una dirección u otra. Los gestos disponibles todavía son relativamente pocos y algo “especialitos”, pero dan una pista muy clara del potencial de la tecnología.

Esta forma de interacción se vuelve especialmente útil en situaciones donde no queremos o no podemos tocar la pantalla: manos mojadas, manos sucias, guantes, cocina, taller… O simplemente cuando el móvil está apoyado en la mesa y preferimos manejarlo desde cierta distancia sin tener que estar cogiéndolo cada dos por tres.

Realidad aumentada, mediciones y escaneo 3D

La realidad aumentada (AR) es otro campo donde el ToF se nota mucho. Al disponer de un mapa de profundidad fiable del entorno, el móvil “entiende” mejor la geometría de la habitación y sabe dónde hay suelos, paredes, muebles y objetos.

Gracias a eso, las apps de AR pueden colocar objetos virtuales con mucha más estabilidad, evitando que parezca que flotan sin sentido o que atraviesen superficies sólidas. Móviles como el Oppo RX17 Pro o el HONOR View 20 han mostrado juegos y experiencias donde el usuario interactúa con elementos 3D que respetan bien la profundidad real de la escena.

El ToF también habilita funciones de medición de distancias, superficies y volúmenes directamente con la cámara. Basta con apuntar al objeto, mueble o persona y dejar que la app calcule su tamaño basándose en los datos de profundidad que le proporciona el sensor. Perfecto para tomar medidas rápidas sin sacar el metro.

En cuanto al escaneo 3D, el móvil puede recorrer visualmente un objeto desde distintos ángulos y unir los mapas de profundidad para reconstruir un modelo tridimensional bastante preciso. Ese modelo después se puede usar en impresión 3D, diseño, arquitectura, videojuegos o realidad virtual.

Otros ámbitos de uso de las cámaras ToF

Aunque en el móvil es donde más se oye hablar últimamente de ellas, las cámaras ToF llevan tiempo utilizándose en muchos otros campos. El salto al smartphone no es más que una evolución natural de algo que ya se había probado con éxito en la industria y la investigación.

En robótica industrial, por ejemplo, los mapas de profundidad 3D en tiempo real ayudan a los robots a ver y entender su entorno. Permiten localizar piezas, calcular rangos de movimiento seguros, evitar choques con personas u otras máquinas y agarrar objetos con bastante precisión en tres dimensiones.

En el mundo del modelado 3D y la realidad virtual, las cámaras ToF se emplean para escanear espacios, habitaciones y objetos y convertirlos en escenarios digitales interactivos. Arquitectos, fabricantes o diseñadores pueden capturar rápidamente un lugar y trabajar sobre un gemelo virtual con medidas fiables.

También hay aplicaciones en dispositivos de consumo fuera del móvil, como cámaras domésticas inteligentes, robots aspiradores que mapean la casa, soluciones de domótica que detectan presencia y movimiento con profundidad, o sistemas de autenticación avanzados en portátiles y puertas inteligentes.

Todo este ecosistema hace que, aunque en el smartphone veamos solo una cara de la moneda, la tecnología ToF tenga aún muchísimo recorrido y probablemente siga perdiendo peso físico, ganando resolución y combinándose con otras técnicas como el LiDAR o la visión por computador para lograr una comprensión del entorno cada vez más rica.

Galaxy S11 nuevo sensor ToF
Artículo relacionado:
Galaxy S11: el revolucionario sensor ToF y las novedades en fotografía móvil

Si miramos todo en conjunto, la irrupción de los sensores ToF en los móviles ha supuesto un salto interesante: fotografías con desenfoques más naturales, vídeos mejor enfocados, desbloqueos faciales 3D más seguros, gestos en el aire y experiencias de realidad aumentada mucho más convincentes, todo a partir de medir con mucha precisión cuánto tarda la luz en ir y volver. Pese a sus limitaciones de resolución, a los problemas con la luz ambiente intensa y al espacio que ocupan dentro del teléfono, todo indica que su presencia en la telefonía seguirá creciendo y refinándose en los próximos años.