Ambarella, Lumentum y ON Semiconductor colaboran en la detección 3D basada en procesamiento de IA para dispositivos AIoT de próxima generación

Ambarella, una empresa de silicio de visión de IA, Lumentum, un diseñador y fabricante de productos ópticos y fotónicos innovadores, y ON Semiconductor, un proveedor de soluciones de sensor de imagen CMOS, se han asociado para producir dos nuevos diseños de referencia conjuntos que, según dicen, " acelerar la implementación de dispositivos de inteligencia artificial de cosas en verticales”.

Los diseños se basan en la solución conjunta anterior de las empresas para sistemas de acceso sin contacto.

Al combinar los datos de los iluminadores de matriz VCSEL de alto rendimiento de Lumentum y un sensor de imagen ON Semiconductor que usa el SoC AI de Ambarella, se pueden lograr niveles más altos de precisión y una toma de decisiones más inteligente en dispositivos AIoT de próxima generación para control de acceso biométrico, cerraduras electrónicas 3D y otras aplicaciones de detección inteligente.

Diseñados originalmente para el control de acceso biométrico y las cerraduras electrónicas, estos nuevos diseños de referencia también pueden abordar las necesidades de las ciudades inteligentes, los edificios inteligentes, los hogares inteligentes y la atención médica inteligente.

Además, el alto nivel de integración proporcionado por estas soluciones conjuntas reduce significativamente el consumo de energía del sistema y los requisitos de diseño térmico al tiempo que permite factores de forma de producto mucho más pequeños.

Fermi Wang, presidente y director ejecutivo de Ambarella, dice:“La visión de Ambarella es combinar el procesamiento de IA con 3D y detección de visión para crear un futuro inteligente ambiental.

“Esta colaboración con Lumentum y ON Semiconductor impulsará aún más la convergencia de IA e IoT para permitir una nueva generación de sistemas de control de acceso, al tiempo que inspira nuevas categorías de productos de detección ambiental, todo impulsado por la fusión de sensores que utilizan procesadores de visión de IA que interactúan de manera inteligente. y discretamente con las personas para abordar sus necesidades en constante evolución”.

Téa Williams, vicepresidente senior y gerente general de detección 3D en Lumentum, dice:“Nuestras nuevas soluciones conjuntas aumentarán en gran medida la precisión de los dispositivos AIoT en todas las aplicaciones verticales, comenzando con el control de acceso biométrico y las cerraduras electrónicas, permitiéndoles reconocer personas y predecir sus necesidades, en lugar de requerir una interfaz humana directa.

“Muchas de estas aplicaciones aprovecharán la detección 3D para inyectar una nueva dimensión de entrada de datos para mejorar la toma de decisiones. Por ejemplo, el uso de iluminación puntual basada en VCSEL de mayor resolución permite rangos de detección más largos y reconocimiento facial de mayor precisión.

"Los arreglos VCSEL de alto rendimiento y líderes en la industria de Lumentum con cero fallas de campo, utilizados en estas soluciones conjuntas, están impulsando nuevas aplicaciones y ayudando a hacer realidad el sueño de los dispositivos AIoT con capacidades de detección 3D".

Gianluca Colli, vicepresidente y gerente general del grupo de la división de sensores industriales y de consumo (ICSD) de ON Semiconductor, dice:“Los sensores de imagen son los ojos de los dispositivos de detección inteligentes. Su capacidad de ver más lejos con más detalles proporciona mucha más información para la toma de decisiones del procesador de IA en dispositivos AIoT.

“Nuestra tecnología de sensor RGB-IR líder en la industria, combinada con las capacidades ISP avanzadas de los SoC de visión AI de Ambarella, puede traer imágenes visibles e IR a los dispositivos simultáneamente. Para esta segunda generación de nuestras soluciones conjuntas, aprovechamos los comentarios de los clientes para cuadruplicar la resolución de nuestros sensores de imagen RGB-IR a 4K (8MP)”.

Las nuevas soluciones AIoT conjuntas de las tres empresas consisten en dos diseños de referencia y kits de desarrollo de detección 3D adicionales, cada uno configurado de forma única para abordar las demandas específicas de la aplicación para la combinación de procesamiento de IA, detección de profundidad 3D y detección de visión:

Dirigido a los lectores de control de acceso biométrico de próxima generación, el diseño de referencia de Vision+ es la primera solución 4K de la industria AIoT que realiza detección de luz estructurada de 940 nm con una sola cámara basada en tecnología RGB-IR.

También es el primero en aprovechar una solución de un solo chip para procesamiento de profundidad, procesamiento de IA y procesamiento de video. Basado en el procesador de visión Ambarella CV22 CVflow AI, incluye detección de luz estructurada de una sola cámara con tecnología VCSEL de Lumentum, con un alcance de 2 metros y un sensor de imagen CMOS RGB-IR de 4K (8MP) de ON Semiconductor.

Dirigido a cerraduras de puertas electrónicas inteligentes de próxima generación, o eLocks, tanto para aplicaciones comerciales como residenciales, el diseño de referencia de Saturn es el primero de la industria de AIoT en integrar el procesamiento de IA para la detección de luz estructurada de una sola cámara y el procesamiento de video de arranque rápido.

Se basa en el procesador de visión Ambarella CV25 CVflow AI e incluye una cámara de luz estructurada con tecnología VCSEL de Lumentum y el sensor de imagen AR0237CS 2MP RGB-IR de ON Semiconductor.

Dirigidos a aplicaciones de detección inteligente y con oportunidades en todas las verticales, los kits de desarrollo basados ​​en procesadores de visión CVflow AI de la serie CV2 de Ambarella ahora pueden equiparse con adaptadores de sensor ToF que funcionan con los arreglos VCSEL de vanguardia de Lumentum. También está disponible un adaptador de sensor de imagen 4K RGB-IR opcional para estos kits.

El kit de desarrollo de software abierto (SDK) para los procesadores de visión CVflow AI de Ambarella permite la fácil integración de aplicaciones de terceros al tiempo que permite a los OEM abordar diferentes requisitos regionales con una sola plataforma (por ejemplo, utilizando diferentes algoritmos de IA en diferentes regiones).

Además, este sólido SDK basado en Linux amplía las capacidades de los dispositivos de detección perimetrales, simplifica el desarrollo de productos y acelera el tiempo de comercialización a través de:

• Capacidades de desarrollo de aplicaciones personalizadas
• Compatibilidad con diferentes modalidades 3D, incluida la luz estructurada y ToF. Excepcionalmente, un solo Ambarella SoC proporciona procesamiento de detección 3D sin la necesidad de un procesador de profundidad dedicado o un procesador de host separado
• Altas capacidades de inferencia de IA en el dispositivo de la cámara para permitir que múltiples redes neuronales se ejecuten simultáneamente
• Herramientas robustas de IA para apoyar el desarrollo y la migración de redes neuronales profundas
• ISP integrado para manejar escenas desafiantes, incluidos escenarios de alto rango dinámico y poca luz
• Procesadores Arm integrados para ejecutar aplicaciones de clientes
• Hardware de seguridad integrado, incluido arranque seguro, OTP para almacenar claves de cifrado y tecnología Arm TrustZone para comparaciones seguras de claves de cifrado
• Compatibilidad con una rica interfaz de periféricos para simplificar los diseños del sistema

Disponibilidad

Se espera que estos diseños de referencia conjuntos y kits de desarrollo estén disponibles en junio. Hay más información disponible en Ambarella.