Ambarella presenta SoCs con IA para flujos de video multi-sensor

Ambarella, empresa líder en procesamiento de imagen, ha anunciado dos nuevas soluciones de sistema en chip (SoC) que combinan captura de video de alta resolución con procesamiento avanzado de inteligencia artificial (IA). Diseñados para cámaras de seguridad y despliegues de ciudades inteligentes, los CV5S y CV52S ofrecen codificación de video 4K y tareas sofisticadas de IA como reconocimiento facial y de matrículas.

El CV5S apunta a sistemas de cámara multi-sensor, manejando hasta cuatro entradas de 8 megapíxeles (8MP) —equivalentes a resolución 4K— a 30 fps cada una. Puede procesar 14 flujos de video simultáneos, realizando IA en tiempo real en cada fotograma 4K. Comparado con la generación anterior de Ambarella, el CV5S duplica tanto la resolución de codificación como el ancho de banda de memoria mientras reduce el consumo de potencia en un 30 %. Opera por debajo de 5 W y entrega 12 eTOPS (métrica de Ambarella para rendimiento equivalente a GPU).

El CV52S está optimizado para cámaras de sensor único y soporta 4K a 60 fps. Ofrece cuádruple rendimiento de IA, el doble de rendimiento de CPU y 50 % más ancho de banda de memoria respecto a modelos anteriores. Consumiendo menos de 3 W, proporciona 6 eTOPS de potencia computacional.

Ambos SoCs están construidos en el proceso de 5 nm de Ambarella y cuentan con un acelerador de IA CVflow expandido, permitiendo convolución eficiente y otras operaciones de deep learning. «Tener un acelerador de IA por sí solo no basta; todo el pipeline de imagen debe trabajar en armonía», dijo Jerome Gigot, director senior de marketing de Ambarella. «Nuestro ISP integrado, controlador de memoria y pila de software nos permiten mantener los datos en su lugar, eliminando copias costosas y logrando procesamiento de video de alta calidad y bajo consumo.»

Además del motor CVflow, cada SoC incluye el procesador de señal de imagen (ISP) de larga data de Ambarella, que maneja corrección de color, auto-exposición, balance de blancos automático y filtrado de ruido. Gigot destacó los 16 años de desarrollo del ISP, subrayando la profundidad de integración que los nuevos participantes suelen carecer.

El acelerador de IA es un procesador vectorial que puede acelerar redes neuronales convolucionales (CNN) y algoritmos clásicos de visión por computadora. Soporta esparsificación —podando coeficientes cercanos a cero— para reducir la carga computacional hasta en un 80 %. Tras una breve fase de reentrenamiento, los modelos recuperan precisión dentro del 1 % del original, mientras que el tamaño del modelo puede reducirse cinco veces.

Con su capacidad para manejar hasta 14 flujos de video independientes, el CV5S puede ejecutar múltiples redes neuronales concurrentemente. Gigot explicó que el motor CVflow emplea multiplexación por tiempo y rutas paralelas, permitiendo operación eficiente a través de diferentes redes sin necesidad de procesamiento por lotes típico de GPUs.

Tanto CV5S como CV52S entrarán en muestreo en octubre de 2021.

El CV52S apunta a diseños de sensor único como monitorización de tráfico y otras aplicaciones de ciudad inteligente (Fuente: Ambarella)

El SoC CV5S para sistemas de cámara multi-sensor incluye la última generación del acelerador CVflow de IA y visión por computadora de Ambarella (Fuente: Ambarella)

Jerome Gigot (Fuente: Ambarella)

Para más detalles, véase la publicación original en EE Times.

Contenido relacionado

• Procesador de visión IA permite video 8K a 30fps en menos de 2W
• Ambarella apunta a detección inteligente en el borde con nuevo SoC de cámara
• FPGAs desplazan ASICs en Subaru Eyesight ADAS basado en visión
• Arm añade CPU, GPU e ISP para seguridad autónoma y de visión
• Placa de visión IA de bajo consumo dura 'años' con una sola batería

Para más contenido de Embedded, suscríbete al boletín semanal de Embedded.