Renesas y Syntiant Lanzan IA de Visión Controlada por Voz de Bajo Consumo para IoT Embebido

Renesas Electronics Corporation y Syntiant Corp. se han asociado para crear una plataforma IA multimodal de bajo consumo controlada por voz que entrega procesamiento de imagen sin contacto para aplicaciones edge IoT y de visión-IA embebida.

La integración de la unidad de microprocesador (MPU) de visión-IA serie RZ/V de Renesas con el procesador de decisión neuronal NDP120 ultra-bajo consumo de Syntiant entrega procesamiento avanzado de voz e imagen para casos de uso que van desde kioscos de auto-checkout y cámaras de seguridad a sistemas de videoconferencia y electrodomésticos inteligentes como aspiradoras robóticas.

La solución conjunta presenta un modo always-on que permite wake-up rápido activado por voz desde standby, permitiendo reconocimiento de objetos y rostros, así como otras tareas basadas en visión esenciales para cámaras de seguridad y sistemas similares. Cues de voz definidas por el usuario inician activación y operación, mientras la IA de visión rastrea comportamiento del operador y puede alertar a operadores cuando se detecta actividad sospechosa.

Al separar el reconocimiento de voz en un chip dedicado y eficiente energéticamente, la arquitectura reduce el consumo en standby y acelera el desarrollo. Los desarrolladores pueden programar componentes de voz y visión independientemente, simplificando la integración.

El MPU Renesas serie RZ/V incorpora el acelerador DRP‑AI (procesador-IA reconfigurable dinámicamente), combinando inferencia de alta precisión con eficiencia energética que Renesas afirma estar entre las mejores de la industria. Este rendimiento elimina la necesidad de disipadores o ventiladores, reduciendo coste BOM y permitiendo integración visión-IA a través de una amplia gama de aplicaciones embebidas. DRP‑AI está construido desde núcleos AI‑MAC y DRP, que manejan eficientemente capas convolucionales y fully-connected optimizando flujo de datos con switches internos. El DRP puede reconfigurarse dinámicamente para procesar tareas complejas como pre-procesamiento de imagen y capas de pooling de modelos IA rápidamente. Un traductor DRP‑AI mapea automáticamente operaciones de modelos IA al hardware apropiado, permitiendo a desarrolladores usar DRP‑AI sin conocimiento detallado de hardware. Múltiples ejecutables pueden residir en memoria externa, permitiendo cambio dinámico entre modelos IA en runtime, y el traductor puede actualizarse para soportar nuevos modelos sin cambios de hardware.

El chip Syntiant NDP120 incorpora capacidades IA sofisticadas que soportan funciones de voz hands-free de alta precisión, incluyendo reconocimiento de hablante, detección de palabras clave, múltiples palabras de activación y reconocimiento de comandos locales. Emparejado con el motor de inferencia de red neuronal Syntiant Core 2, el NDP120 puede correr múltiples aplicaciones simultáneamente consumiendo tan solo 1 mW de potencia de batería.

Hablando por Renesas, Hiroto Nitta, Vicepresidente Senior y Jefe de Negocio SoC en la unidad IoT e Infraestructura, dijo: "Anticipamos que la demanda de sistemas multimodales que usan múltiples flujos de información de entrada —tanto imagen como voz— aumentará avanzando como forma de mejorar tanto facilidad de uso como seguridad." Añadió: "A través de la colaboración entre Renesas, líder en tecnología de imagen IA de bajo consumo, y Syntiant, líder en tecnología de voz IA, aceleraremos la adopción de tecnología IA de voz ultra-pequeña y bajo consumo en sistemas embebidos y entregaremos nuevas soluciones combinadas a clientes globalmente."

El CEO de Syntiant, Kurt Busch, señaló: "Las interfaces de usuario basadas en voz harán posible que los clientes entreguen nuevas experiencias de usuario que lleven la próxima generación de ideas innovadoras de concepto a realidad. Ya hemos enviado más de 15 millones de nuestros NDPs deep-learning globalmente para habilitar voz always-on en una amplia variedad de aplicaciones IoT de consumo e industrial. Nuestra colaboración con Renesas entrega una poderosa solución de voz e imagen de bajo consumo que seguramente acelerará la tracción entre una base de clientes global en una variedad de dispositivos y casos de uso."

La nueva solución IA multimodal controlada por voz se basa en múltiples dispositivos compatibles del portafolio más amplio de Renesas, proporcionando a clientes una plataforma de prototipado elevada para time-to-market más rápido y riesgo reducido. Como parte de las "winning combinations" de Renesas, que emparejan productos analógicos, de potencia y procesamiento embebido atractivos, la solución ayuda a clientes a acelerar diseño y lanzar nuevos productos más rápidamente.

Un diseño de referencia para la solución IA multimodal, incluyendo diagramas de circuito y listas BOM, está ahora disponible.