Aya: Asistente Robot Interactivo Premiado Impulsado por AWS

Aya es un robot interactivo premiado que usa AWS Rekognition para reconocer caras e identificar objetos, ofreciendo respuestas de voz natural mediante Amazon Polly.

Historia

Inspiración

Ver a Alexa de Amazon y Google Home despertó nuestra visión de un asistente personal verdaderamente humano. Aya es nuestro robot prueba de concepto que combina apariencia humana con IA avanzada.

Qué Hace

Aya almacena una foto del usuario para reconocerle y puede identificar el objeto frente a ella, comunicando el resultado mediante lenguaje hablado.

Cómo la Construimos

Construir Aya requirió un sistema embebido complejo: los controles de servo corrían en hilos separados de los codecs de audio para permitir habla y movimiento de mandíbula simultáneos. Imprimimos en 3D el chasis –un diseño open‑source InMoov– durante 26 horas en Hack the North 2017. El sistema se basa en AWS Rekognition para comparación facial, Amazon Polly para síntesis de voz y un hilo paralelo para actuación de servos en tiempo real.

Desafíos

Obstáculos de hardware iban desde cables fundidos y protoboards quemados hasta sobrecalentamiento de servos y problemas de tolerancia. Sincronizar control de servo con voz exigió multihilo cuidadoso. En software, elegir la etiqueta más relevante del array de confianza de Rekognition resultó complicado; exploramos clustering k‑means pero las limitaciones de tiempo impidieron implementación completa. Completar todo en un hackathon de 36 horas, con mínimo descanso, nos obligó a mantenernos ágiles y enfocados.

Logros de los que Estamos Orgullosos

Integrar con éxito el sistema de servos con la pila software y mantener excelente colaboración en equipo durante el evento, resultando en un producto final pulido.

Próximos Pasos para Aya

Trabajo futuro incluye aplicar TensorFlow para agrupar salidas de Rekognition y usar pyAudioAnalysis para sincronizar formas de onda de audio con movimiento de servo con mayor precisión.

Leer Más Información…

Aya