VISTA:Para ciegos
Un par de lentes inteligentes para ciego. Con tecnología de Android Things y TensorFlow.
Historia
Alguna vez pensaste cómo es la vida de una persona ciega, su vida está llena de riesgos. Ni siquiera pueden caminar solos por una calle concurrida o por un parque. Necesitarán ayuda de otros. También sienten curiosidad por la belleza del mundo, deberían tener la emoción de explorar el mundo y ser conscientes de lo que está sucediendo frente a ellos. Aunque pueden encontrar sus propias cosas sin necesidad de nadie. Entonces, ¿cómo resolvemos esto?
¡Presentamos Sight!
Simplemente, Sight es un par de lentes inteligentes para ciegos. Al usar Sight, una persona puede saber lo que está sucediendo frente a él.
Cómo funciona la vista:-
Sight se desarrolló con un raspberry pi 3 y cosas de Android de Google.
La vista tiene tres partes principales, una raspberry pi 3 (con tecnología Android), una cámara y un botón. Cuando la persona presiona el botón en la mira, la vista tomará una foto y analizará la imagen usando el flujo tensor y detectará de qué se trata esa imagen, luego, usando un altavoz o auriculares, la vista asistirá por voz a la persona sobre esa imagen.
¡Así es como funciona la vista!
Cómo se puede hacer una vista usted mismo!
Es fácil, ¡solo sigue los pasos a continuación para hacer uno tú mismo!
Materiales necesarios
Estos son los componentes y materiales que necesitaba para hacer este proyecto. ¡Tómate tu tiempo y reúne todo!
Componentes principales:
- Raspberry Pi 3
- Módulo de cámara Raspberry Pi (5 Mp)
- Micro pulsador
- Resistencia de 1K
- PCB de uso general
Herramientas:
- Soldador
- plomo de soldadura
Software:
- Cosas de Android
- Android Studio
- Tensor Flow
- Base de fuego
Instalación de Android Things en Raspberry Pi
Lo primero es lo primero,
Ir a cosas de Android página web Aquí y luego haga clic en CONSOLA menú en la barra superior de la página web.
Primero debe iniciar sesión, inicie sesión con cualquiera de sus cuentas de Google.
- Haga clic en CREAR UN PRODUCTO botón.
- ¡Debería aparecer una ventana emergente!
- Ingrese el nombre de su producto en el nombre del producto . campo.
- Seleccione Raspberry Pi 3 del tipo SOM.
- Deje el tamaño de partición OEM campo como predeterminado.
- Proporcione una descripción sobre su producto en la descripción . campo.
Pulsa Crear Botón
Lo llevará a una nueva página. En la nueva página, seleccione IMÁGENES DE FÁBRICA desde la barra de menú en la parte superior.
Desplácese hacia abajo un poco y haga clic en CREAR CONFIGURACIÓN DE CONSTRUCCIÓN botón.
después de hacer clic en el botón, una nueva Lista de configuración de compilación El campo será visible debajo del botón. simplemente descargue la compilación de la Lista de configuración de compilación .
Se comenzará a descargar un archivo zip. Espere hasta que se complete la descarga.
Una vez completada la descarga. Descomprime el archivo con 7zip o winrar . Espere hasta que se complete la extracción (probablemente debería tomar solo de 1 a 2 minutos).
Después de extraer el archivo, obtendrá un .img archivo (este es el sistema operativo Android para su Raspberry Pi)
Grabando cosas de Android en la tarjeta SD (parpadeando)
Ahora necesitas grabar este archivo img en tu tarjeta micro SD de la raspberry pi
Estamos usando Etcher (Etcher es un proyecto de código abierto de resin.io).
Conecta la tarjeta SD a Computadora a través de un lector de tarjetas SD y abre Etcher .
Seleccione imagen y seleccione Tarjeta SD y presiona Flash . Espéralo. Después del Flash , desenchufe el lector de tarjetas SD e insértelo en nuestra Raspberry Pi 3 .
Conecta Raspberry Pi 3 a una Ethernet a través de RJ 45 cable y alimentación con adaptador de 5v.
Ahora aquí nuestra IP local es 192.168.0.22 .
Configurar Android Studio
Primero descargue Android Studio (estable) o use la versión preliminar.
Nota: La versión estable también se puede usar para el desarrollo de cosas de Android, pero la versión de vista previa viene con una opción de desarrollo de cosas de Android incorporada.
Después de descargar, instale y abra Android Studio .
Clonar / Descargar el archivo del proyecto de GITHUB
vaya a SIGHT Project Repo haciendo clic aquí
https://github.com/FoxLabMakerSpace/SIGHT-For-the-Blind
y descargar como archivo zip
Abra un proyecto existente (SIGHT) haciendo clic en Abrir uno existente Proyecto de Android Studio .
Localizar SIGHT Archivo de proyecto
Haga clic en Aceptar para abrir el proyecto.
Ejecute SIGHT en su Raspberry Pi
Pero necesitamos una conexión entre Android Things dispositivo ( Raspberry Pi ) con nuestro Android Studio para cargar y depurar nuestros programas.
Tenemos el ADB herramienta ( Puente de depuración de Android ). Actuará como un puente entre nuestra máquina Android (teléfono / cosas) y plataforma de desarrollo (Android Studio) y ayúdanos a cargar y depurar nuestro programa.
Entonces, a continuación, debemos configurar ADB entre Raspberry Pi (que se ejecuta en Android ) y Android Studio . En Windows, abra Android => SDK => Platform-tools.
SDK => Platform-tools ”width =” 600 ″ height =”337 ″>Puede ver el adb.exe archivo aquí, pero no podemos acceder a él directamente. Así que abre un símbolo del sistema o PowerShell y acceda a la carpeta y escriba el código en el símbolo del sistema o PowerShell .
adb connect
Obtuvimos la IP de RPi desde el primer paso. Y recibirá una respuesta después de que se establezca la conexión.
conectado a ip:5555
Ahora simplemente cargue el programa haciendo clic en el botón triangular verde.
Pulsa Ejecutar .
Puede ver la Raspberry Pi en la lista de dispositivos. Simplemente haga clic en Aceptar . para ejecutar nuestro programa.
Cableado Raspberry Pi
¡Es hora de conectar el circuito!
Aquí estamos usando un botón para activar la cámara para capturar la imagen.
no te olvides de conectar el módulo de la cámara Raspberry Pi y el auricular al raspberry Pi 3
Construimos nuestro propio sombrero Pi en un tablero pref, te recomendamos que lo hagas tú mismo.
El archivo Fritzing se adjunta en la sección de archivos adjuntos de este proyecto.
¡Probando todo!
Antes de montar todo en un gabinete, asegúrese de que todo funcione perfectamente.
Simplemente encienda su raspberry Pi3 y espere 5 segundos para cargar todo. Presione el botón para tomar una foto con la cámara y espere otro segundo. Puede escuchar lo que hay en esa imagen a través de sus auriculares o altavoz.
Si todo está perfecto, es hora de colocarlos en un estuche seguro para evitar daños accidentales.
Haciendo recinto
Este no es un paso importante. Si puedes hacer un cerramiento a tu propio estilo, será genial y lucirá genial.
Construimos un cerramiento simple, para colocar los circuitos de forma segura antes de montarlo en el vidrio. Conseguimos una caja de plástico de uso general en una tienda local cercana. Hice algunos cortes y agujeros para los puertos de la Raspberry Pi. Los pintamos con algunas pinturas en aerosol (pinturas en blanco y negro).
¡Y se ve hermosa!
Montaje en el vidrio
Tenemos un vaso en nuestro laboratorio. Afortunadamente, es el mejor vaso que podemos encontrar para hacer este proyecto perfecto.
Después de colocar todo sobre el vidrio, se ve genial. Usamos un banco de energía, que obtuvimos recientemente de Intel para alimentar la Raspberry Pi y sus circuitos.
Diseño conceptual
Hay muchas personas con discapacidad visual que esperan algo que les ayude a ser autosuficientes.
Entonces, nos gustaría hacer realidad este concepto. Diseñamos un par de conceptos de diseño en una herramienta CAD de modelado 3D.
Actualizaciones futuras
Altavoces conductores óseos
Un auricular no es cómodo de usar todo el tiempo y se ve extraño. Entonces, estamos investigando una solución mejor y minimalista. Finalmente llegamos a la conclusión de los altavoces conductores Bone. Los altavoces conductores óseos también ayudarán a quienes no pueden oír.
Mejor cámara
La cámara que usamos en este prototipo no es adecuada para fabricar un producto. Además, tiene algunas limitaciones como que no podemos usarlos en la noche o en lugares oscuros. Así que los estamos actualizando para que la cámara IR tenga una mejor resolución.
Vidrio cómodo
Un Glass normal no es muy cómodo cuando se trata del peso del hardware. Por eso, estamos diseñando e investigando rápidamente el vidrio más cómodo para la vista.
Ampliación de capacidades
También estamos desarrollando y optimizando el código fuente de la vista para manejar las capacidades de detección de la vista. También mejor desempeño en requisitos mínimos.
Administración de energía
Sight es un dispositivo portátil. Por eso nos preocupa la batería de respaldo de Sight. Vamos a desarrollar un cuadro de distribución de energía optimizado.
Demostración
Fuente: Para ciegos
Proceso de manufactura
- Una taxonomía para el IIoT
- Los 5 mejores sitios web para noticias RTLS
- Exprimir el valor de los datos para AI
- Habilitando el hardware para el metaverso
- AAEON:BOXER-8150AI, AI a la velocidad de la vista
- DHT Tiny Breakout para Raspberry Pi
- Los mejores accesorios para tu Raspberry Pi
- El reto del método 5S para la industria 4.0
- ¡Gracias por los recuerdos!
- Elegir los mejores amortiguadores para vehículos
- La sierra de cinta manual para cualquier ocasión