Documentos de Académico
Documentos de Profesional
Documentos de Cultura
TITULO DE LA TESIS
PRESENTADO POR
LAMBAYEQUE, PERÚ
2017
FACULTAD DE CIENCIAS FÍ SICAS Y MATEMÁTICAS ESCUELA
Asesor:
2017
UNIVERSIDAD NACIONAL PEDRO RUlZ GALLO
TITULO DE LA TESIS
Diseño y construcción de un prototipo de sistema electrónico para
conversión de lenguaje de señas a mensajes de voz para la
comunicación de personas sordomudas, en la ciudad de Chiclayo.
Altamirano
¡&J.
lng.Carlos Leonartlo Oblitas Vera
SECRETARIO
LAMBAYEQUE, PERÚ
2017
A Dios.
Por haberme dado la vida y fortaleza para levantarme ante las pruebas
diarias, así como permitirme el llegar hasta este momento tan importante
de mi formación profesional.
A mi abuelito Heriberto.
Por inculcarme la importancia del estudio y su ejemplo de trabajo con
dedicación.
A mi abuelita Sirena.
Por su cariño,cuidado y preocupación a pesar de la distancia.
A mi Papá Homero.
Por su esfuerzo constante para que nada me falte y sus ganas de verme
realizado un buen profesional.
A mi mamá Zenaida.
Por su ejemplo de superación a pesar de los obstáculos y enseñarme que
Uno es lo que se propone ser en la vida.
A mis hermanos Lessly, Yomira y Eduar
Por verme como un ejemplo de estudio,esfuerzo y sobre todo de amor a
Dios.
A mi comunidad Jóvenes de Bodas de Cana-Barsallo.
Por enseñarme que "Nadie que haya puesto su confianza en Dios se ha
visto defraudado..."
A mis amigos y personas que siempre confiaron en mi.
Porque a lo largo de mi desarrollo como estudiante y futuro profesional
estuvieron y seguirán a mi lado...
Lambayeque 2017
V
Agradecimientos
Lambayeque 2017
VII
Resumen
IX
Abstract
I n this thesis has been designed a prototype electronic system for conver-
sion From sign language to voice messages to facilitate the process Of
communication of deaf people with their environment without the need
That they know the sign language.
Through a study of Flex sensors, for the acquisition of Data and taking
into account some characteristics of the optical fiber, was Of inspiration for
the creation of Flex Photo Sensors, produced at Low cost, with a high level
of operation.
XI
Índice Abreviado
Resumen IX
Abstract XI
Índice Abreviado XIII
1. Antecedentes 1
1.1. Situación Problemática 1
1.2. Estadísticas 4
1.3. Formulación del Problema 7
1.4. Justificación e Importancia 8
1.5. Objetivos de la Investigación 8
1.6. Hipotesis 8
2. Marco Teorico 9
2.1. Lenguaje de señas 9
2.2. Consejo Nacional para la Integración de la Persona con Dis-
capacidad (CONADIS) 14
3. Diseño y Construcción de Hardware 17
3.1. Componentes Electrónicos 17
3.2. Diagrama de Bloques 21
3.3. Conexión de Hardware 22
3.4. Diseño de placa electronica 24
3.5. Implementación del Guante 26
3.6. Costo de Diseño 34
XIII
XIV Índice Abreviado
4. Diseño de Software 37
4.1. Filtro de Kalman 37
4.2. Redes Neuronales Artificiales 39
4.3. Lenguajes de Programación 52
4.4. Reproducción de Mensajes de voz 53
5. Simulación y Pruebas de Desempeño 55
5.1. Métodos de adquisición de datos 55
5.2. Letras Y Palabras a Entrenar 58
5.3. Precisión del Sistema 63
6. Conclusiones, Limitaciones y Recomendaciones 65
6.1. Conclusiones 65
6.2. Limitaciones 66
6.3. Recomendaciones 66
Apéndice A.Lenguaje de señas peruano 67
Apéndice B.Componentes Electrónicos 81
Índice de Figuras 93
Índice de Tablas 97
Bibliografía 99
Índice
Resumen IX
Abstract XI
Índice Abreviado XIII
1. Antecedentes 1
1.1. Situación Problemática 1
1.2. Estadísticas 4
1.2.1. Estadísticas de discapacidades en la región 4
1.2.2. Estadísticas personas que usan lenguaje alternativo
en la región Lambayeque 5
1.2.3. Estadísticas de los Diferentes Tipos de uso de Len-
guaje alternativo en la región Lambayeque 6
1.3. Formulación del Problema 7
1.4. Justificación e Importancia 8
1.5. Objetivos de la Investigación 8
1.5.1. Objetivo General 8
1.5.2. Objetivos Específicos 8
1.6. Hipotesis 8
2. Marco Teorico 9
2.1. Lenguaje de señas 9
2.1.1. Origen del lenguaje de señas 9
2.1.2. Lengua de señas peruana (LSP) 11
Alfabeto de lenguaje de señas peruana (ALSP) 12
XV
XVI Índice
4.2.1. Características 40
4.2.2. Aplicaciones 41
Reconocimiento de Imágenes 41
Reconocimiento de Sonido 41
Predicción de datos Estadísticos 43
Aproximación de Funciones 44
4.2.3. RNA de Retropropagación (Backpropagation) 44
Función de activación Logarítmica Sigmoidea (Logsig) 45
4.2.4. Lectura de Datos 46
4.2.5. Arquitectura de la Red Neuronal Artificial 47
4.2.6. Entrenamiento 48
4.2.7. Lectura de Datos en tiempo Real 50
4.3. Lenguajes de Programación 52
4.4. Reproducción de Mensajes de voz 53
5. Simulación y Pruebas de Desempeño 55
5.1. Métodos de adquisición de datos 55
5.1.1. Lectura de Sensores 55
Prueba de funcionamiento de sensores Foto-Flex 55
Lectura de sensores utilizados para establecer pa-
trones de entrada 56
5.1.2. Adquisición de patrones de entrada 58
Tiempo de lectura por muestra 58
5.2. Letras Y Palabras a Entrenar 58
Patrones de entrada para el entrenamiento 58
5.3. Precisión del Sistema 63
6. Conclusiones, Limitaciones y Recomendaciones 65
6.1. Conclusiones 65
6.2. Limitaciones 66
6.3. Recomendaciones 66
Apéndice A.Lenguaje de señas peruano 67
Apéndice B.Componentes Electrónicos 81
Índice de Figuras 93
Índice de Tablas 97
XVIII Índice
Bibliografía 99
1 Antecedentes
Albert Einstein
1
2 Capítulo 1. Antecedentes
1.2 Estadísticas
1.6 Hipotesis
Si se desarrolla un prototipo de sistema electrónico para conversión de
lenguaje de señas a mensajes de voz, amigable con el usuario y preciso,
entonces facilitara la comunicación de personas sordomudas en su entorno
dando autonomía para una comunicación efectiva.
2 Marco Teorico
William Shakespeare
9
10 Capítulo 2. Marco Teorico
Figura 2.2 Imagen obtenida del curso de lenguaje de Señas, febrero 2012.
2.1 Lenguaje de señas 13
Figura 2.3 Imagen obtenida del curso de lenguaje de Señas, febrero 2012.
14 Capítulo 2. Marco Teorico
2.2.1 Funciones
Isaac Asimov
17
18 Capítulo 3. Diseño y Construcción de Hardware
3.1.4 MPU-6050
Arduino MPU6050
Nano
A4 SDA
A5 SCL
5V VCC
GND GND
Arduino HC-06
Nano
TX1 RXD
RX0 TXD
5V VCC
GND GND
3.5.1 Guante
Pulgar 13 cm
Indice 14.5 cm
Medio 14.5 cm
Anular 12 cm
Meñique 12 cm
Una vez obtenido las medidas se procedió a encintar, para que toda la luz
que emitirá el diodo Led no salga y evitar que la luz que hay en el exterior
ingrese a través de la manguera por ser transparente y perturbe la lectura
de señales. Ver Figura 3.14
28 Capítulo 3. Diseño y Construcción de Hardware
Elaboración de cubierta
Para fijar los sensores Foto-Flex al guante es necesario colocarlos dentro
de una cubierta de tela de nombre Sesgo de Buzo, el cual se obtuvo de una
costurería (Ver Figura 3.17) y las medidas dependerán del tamaño de los
dedos (Ver Tabla 3.3)
Implementación en Guante
Materiales Costos
Guante de Tela 6 soles
Sesgo de Buzo 2 soles
Pegamentos 5 soles
TOTAL 13 SOLES
36 Capítulo 3. Diseño y Construcción de Hardware
Componentes Electrónicos
Componentes Costos
Resistencias SMD 5 soles
MPU 6050 25 soles
HC 06 25 soles
Arduino Nano 30 soles
2 Baterias recargables 40 soles
Baquelita,Jumpers y Otros 15 soles
TOTAL 140 SOLES
37
38 Capítulo 4. Diseño de Software
Para una mejor comprensión acerca del funcionamiento del filtro de kalman,
a continuación se mostrará un ejemplo haciendo uso de una señal senoidal.
4.2.1 Características
4.2.2 Aplicaciones
Reconocimiento de Imágenes
En clasificación de objetos a la RNA se le presenta una imagen(patrones
de entrada),con los objetos a los cuales se desea clasificar; a través del
aprendizaje supervisado se le asigna una salida deseada a una entrada.
Reconocimiento de Sonido
El proceso de reconocimiento de sonidos empieza con la digitalización de
voz; la RNA se encargara de hacer un calculo de características espectrales
de sonido para luego clasificar cada señal de voz.
42 Capítulo 4. Diseño de Software
Aproximación de Funciones
Las RNA permiten aproximar funciones a partir de datos de entrada. Re-
conoce patrones parecidos en diferentes datos de entrada; por lo que estos
sistemas permiten dar solución a problemas de difícil tratamiento. Este tipo
de tratamiento de señales es utilizado en clasificación de datos.
a = logsign (4.2)
En la figura 4.13 se observa como la función adopta valores muy próximos
a cero cuando X es pequeño, pero al aumentar el valor en el eje de las
abscisas la función pasa a ser creciente. Al principio la pendiente de la
función crece hasta llegar a un punto de inflexión, momento en el cual la
pendiente comienza a descender hasta llegar a cero, a partir del cual la
función vuelve a dar un valor constante e igual a uno. [Erraez, ]
4.2.6 Entrenamiento
Foros de consulta
Una vez creado los archivos, estos pueden ser llamados desde el software
de procesamiento para ser reproducido de acuerdo a lo que la red neuronal
interprete.
enzo ferrari
55
56 Capítulo 5. Simulación y Pruebas de Desempeño
Como se observó en las figuras 5.5, 5.6, 5.7 y 5.8 mantienen mucha
diferencia entre señas. En cada imagen se observan 5 muestras de cada letra.
Se logra apreciar que se asemejan una de otra debido a que las señas varían
muy poco pues pertenecen a la misma seña. Esta información es de gran
5.2 Letras Y Palabras a Entrenar 61
En las figuras 5.9, 5.10, 5.11 y 5.12 se muestra los datos de las palabras
que se usaran en este prototipo. El sensor MPU56050 es el que marca la
diferencia en el reconocimiento de palabras, pues indica el posicionamiento
de las manos, por ejemplo, el "Gracias" es palma extendida en una posición
determinada; sin este sensor en cualquier posición teniendo palma extendida
seria reconocida como un "Gracias".
LEYENDA
1: LETRA ACERTADA.
0: LETRA ERRADA.
64 Capítulo 5. Simulación y Pruebas de Desempeño
6.1 Conclusiones
1. Se concluyó que el prototipo de sistema electrónico para conversión
de lenguaje de señas a mensajes de voz, amigable con el usuario
y preciso, facilita la comunicación de personas sordomudas en su
entorno, dando autonomía para una comunicación efectiva.
2. Los sensores Foto-Flex empleados durante el desarrollo del proyecto
de tesis cumplieron las expectativas requeridas de generar señales.
3. La Red neuronal de Retropropagación clasificó de manera correcta
las señales provenientes de los sensores.
4. El sistema electrónico respondió correctamente ante cada mensaje de
voz pregrabado.
5. La frecuencia de muestreo de los sensores fue la correcta, evitando
así la sobrecarga del sistema y permitiendo una buena adquisición de
las señales para un buen procesamiento de la información.
65
66 Capítulo 6. Conclusiones, Limitaciones y Recomendaciones
6.2 Limitaciones
1. El sistema electrónico se limita a reconocer un cierto numero de señas
debido a que solo es un guante prototipo y para algunos casos se hace
necesario la lectura de ambas manos.
2. El prototipo de guante electrónico no puede alejarse más de 10m del
computador o se perderá la comunicación; debido a que la comunica-
ción bluetooth solo alcanza esa distancia máxima.
6.3 Recomendaciones
Se recomienda los siguiente:
67
Apéndice B
Componentes Electrónicos
81
COMPONENTESYACCESORIOS. FOTORRESISTENCIA LDR 4,3mm x Ø 5,1mm
? ? Los nombres registrados y marcas que se citan son propiedad de sus respectivos titulares.
DESCRIPCION GENERAL.
Fotorresistencia o resistencia dependiente de la luz, consistente en una célula de Sulfuro de Cadmio, altamente estable, encapsulada con una resina epoxi transparente, resitente a la
humedad. La respuesta espectral es similar a la del ojo humano. Su nivel de resistencia aumenta cuando el nivel de luz disminuye.
Aplicaciones: Control de contraste en televisores y monitores, control automático de la iluminación en habitaciones, juguetes y juegos electrónicos, controles industriales, interruptores
crepusculares, boyas y balizas de encendido automático, auto-flash, etc...
CARACTERÍSTICAS TÉCNICAS.
Modelo Valores máximos Características a 25ºC (nota E)
Tensión a 25ºC Potencia disipable Temperatura ambiente Resistencia (notaA) ? (notaC) Tiempos de respuesta a 10 lx (notaD) Respuesta espectral
10 lux (2856K) 0 lux (notaB) 100-10 lx t. subida t. bajada (pico)
(Vdc) (mW) (ºC) Min.(k ? ) Max.(k? ) Min.(M? ) (M? ) (ms) (ms) (nm) .
Notas: A) Medido con una fuente luminosa formada por una lámpara de K-ohms
tungsteno, trabajando a una temperatura de color de 2856K. 1000
B)Medición efectuada 10 segundos después de retirar una iluminación
incidente de 10 lux. (%)
C) Sensibilidad entre 10 y 100 lux, dada por: 4,3 150 100
Ø 5,1 125
? = log(R100)-log(R10) 100
log(E100)-log(E10) 75
60
donde R100, R10 son las resistencias a 100 y 10 lux respectivamente, y E100, Epoxi en los terminales -20 0 20 40 60 80 (ºC) 10
E10 las iluminancias de 100 y 10 lx respectivamente. máximo 3mm 2,0 Variación de la resistencia de
D) Tiempo de subida es el tiempo necesario para alcanzar el 63% del nivel de 26 min. la célula iluminada
saturación. Tiempo de bajada es el necesario para que la célula alcance el Ø 0,5 en función de la temperatura
37% desde el nivel saturación.
1
E) Todas las características están medidas con la célula LDR expuesta a la luz 3,4 1 10 100 lux
(100-500 lux) durante 1 o 2 horas. Cotas en milímetros Resistencia de la célula en función de la iluminancia
CONSIDERACIONES.
Este componente está destinado para su uso por parte de profesionales, o usuarios con un nivel técnico o conocimientos suficientes, que les permita desarrollar por sí mismos los proyectos o
aplicaciones deseados. Por este motivo no se facilitará asistencia técnica sobre problemas de implementación del citado componente en las aplicaciones en las que sea empleado.
Para cualquier problema relativo al funcionamiento del producto (excluidos los problemas de aplicación), póngase en contacto con nuestro departamento técnico. Fax 93 432 29 95.
Correo electrónico: sat@fadisel.com. La documentación técnica de este producto responde a una transcripción de la proporcionada por el fabricante.
Los productos de la família "Componentes" de Cebek disponen de 1 año de garantía a partir de la fecha de compra. Quedan excluidos el trato o manipulación incorrectos.
Disponemos de más productos que pueden interesarle, visítenos en: www.fadisel.com ó SOLICITE GRATUITAMENTE nuestro catálogo.
Rev. Full0041 1
Technical Data Sheet
3 mm Round LED (T-1)
204-15UTC/S400-X9
Features
․Popular T-1 colorless 3mm package.
․High luminous power.
․Typical chromaticity coordinates x=0.29, y=0.28
according to CIE1931.
․Bulk, available taped on reel.
․Pb free.
․ESD-withstand voltage: up to 4KV
․The product itself will remain within RoHS compliant version.
Descriptions
․The series is designed for application required
high luminous intensity.
․The phosphor filled in the reflector converts the
blue emission of InGaN chip to ideal white.
Applications
․Outdoor Displays
․Optical Indicators
․Backlighting
․Marker Lights
Package Dimensions
Notes:
1.All dimensions are in millimeters, and tolerance is 0.25mm except being specified.
2.Lead spacing is measured where the lead emerges from the package.
3.Protruded resin under flange is 1.5mm Max. LED.
Absolute Maximum Ratings (Ta=25℃)
Parameter Symbol Rating Unit
Continuous Forward Current IF 25 mA
Peak Forward Current(Duty /10 @ 1KHZ) IFP 100 mA
Reverse Voltage VR 5 V
Operating Temperature Topr -40 ~ +85 ℃
Coordinates
y ------ -- 0.28 --
Forward Current(mA)
Relative Intensity(a.u.)
0.8 20
0.6
15
0.4
10
0.2
5
0
0.0 2.0 2.5 3.0 3.5 4.0 4.5
350 400 450 500 550 600 650 700 750 800
Relative Intensity vs. Forward Current Forward Current vs. Ambient Temp.
1.5 30
Relative Intensity(a.u.)
25
Forward Current(mA)
1.0 20
15
0.5 10
0
0.0 0 20 40 60 80 100
0 5 10 15 20 25
O
Forward Current(mA) Ambient Temperature Ta( C)
Chromaticity Coordinate vs. Forward Current Relative Intensity vs. Angle Displacement
0.300
O O O O
90 60 30 0 10O O
20
Relative Intensity(a.u.)
x 1.0 O
0.290 30
Relative Luminusity
O
40
O
y 50
0.280 O
60
0.5
O
70
0.270
O
80
O
0.260 0 90
0 10 20 30 40 50 0 0.5 1.0
User Manual
http://creativecommons.org/licenses/by-sa/2.5/
More information:
!
D1/TX (1) (30) VIN
D0/RX (2) (29) GND
RESET (3) (28) RESET
GND (4) (27) +5V
D2 (5) (26) A0
D3 (6) (25) A1
D4 (7) (24) A2
D5 (8) (23) A3
D6 (9) (22) A4
D7 (10) (21) A5
D8 (11) (20) A6
D9 (12) (19) A7
D10 (13) (18) AREF
D11 (14) (17) 3V3
D12 (15) (16) D13
!
!
!
!
!
!
Arduino Nano Mechanical Drawing
!
Arduino Nano Bill of Material
Item!Number! Qty.! Ref.!Dest.! Description! Mfg.!P/N! MFG! Vendor!P/N! Vendor!
Capacitor,!0.1uF!50V!10%!
1! 5! C1,C3,C4,C7,C9! Ceramic!X7R!0805! C0805C104K5RACTU! Kemet! 80"C0805C104K5R! Mouser!
Capacitor,!4.7uF!10V!10%!
2! 3! C2,C8,C10! Tantalum!Case!A! T491A475K010AT! Kemet! 80"T491A475K010! Mouser!
Capacitor,!18pF!50V!5%!
3! 2! C5,C6! Ceramic!NOP/COG!0805! C0805C180J5GACTU! Kemet! 80"C0805C180J5G! Mouser!
4! 1! D1! Diode,!Schottky!0.5A!20V! MBR0520LT1G! ONSemi! 863"MBR0520LT1G! Mouser!
5! 1! J1,J2! Headers,!36PS!1!Row! 68000"136HLF! FCI! 649"68000"136HLF! Mouser!
Connector,!Mini"B!Recept!
6! 1! J4! Rt.!Angle! 67503"1020! Molex! 538"67503"1020! Mouser!
7! 1! J5! Headers,!72PS!2!Rows! 67996"272HLF! FCI! 649"67996"272HLF! Mouser!
LED,!Super!Bright!RED!
100mcd!640nm!120degree!
8! 1! LD1! 0805! APT2012SRCPRV! Kingbright! 604"APT2012SRCPRV! Mouser!
LED,!Super!Bright!GREEN!
50mcd!570nm!110degree!
9! 1! LD2! 0805! APHCM2012CGCK"F01! Kingbright! 604"APHCM2012CGCK! Mouser!
LED,!Super!Bright!ORANGE!
160mcd!601nm!110degree!
10! 1! LD3! 0805! APHCM2012SECK"F01! Kingbright! 04"APHCM2012SECK! Mouser!
LED,!Super!Bright!BLUE!
80mcd!470nm!110degree!
11! 1! LD4! 0805! LTST"C170TBKT! Lite"On!Inc! 160"1579"1"ND! Digikey!
Resistor!Pack,!1K!+/"5%!
12! 1! R1! 62.5mW!4RES!SMD! YC164"JR"071KL! Yageo! YC164J"1.0KCT"ND! Digikey!
Resistor!Pack,!680!+/"5%!
13! 1! R2! 62.5mW!4RES!SMD! YC164"JR"07680RL! Yageo! YC164J"680CT"ND! Digikey!
Switch,!Momentary!Tact!
14! 1! SW1! SPST!150gf!3.0x2.5mm! B3U"1000P! Omron! SW1020CT"ND! Digikey!
IC,!Microcontroller!RISC!
16kB!Flash,!0.5kB!EEPROM,!
15! 1! U1! 23!I/O!Pins! ATmega168"20AU! Atmel! 556"ATMEGA168"20AU! Mouser!
IC,!USB!to!SERIAL!UART!28!
16! 1! U2! Pins!SSOP! FT232RL! FTDI! 895"FT232RL! Mouser!
IC,!Voltage!regulator!5V,!
17! 1! U3! 500mA!SOT"223! UA78M05CDCYRG3! TI! 595"UA78M05CDCYRG3! Mouser!
Cystal,!16MHz!+/"20ppm!
18! 1! Y1! HC"49/US!Low!Profile! ABL"16.000MHZ"B2! Abracon! 815"ABL"16"B2! Mouser!
Índice de Figuras
93
94 Índice de Figuras
97
Bibliografía
99
100 Bibliografía