Uma Revisão Sistemática Sobre o Desenvolvimento de Ferramentas de Apoio a Língua de Sinais / A Systematic Review of the Development of Sign Language Support Tools
DOI:
https://doi.org/10.34117/bjdv6n7-727Keywords:
surdos, revisão sistemática da literatura, linguagem de sinais.Abstract
Várias pessoas possuem deficiência auditiva e a presença de intérpretes para linguagem de sinais em tempo real para todas as oportunidades de comunicação ainda é escarça. Para ajudar a resolver esse problema, vários estudos foram realizados e outros estão sendo desenvolvidos, objetivando o desenvolvimento de ferramentas para auxiliar na interpretação da linguagem de sinais para facilitar a comunicação de pessoas acometida por esta deficiência com indivíduos que não sabem se comunicar por meio da linguagem gestual. Nesse sentido, o uso de tecnologias voltadas para o público de pessoas surdas, torna-se uma forma de incluir essas pessoas cada vez mais na sociedade. Pensando nisso, este estudo realiza uma revisão sistemática sobre o desenvolvimento de ferramentas para o apoio a linguagem de sinais. Como resultado, foram identificados 31 trabalhos classificados de acordo com os critérios de inclusão e exclusão.
References
[AGENCIABRASIL] AgênciaBrasil. País tem 10,7 milhões de pessoa com deficiência auditiva, diz estudo. Disponível em https://agenciabrasil.ebc.com.br/geral/noticia/2019-10/brasil-tem-107-milhoes-de-deficientes-auditivos-diz-estudo. Acessado em 15 de julho de 2020.
[AGRAWAL and UROLAGIN. 2020] Tushar Agrawal e Siddhaling Urolagin. 2020. Tradutor de língua de sinais árabe de duas vias usando a arquitetura CNNLSTM e a PNL. Nos Anais da 2ª Conferência Internacional de 2020 sobre Engenharia e Tecnologia de Big Data ( BDET 2020 ). Association for Computing Machinery, Nova Iorque, NY, EUA, 96-101. DOI: https: //doi.org/10.1145/3378904.3378915
[AHIRE et al. 2015] P. G. Ahire, K. B. Tilekar, T. A. Jawake and P. B. Warale, "Two Way Communicator between Deaf and Dumb People and Normal People," 2015 International Conference on Computing Communication Control and Automation, Pune, 2015, pp. 641-644, doi: 10.1109/ICCUBEA.2015.131.
[AHMED et al. 2016] M. Ahmed, M. Idrees, Z. ul Abideen, R. Mumtaz and S. Khalique, "Deaf talk using 3D animated sign language: A sign language interpreter using Microsoft's kinect v2," 2016 SAI Computing Conference (SAI), London, 2016, pp. 330-335, doi: 10.1109/SAI.2016.7556002.
[CHAO et al. 2019] Huang Chao, Wang Fenhua e Zhang Ran. 2019. Reconhecimento da linguagem de sinais com base no CBAM-ResNet. Nos Anais da Conferência Internacional de 2019 sobre Inteligência Artificial e Manufatura Avançada ( AIAM 2019 ). Association for Computing Machinery, Nova York, NY, EUA, Artigo 48, 1–6. DOI: https: //doi.org/10.1145/3358331.3358379
[DABRE and DHOLAY. 2014] K. Dabre and S. Dholay, "Machine learning model for sign language interpretation using webcam images," 2014 International Conference on Circuits, Systems, Communication and Information Technology Applications (CSCITA), Mumbai, 2014, pp. 317-321, doi: 10.1109/CSCITA.2014.6839279.
[DONGDONG et al. 2019] Li Dongdong, Zhang Limin e Deng Xiangyang. 2019. Reconhecimento de gestos com base em rede neural convolucional multicanal. Nos Anais da 4ª Conferência Internacional de Matemática e Inteligência Artificial de 2019 ( ICMAI 2019 ). Association for Computing Machinery, Nova Iorque, NY, EUA, 5–9. DOI: https: //doi.org/10.1145/3325730.3325737
[EQAB and SHANACLEH. 2017] A. Eqab and T. Shanableh, "Android mobile app for real-time bilateral Arabic sign language translation using leap motion controller," 2017 International Conference on Electrical and Computing Technologies and Applications (ICECTA), Ras Al Khaimah, 2017, pp. 1-5, doi: 10.1109/ICECTA.2017.8251936.
[ESCUDEIRO et al. 2015] Paula Escudeiro1 , Nuno Escudeiro1 , Rosa Reis1 , Jorge Lopes1 , Marcelo Norberto1 , Ana Bela Baltasar1 , Maciel Barbosa2 , José Bidarra. “Virtual Sign – A Real Time Bidirectional Translator of Portuguese Sign Language”. 6th International Conference on Software Development and Technologies for Enhancing Accessibility and Fighting Infoexclusion (DSAI 2015).
[FM et al. 2015] FM d. P. Neto, LF Cambuim, RM Macieira, TB Ludermir, C. Zanchettin e EN Barros, "Extreme Aprendizado de Máquina para Tempo real Reconhecimento da Língua Brasileira de Sinais," 2015 IEEE Conferência Internacional sobre Sistemas, o Homem, e Cibernética , Kowloon, 2015, 1464-1469, doi: 10.1109 / SMC.2015.259
[GHANEM et al 2017] Sakher Ghanem, Christopher Conly e Vassilis Athitsos. 2017. Uma pesquisa sobre reconhecimento de linguagem de sinais usando smartphones. Nos Anais da 10ª Conferência Internacional sobre Tecnologias Avançadas Relacionadas a Ambientes Assistivos ( PETRA '17 ). Association for Computing Machinery, Nova Iorque, NY, EUA, 171–176. DOI: https: //doi.org/10.1145/3056540.3056549
[GHANEM et al. 2017] Sakher Ghanem, Christopher Conly e Vassilis Athitsos. 2017. Uma pesquisa sobre reconhecimento de linguagem de sinais usando smartphones. Nos Anais da 10ª Conferência Internacional sobre Tecnologias Avançadas Relacionadas a Ambientes Assistivos ( PETRA '17 ). Association for Computing Machinery, Nova Iorque, NY, EUA, 171–176. DOI: https: //doi.org/10.1145/3056540.3056549
[GHOTKAR et al. 2012] A. S. Ghotkar, R. Khatal, S. Khupase, S. Asati and M. Hadap, "Hand gesture recognition for Indian Sign Language," 2012 International Conference on Computer Communication and Informatics, Coimbatore, 2012, pp. 1-4, doi: 10.1109/ICCCI.2012.6158807.
[GRASIELLA et al. 2014] Sílvia Grasiella Moreira Almeida a,b , Frederico Gadelha Guimarães c,? , Jaime Arturo Ramírez c, “Feature extraction in Brazilian Sign Language Recognition based on phonological structure and using RGB-D sensors”. 2014.
[HARNANDEZ. 2005] Jose L. Hernandez-Rebollar. 2005. Phraselator americano de linguagem gestual orientado a gestos. Em Anais da 7ª conferência internacional sobre interfaces multimodais ( ICMI '05 ). Association for Computing Machinery, Nova Iorque, NY, EUA, 288–292. DOI: https: //doi.org/10.1145/1088463.1088512
[HUANG et al. 2015] Jie Huang, Wengang Zhou, Houqiang Li and Weiping Li, "Sign Language Recognition using 3D convolutional neural networks," 2015 IEEE International Conference on Multimedia and Expo (ICME), Turin, 2015, pp. 1-6, doi: 10.1109/ICME.2015.7177428.
IBGE. Censo Demográfico 2010. Rio de Janeiro - Rj: Ibge, 2010. 211 p.
[JACOBS et al. 2016] Kurt Jacobs, Mehrdad Ghasiazgar, Isabella Venter e Reg Dodds. 2016. Reconhecimento por gestos manuais de formas das mãos em orientações variadas, usando o Deep Learning. Em Anais da Conferência Anual do Instituto de cientistas da computação e tecnólogos da informação Sul-Africano ( SAICSIT '16 ). Association for Computing Machinery, Nova York, NY, EUA, Artigo 17, 1–9. DOI: https: //doi.org/10.1145/2987491.2987524
[JIN et al. 2019] Jin Li, Jishuo Yan, Guangxu Li, Liyuan Wang e Fan Yang. 2019. Reconhecimento de gestos com base em RGB-D para expressão de letras. Nos Anais da 4ª Conferência Internacional de 2019 sobre Processamento de Imagem e Sinal Biomédico (ICBIP 2019) ( ICBIP '19 ). Association for Computing Machinery, Nova Iorque, NY, EUA, 113-116. DOI: https: //doi.org/10.1145/3354031.3354044
[KHAN et al. 2019] S. A. Khan, A. D. Joy, S. M. Asaduzzaman and M. Hossain, "An Efficient Sign Language Translator Device Using Convolutional Neural Network and Customized ROI Segmentation," 2019 2nd International Conference on Communication Engineering and Technology (ICCET), Nagoya, Japan, 2019, pp. 152-156, doi: 10.1109/ICCET.2019.8726895.
[Kitchenham 2004] Kitchenham, B. (2004). Procedures for performing systematic reviews.
[KUMAR et al. 2018] S. S Kumar, T. Wangyal, V. Saboo and R. Srinath, "Time Series Neural Networks for Real Time Sign Language Translation," 2018 17th IEEE International Conference on Machine Learning and Applications (ICMLA), Orlando, FL, 2018, pp. 243-248, doi: 10.1109/ICMLA.2018.00043.
[KUMAR. 2017] N. Kumar, "Sign language recognition for hearing impaired people based on hands symbols classification," 2017 International Conference on Computing, Communication and Automation (ICCCA), Greater Noida, 2017, pp. 244-249, doi: 10.1109/CCAA.2017.8229808.
[LI et al. 2010] Yun Li, Xiang Chen, Jianxun Tian, Xu Zhang, Kongqiao Wang e Jihai Yang. 2010. Reconhecimento automático de subpalavras de linguagem de sinais com base em acelerômetro portátil e sensores EMG. Na Conferência Internacional sobre Interfaces Multimodais e no Workshop de Aprendizado de Máquina para Interação Multimodal ( ICMI-MLMI '10 ). Association for Computing Machinery, Nova York, NY, EUA, Artigo 17, 1–7. DOI: https: //doi.org/10.1145/1891903.1891926
[LI et al. 2011] K. F. Li, K. Lothrop, E. Gill and S. Lau, "A Web-Based Sign Language Translator Using 3D Video Processing," 2011 14th International Conference on Network-Based Information Systems, Tirana, 2011, pp. 356-361, doi: 10.1109/NBiS.2011.60.
[LUI et al. 2016] T. Liu, W. Zhou and H. Li, "Sign language recognition with long short-term memory," 2016 IEEE International Conference on Image Processing (ICIP), Phoenix, AZ, 2016, pp. 2871-2875, doi: 10.1109/ICIP.2016.7532884.
[MARTINEZ et al. 2002] A. M. Martinez, R. B. Wilbur, R. Shay and A. C. Kak, "Purdue RVL-SLLL ASL database for automatic recognition of American Sign Language," Proceedings. Fourth IEEE International Conference on Multimodal Interfaces, Pittsburgh, PA, USA, 2002, pp. 167-172, doi: 10.1109/ICMI.2002.1166987.
[MOHANDES et al. 2014] M. Mohandes, M. Deriche and J. Liu, "Image-Based and Sensor-Based Approaches to Arabic Sign Language Recognition," in IEEE Transactions on Human-Machine Systems, vol. 44, no. 4, pp. 551-557, Aug. 2014, doi: 10.1109/THMS.2014.2318280.
[NETO et al. 2015] F. M. d. P. Neto, L. F. Cambuim, R. M. Macieira, T. B. Ludermir, C. Zanchettin and E. N. Barros, "Extreme Learning Machine for Real Time Recognition of Brazilian Sign Language," 2015 IEEE International Conference on Systems, Man, and Cybernetics, Kowloon, 2015, pp. 1464-1469, doi: 10.1109/SMC.2015.259.
[OHKI et al. 1994] M. Ohki, H. Sagawa, T. Sakiyama, E. Oohira, H. Ikeda e H. Fujisawa. 1994. Reconhecimento e síntese de padrões para o sistema de tradução em linguagem de sinais. Em Anais da primeira conferência anual da ACM sobre tecnologias assistivas ( Assets '94 ). Association for Computing Machinery, Nova York, NY, EUA, 1–8. DOI: https: //doi.org/10.1145/191028.191030
[OLIVEIRA et al. 2019] T. Oliveira, P. Escudeiro, N. Escudeiro, E. Rocha and F. M. Barbosa, "Automatic Sign Language Translation to Improve Communication," 2019 IEEE Global Engineering Education Conference (EDUCON), Dubai, United Arab Emirates, 2019, pp. 937-942, doi: 10.1109/EDUCON.2019.8725244.
[PRATIM et al. 2015] Siddhartha Pratim Dasa , Anjan Kumar Talukdarb , Kandarpa Kumar Sarma, “Sign Language Recognition using Facial Expression”. Peer-review under responsibility of organizing committee of the Second International Symposium on Computer Vision and the Internet, 2015.
RAPOSO, Valdilene de Carle. A Inclusão do Deficiente Auditivo na Escola. Disponível em: <https://www.portaleducacao.com.br/conteudo/artigos/educacao/a-inclusao-do-deficiente-auditivo-na-escola/13898>. Acesso em: 07 out. 2019.
[SANTHALINGAM et al. 2020] Panneer Selvam Santhalingam, Al Amin Hosain, Ding Zhang, Parth Pathak, Huzefa Rangwala e Raja Kushalnagar. 2020. MmASL: Reconhecimento de gestos ASL independentes do ambiente, usando sinais de ondas milimétricas de 60 GHz. Proc. ACM Interact. Mob. Technol Ubíquo Usável. 4, 1, artigo 26 (março de 2020), 30 páginas. DOI: https: //doi.org/10.1145/3381010.
SILVA, Lúcia Marta Giunta da et al. COMUNICAÇÃO NÃO-VERBAL: REFLEXÕES ACERCA DA LINGUAGEM CORPORAL. Rev. Latino-am.enfermagem, Ribeirão Preto, v. 4, n. 8, p.52-58, ago. 2000.
[SHANGEETHA et al. 2012] R. K. Shangeetha., V. Valliammai. and S. Padmavathi., "Computer vision based approach for Indian Sign Language character recognition," 2012 International Conference on Machine Vision and Image Processing (MVIP), Taipei, 2012, pp. 181-184, doi: 10.1109/MVIP.2012.6428790.
[TRIPATHI et al. 2015] Kumud Tripathi?, Neha Baranwal and G. C. Nandi, “Continuous Indian Sign Language Gesture Recognition and Sentence Formation”. Eleventh International Multi-Conference on Information Processing-2015 (IMCIP-2015).
