PROTOCOLO PARA CONSTRUÇÃO DE UMA BASE DE SINAIS DA LÍNGUA BRASILEIRA DE SI-NAIS UTILIZANDO SENSORES RGB-D EM PLATAFORMA DE SOFTWARE LIVRE

Sílvia Grasiella Moreira Almeida, Andréia Chagas Rocha Toffolo, Frederico Gadelha Guimarães, Cristiano Leite de Castro

Resumo


Apresentamos, neste artigo, a proposta já em desenvolvimento de construção de uma base com sinais da Língua Brasileira de Sinais a partir de recursos computacionais baseados em software livre. A etapa de criação descrita aqui tem por foco a definição de um protocolo consistente, que permitirá que sinais de Libras possam ser adicionados à base de forma normatizada. O protocolo deve versar sobre questões que envolvam a língua em si, a tecnologia utilizada para a gravação, e em técnicas que envolvam a própria gravação. Uma vez definido o protocolo, sinais em Libras serão gravados utilizando dois sensores RGB-D. Utilizaremos também uma câmera digital profissional baseada em sensor de imagem CMOS para gravar os sinais sob a mesma condição dos sensores RGB-D. Para operação dos sensores RGB-D, será utilizado o framework OpenNI, que é um SDK (Software Development Kit) de código aberto para desenvolver bibliotecas e aplicações de sensoriamento com dispositivos 3D. A importância desta base, quando pronta, é ser utilizada para testar a eficácia de sistemas computacionais baseados tanto em recursos de software livre quanto proprietários. A base com sinais de Libras e seu respectivo protocolo de criação ficarão disponíveis para uso de toda a comunidade acadêmica.

Link da apresentação: http://textolivre.org/wiki/index.php?title=XIVevidosol/Toffolo


Palavras-chave


Reconhecimento de sinais de Libras, protocolo de criação de base de dados, visão computacional.

Texto completo:

PDF

Referências


ALMEIDA, S. G. M. Extração de Características em Reconhecimento de Parâmetros Fonológicos da Língua Brasileira de Sinais utilizando Sensores RGB-D. Tese de Doutorado, Universidade Federal de Minas Gerais, 2014.

ARAN, O.; AKARUN, L. A multi-class classification strategy for Fisher scores: Application to signer independent sign language recognition. Pattern Recognition, v. 43, n. 5, p. 1776–1788, 2010.

CAPOVILLA, F. C.; RAPHAEL, W. D.; MAURÍCIO, A. C. L. Novo Deit-Libras: Dicionário Enciclopédico Ilustrado Trilíngue da Língua Brasileira de Sinais (Libras) baseado em Linguística e Neurociências Cognitivas, Volume I: Sinais de A a H. [S.l.]: Edusp, 2012.

CAPOVILLA, F. C.; RAPHAEL, W. D.; MAURÍCIO, A. C. L. Novo Deit-Libras: Dicionário Enciclopédico Ilustrado Trilíngue da Língua Brasileira de Sinais (Libras) baseado em Linguística e Neurociências Cognitivas, Volume II: Sinais de I a Z. [S.l.]: Edusp, 2012.

CARIDAKIS, G. et al. Non parametric, self organizing, scalable modeling of spatiotemporal inputs: The sign language paradigm. Neural Networks, v. 36, p. 157–166, 2012.

GEETHA, M.; MANJUSHA, U. C. A vision based recognition of Indian Sign Language alphabets and numerals using B-spline approximation. International Journal on Computer Science & Engineering, v. 4, n. 3, 2012.

KARAMI, A.; ZANJ, B.; SARKALEH, A. K. Persian Sign Language (PSL) recognition using Wavelet Transform and Neural Networks. Expert Systems with Applications, v. 38, n. 3, p. 2661–2667, 2011.

LAHAMY, H.; LICHTI, D. D. Towards real-time and rotation-invariant American Sign Language alphabet recognition using a range camera. Sensors, v. 12, n. 11, 2012.

LEWIS, M. P. et al. Ethnologue: Languages of the world. [S.l.]: SIL international Dallas, TX, 2009.

PHADTARE, L.; KUSHALNAGAR, R.; CAHILL, N. Detecting hand-palm orientation and hand shapes for sign language gesture recognition using 3D images. In: Western New York Image ProcessingWorkshop. [S.l.: s.n.], 2012. (WNYIPW 2012), p. 29–32.

REZENDE, T.M. Aplicação de Técnicas de Inteligência Computacional para Análise da Expressão Facial em Reconhecimento de Sinais de Libras. Dissertação de Mestrado. Mestrado, Universidade Federal de Minas Gerais, 2016.

QUADROS, R. M.; OLIVEIRA, J.S.; SANTOS, P.R.C.; MIRANDA, R.D.; ID - Identificador de Sinais. Disponível em http://www.idsinais.libras.ufsc.br/index.php. Acesso em Fevereiro de 2017.


Apontamentos

  • Não há apontamentos.


ISSN 2317-0239 (Eletrônico)

Licença Creative Commons

Esta obra está licenciada com uma Licença Creative Commons Atribuição 4.0 Internacional.