Hand pose estimation and movement analysis for occupational therapy (2021)
- Authors:
- Autor USP: CEJNOG, LUCIANO WALENTY XAVIER - IME
- Unidade: IME
- Sigla do Departamento: MAC
- DOI: 10.11606/T.45.2021.tde-16022022-161906
- Subjects: VISÃO COMPUTACIONAL; BIOMECÂNICA; GEOMETRIA COMPUTACIONAL; TERAPIA OCUPACIONAL
- Keywords: Computer vision; Estimativa de pose de mão; Hand pose estimation; Occupational therapy
- Agências de fomento:
- Language: Inglês
- Abstract: Estimativa de pose de mão é um problema considerado complexo dentro da área de visão computacional com uma vasta gama de aplicações, especialmente na área de interface humano- computador. Com a evolução do estado-da-arte em técnicas de aprendizado profundo e com a popularização de sensores 3 de baixo custo, o estado-da-arte atual do problema vem se atualizando continuamente e muitos métodos novos têm sido propostos nos últimos anos. Esses métodos em sua maioria são baseados no uso de grandes volumes de dados para treinamento, e alcançam resultados cada vez melhores nas bases de dados padronizadas, como NYU, ICVL e HANDS17. Uma das aplicações que se beneficiaria do uso de visão computacional é a terapia ocupacional de mão. Por exemplo, em doenças crônicas como a artrite reumatoide (AR), a avaliação do estado funcional do paciente é fundamental para o tratamento bem como para a prevenção de deformidade dos dedos. Um dos procedimentos para o diagnóstico das deformidades dos dedos é a medição dos ângulos de movimento, por exemplo a flexão/extensão e abdução/adução dos dedos, feita por um goniômetro em um processo simples, mas que pode ser invasivo e demorado para o paciente. Esta tese busca preencher uma lacuna do estado-da- arte ao propor e avaliar a viabilidade da utilização de um arcabouço composto de um sensor 3D de baixo custo e uma técnica estado-da-arte em estimativa de pose de mão 3D para aquisição automática dos ângulos da mão em pacientes de artrite reumatoide. Oalgoritmo proposto é aplicado em um conjunto de imagens de profundidade, retornando a posição das juntas da mão estimadas a partir de uma rede neural convolucional profunda. O algoritmo utilizado pode ser executado em tempo real, permitindo a visualização dos esqueletos resultantes ao mesmo tempo em que as imagens são adquiridas. A partir dessa estimativa, os ângulos de flexão/extensão e de abdução/adução da mão são calculados aplicando operações de geometria computacional. A dificuldade em se encontrar bases de dados relativas a pessoas com AR torna a estimativa de poses de mão dos pacientes um desafio ainda maior para os métodos de visão computacional baseados em dados. Dessa forma, foi proposto um protocolo de aquisição de dados para grupos de pacientes e controle. Foram feitos experimentos de comparação com os dados do goniômetro dos acometidos pela AR. Os resultados mostram que é possível distinguir automaticamente os conjuntos de acometidos e controle usando descritores de Fourier. Os ângulos mensurados pelo sensor podem ser usados como indicativo das capacidades de movimento dos pacientes. O procedimento é simples, não invasivo e mais amigável para os acometidos pela AR, reduzindo o tempo de avaliação além de oferecer dados em tempo real do movimento dinâmico
- Imprenta:
- Data da defesa: 14.12.2021
- Este periódico é de acesso aberto
- Este artigo é de acesso aberto
- URL de acesso aberto
- Cor do Acesso Aberto: gold
- Licença: cc-by-nc-sa
-
ABNT
CEJNOG, Luciano Walenty Xavier. Hand pose estimation and movement analysis for occupational therapy. 2021. Tese (Doutorado) – Universidade de São Paulo, São Paulo, 2021. Disponível em: https://www.teses.usp.br/teses/disponiveis/45/45134/tde-16022022-161906/. Acesso em: 03 out. 2024. -
APA
Cejnog, L. W. X. (2021). Hand pose estimation and movement analysis for occupational therapy (Tese (Doutorado). Universidade de São Paulo, São Paulo. Recuperado de https://www.teses.usp.br/teses/disponiveis/45/45134/tde-16022022-161906/ -
NLM
Cejnog LWX. Hand pose estimation and movement analysis for occupational therapy [Internet]. 2021 ;[citado 2024 out. 03 ] Available from: https://www.teses.usp.br/teses/disponiveis/45/45134/tde-16022022-161906/ -
Vancouver
Cejnog LWX. Hand pose estimation and movement analysis for occupational therapy [Internet]. 2021 ;[citado 2024 out. 03 ] Available from: https://www.teses.usp.br/teses/disponiveis/45/45134/tde-16022022-161906/
Informações sobre o DOI: 10.11606/T.45.2021.tde-16022022-161906 (Fonte: oaDOI API)
How to cite
A citação é gerada automaticamente e pode não estar totalmente de acordo com as normas
