Browsing by Author "Fernandes, Marco Paulo Sampaio"
Now showing 1 - 2 of 2
Results Per Page
Sort Options
- Empowering deaf-hearing communication: exploring synergies between predictive and generative ai-based strategies towards (portuguese) sign language interpretationPublication . Adão, Telmo; Oliveira, João; Shahrabadi, Somayeh; Jesus, Hugo; Fernandes, Marco Paulo Sampaio; Costa, Angelo; Gonçalves, Martinho Fradeira; Lopez, Miguel A.G.; Peres, Emanuel; Magalhães, Luis G.Communication between Deaf and hearing individuals remains a persistent challenge requiring attention to foster inclusivity. Despite notable efforts in the development of digital solutions for sign language recognition (SLR), several issues persist, such as cross-platform interoperability and strategies for tokenizing signs to enable continuous conversations and coherent sentence construction. To address such issues, this paper proposes a non-invasive Portuguese Sign Language (Língua Gestual Portuguesa or LGP) interpretation system-as-a-service, leveraging skeletal posture sequence inference powered by long-short term memory (LSTM) architectures. To address the scarcity of examples during machine learning (ML) model training, dataset augmentation strategies are explored. Additionally, a buffer-based interaction technique is introduced to facilitate LGP terms tokenization. This technique provides real-time feedback to users, allowing them to gauge the time remaining to complete a sign, which aids in the construction of grammatically coherent sentences based on inferred terms/words. To support human-like conditioning rules for interpretation, a large language model (LLM) service is integrated. Experiments reveal that LSTM-based neural networks, trained with 50 LGP terms and subjected to data augmentation, achieved accuracy levels ranging from 80% to 95.6%. Users unanimously reported a high level of intuition when using the buffer-based interaction strategy for terms/words tokenization. Furthermore, tests with an LLM—specifically ChatGPT—demonstrated promising semantic correlation rates in generated sentences, comparable to expected sentences.
- Prática de Ensino Supervisionada em Ensino de Educação Musical no Ensino Básico – O fazer música nos caminhos da (para a) inclusãoPublication . Fernandes, Marco Paulo Sampaio; Cardoso, MárioO presente relatório elaborado no âmbito da unidade curricular de Prática de Ensino Supervisionada, integrado no plano curricular do curso de Mestrado em Ensino de Educação Musical no Ensino Básico, tenciona apresentar de forma reflexiva e contextualizada, uma série de experiências de ensino-aprendizagem desenvolvidas durante o Estágio Profissional no ano letivo de 2021/2022, no seio de duas turmas de 6.ºano do 2.º ciclo do ensino básico de uma escola do nordeste transmontano. Como objeto principal para este relatório, optei por abordar a temática da inclusão e de que forma através da Música e da Educação Musical ela poderá ser trabalhada. Para além desta temática muitas outras foram realizadas e todas elas, tinham em vista o desenvolvimento de conhecimentos e competências musicais aos alunos. No decorrer de toda a prática letiva, foram definidos objetivos cujos vão de encontro ao documento Aprendizagens Essenciais 2.º Ciclo do Ensino Básico- Educação Musical. Face às estratégias adotadas, estas vão de encontro à postura pedagógica, posicionamento dos alunos e à divisão da aula em partes. Como professor, e como postura pedagógica, achei sempre importante que as aulas de Educação Musical fossem aulas onde todos pudessem ser ouvidos, onde o trabalho em grupo fosse fulcral e um espaço onde o respeito pelo outro existisse. Tudo isto sempre com o propósito de preparar os alunos para num futuro se tornarem bons cidadãos e defensores de uma sociedade inclusiva, ouvinte e respeitadora da diferença.