청각 장애가 있는 사람들에게 수화는 단순한 의사소통 도구가 아닙니다. 그것은 그들의 주요 언어입니다. 문제는 정상적인 청력을 가진 사람들에게 수화를 가르치지 않아 연결하기 어려운 장벽이 생긴다는 것입니다. 이제 한국의 한 연구팀이 이 오래된 문제에 대한 놀랍도록 우아한 해결책을 찾았을 것입니다.
Science Advances에 발표된 새로운 연구에 따르면 WRSLT(무선 연결, 벨소리 유형 수화 번역기)라는 시스템은 약 88%의 정확도로 미국 수화와 국제 수화 단어를 모두 인식하고 번역할 수 있습니다. 그리고 네, 실시간으로 작동합니다.
일곱 개의 고리는 어떻게 전체 언어를 번역합니까?
각 스마트 링에는 손가락 움직임을 감지할 수 있는 3축 가속도계가 포함되어 있습니다. 서명자가 반지를 착용하고 서명을 시작하면 센서가 손가락 방향과 손 움직임을 추적합니다. 이 모든 데이터는 블루투스를 통해 스마트폰이나 컴퓨터로 무선으로 전송되며, AI가 움직임을 해석하고 이를 서면 텍스트로 변환합니다.
기존 솔루션에 비해 가장 큰 장점은 이동이 자유롭다는 점입니다. 현재 수화 번역 도구는 자연스러운 손 움직임을 제한하고 각 사용자에 대해 재보정해야 하는 부피가 큰 장갑이나 유선 센서 어레이에 의존합니다. WRSLT에는 이러한 문제가 없습니다.
실제로 모든 사람에게 효과가 있을 수 있나요?
테스트는 매우 긍정적이며 연구원들은 그들의 시스템이 모든 사람에게 효과적일 수 있다고 믿습니다. 그들은 한 사용자 그룹에 대해 시스템을 교육한 다음 완전히 다른 그룹에 대해 테스트했습니다. ISL 단어는 88.5%의 정확도로, ASL 단어는 88.3%로 정확하게 식별했는데, 이는 사람들이 서명하는 방식의 자연스러운 변화를 고려하면 인상적입니다.
현재 시스템은 각 언어에서 100개의 단어를 인식할 수 있으며 이는 좋은 시작입니다. 팀은 반지를 더욱 소형화하고 AI의 어휘를 확장하여 더 많은 단어와 수화를 다룰 계획입니다.
초기 단계이지만 이것은 우리가 한동안 보아온 가장 유망한 수화 번역 솔루션 중 하나입니다.
이 주제에 대해 더 알고 싶다면 아래를 참고하세요