워싱턴 대학의 연구원들은 사람들이 일상 생활에서 인공 지능과 상호 작용하는 방식을 바꿀 수 있는 새로운 프로토타입 시스템을 개발했습니다. VueBuds라고 불리는 이 시스템은 작은 카메라를 표준 무선 이어버드에 통합하여 사용자가 AI 모델에게 주변 세계에 대해 거의 실시간으로 질문할 수 있도록 합니다.
개념은 간단하지만 강력합니다. 사용자는 외국어로 된 음식 패키지 등의 물체를 보고 AI에게 번역을 요청할 수 있습니다. 약 1초 내에 시스템이 이어버드를 통해 응답하여 핸즈프리로 원활하게 상호 작용할 수 있습니다.
AI 웨어러블에 대한 다른 접근 방식
개인 정보 보호 문제와 디자인 제한으로 채택에 어려움을 겪은 스마트 안경과 달리 VueBuds는 좀 더 미묘한 접근 방식을 취합니다. 이 시스템은 이어버드에 내장된 저해상도 흑백 카메라를 사용하여 연속 비디오가 아닌 정지 이미지를 캡처합니다.
이러한 이미지는 Bluetooth를 통해 연결된 장치로 전송되며, 소형 AI 모델이 로컬에서 처리합니다. 이러한 온디바이스 처리를 통해 데이터를 클라우드로 전송할 필요가 없으므로 웨어러블 카메라와 관련된 가장 큰 문제 중 하나를 해결할 수 있습니다.
개인 정보 보호를 더욱 강화하기 위해 이어버드에는 녹음 시 눈에 보이는 표시등이 포함되어 있으며 사용자는 캡처한 이미지를 즉시 삭제할 수 있습니다.
전력 및 성능 한계를 고려한 엔지니어링
연구팀이 직면한 가장 큰 과제 중 하나는 전력 소비였습니다. 카메라는 마이크보다 훨씬 더 많은 에너지를 필요로 하므로 스마트 안경과 같은 고해상도 센서를 사용하는 것은 비현실적입니다.
이 문제를 해결하기 위해 팀은 대략 쌀알 크기의 카메라를 사용하여 저해상도 회색조 이미지를 캡처했습니다. 이 접근 방식은 배터리 사용량을 줄이고 응답성을 저하시키지 않으면서 효율적인 Bluetooth 전송을 가능하게 합니다.
배치는 또 다른 주요 고려 사항이었습니다. 카메라를 약간 바깥쪽으로 기울여 시스템은 98도에서 108도 사이의 시야를 확보합니다. 매우 가까이 있는 물체에는 작은 사각지대가 있지만 연구원들은 이것이 일반적인 사용에 영향을 미치지 않는다는 것을 발견했습니다.
또한 이 시스템은 양쪽 이어버드의 이미지를 단일 프레임으로 결합하여 처리 속도를 향상시킵니다. 이를 통해 VueBuds는 이미지를 별도로 처리할 때 2초가 소요되는 것에 비해 약 1초 만에 반응할 수 있습니다.
스마트 안경과 비교한 성능
테스트에서 74명의 참가자가 VueBuds를 Meta의 Ray-Ban 모델과 같은 스마트 안경과 비교했습니다. 저해상도 이미지와 로컬 처리를 사용했음에도 불구하고 VueBuds는 전반적으로 비슷한 성능을 보였습니다.
보고서에 따르면 참가자들은 번역 작업에 VueBuds를 선호했으며 스마트 안경은 개체 수 계산에 더 나은 성능을 보였습니다. 별도의 시험에서 VueBuds는 번역 및 개체 식별에 대해 약 83~84%의 정확도를 달성했으며 책 제목 및 저자 식별에 대해서는 최대 93%의 정확도를 달성했습니다.
이것이 중요한 이유와 다음 단계
이 연구는 AI 기반 웨어러블 설계 방식의 잠재적인 변화를 강조합니다. 사람들이 이미 사용하는 장치에 시각 지능을 내장함으로써 시스템은 스마트 안경이 직면하는 많은 장벽을 피할 수 있습니다.
그러나 한계는 여전히 남아 있습니다. 현재 시스템은 색상을 해석할 수 없으며 그 기능은 아직 초기 단계입니다. 팀은 번역 및 접근성 지원과 같은 작업을 위해 색상 센서를 추가하고 전문 AI 모델을 개발하는 방법을 모색할 계획입니다.
연구원들은 바르셀로나에서 열리는 컴퓨팅 시스템의 인간 요소에 관한 컴퓨팅 기계 협회 컨퍼런스에서 연구 결과를 발표하여 일상적인 장치가 조용히 지능형 보조자가 되는 미래를 엿볼 수 있습니다.