살짝 고개를 들어 올리자, 맥에서 읽고 있던 책이 위로 스크롤됐다. 어젯밤, 저는 퓨전 태국 카레 레시피를 실험하고 있었는데 도마에서 안전한 거리에 있는 제 노트북에 탭이 거의 20개나 열려 있었습니다. 탭 사이를 앞뒤로 전환하기 위해 트랙패드를 만져서 지저분해질 필요가 없었습니다. 왼쪽이나 오른쪽을 보면 탭 사이를 전환할 수 있고, 머리를 양쪽 어깨 쪽으로 기울이면 내가 읽고 있는 웹 사이트 페이지를 앞뒤로 이동할 수 있습니다.
나는 Mac을 건드리지 않고 Mac과 상호 작용했습니다. 모든 것이 내 귀에 있는 AirPods에 의해 제어되었습니다.
이제 이것이 Apple의 새로운 기능인지 궁금할 것입니다. 그렇지 않습니다. Claude를 사용하여 개발한 Headway라는 동작 감지 앱입니다. 나는 일관되지 않은 음성 명령으로 떠드는 대략적인 개념으로 시작했고, 한 시간도 채 안 되어 내 Mac의 메뉴 표시줄에 모든 기능을 갖춘 소프트웨어가 생겼습니다. 실제로 Headway 앱을 살펴보세요.
이 앱에는 고개를 끄덕이는 방식으로 페이지를 제어할지, 지속적인 스크롤을 위해 기울이기 제스처를 사용할지, 고개를 끄덕이면서 방향 키 누르기를 모방할지 여부를 결정할 수 있는 다양한 사용자 정의 기능이 포함된 앱별 제어 기능도 있습니다. 1년 전이었다면 그 생각은 우스꽝스러웠을 것이다. 하지만 Claude 덕분에 제가 상상할 수 있는 거의 모든 작은 앱과 꿈의 유틸리티를 만들 수 있었습니다.
그런데 왜?
나 자신의 일상적인 컴퓨터 상호작용만을 위해 구축된 개인 앱의 첫 번째 브러시는 Mac의 카메라를 사용하여 내 자세를 모니터링하고 내가 구부정할 때마다 알림을 보내는 오픈 소스 앱인 PoseNudge였습니다. 당연히, 항상 카메라를 통해 당신을 감시하는 앱, 특히 Apple의 엄격한 개인 정보 보호 및 보안 검사를 통과하지 못한 앱은 눈살을 찌푸리게 만들었습니다. 그래서 저는 아이디어를 받아들여 대신 AirPod의 모션 센서를 중심으로 재구성했습니다.
이번 주 초에 저는 일부 UI 조정에 대해 브레인스토밍하기 위해 해당 앱을 다시 방문하고 있었는데, 그 앱을 통해 아이디어를 얻었습니다. AirPods Pro 3 내부의 동작 센서를 사용하여 Mac을 탐색하고 카메라를 문제에서 완전히 벗어나는 것은 어떨까요? 결국 이는 시스템 리소스에도 방해가 되고 더 많은 부담을 줍니다. 저는 Claude Opus 5.5를 사용했고, 10분도 안 되어 제 MacBook Pro에서 첫 번째 빌드가 안정적으로 실행되었습니다.
앱의 기능은 무엇인가요?
기술적인 수준에서 앱은 지원되는 AirPods 모델에서 헤드 트래킹 Spatial Audio에 전력을 공급하는 것과 동일한 모션 센서인 가속도계와 자이로스코프의 판독값에 의존합니다. 앱은 로컬에서 실행되며 Apple의 Core Motion 프레임워크가 AirPod에서 가져오는 머리 움직임 데이터만 읽습니다. 제가 Headway라고 부르는 이 앱은 두 가지 스크롤 방법을 제공합니다.
첫 번째는 기울여서 스크롤하는 것입니다. 머리를 위아래로 기울이기만 하면 페이지가 계속해서 스크롤됩니다. 스크롤 속도를 조절할 수 있고, 가장 중요한 것은 데드존을 설정할 수 있다는 점입니다. y축을 따라 미묘한 기울기라도 등록하려면 데드존을 축소할 수 있습니다. 반대로, 제스처를 좀 더 의도적으로 사용하고 싶다면 잘못된 트리거가 없도록 데드존을 늘릴 수 있습니다.
보다 세부적인 제어를 위해 nod라는 대체 방법을 만들었습니다. 기울어진 자세를 유지할 필요가 없습니다. 위 또는 아래로 빠르게 고개를 끄덕이면 그에 따라 페이지가 이동됩니다. 여기에 유연성을 추가했습니다. 페이지를 부드럽게 스크롤하거나 모든 앱이나 웹 사이트에서 방향 키를 누르는 것과 동일한 양만큼 점프하도록 각 고개를 끄덕일 수 있습니다. 제스처에 관한 한, 내 전체 작업 흐름은 브라우저 기반이기 때문에 이 앱은 Google Chrome에 맞게 맞춤 제작되었습니다.
옆에 앉으신 분은 그렇지 않아서 몇개 더 만들어 봤습니다. 빠르게 연속해서 두 번 고개를 끄덕이면 페이지 상단이나 하단으로 곧바로 이동합니다. 머리를 어깨쪽으로 기울이면 Chrome이나 이를 지원하는 모든 앱의 페이지에서 앞으로 또는 뒤로 이동합니다. 머리를 돌려 왼쪽이나 오른쪽을 보면 탭 간에 안정적으로 전환할 수 있습니다. 그리고 페이지를 새로 고침해야 할 경우, 거절하는 것처럼 고개를 흔들기만 하면 Headway가 해당 페이지나 앱에 새로 고침 명령을 보냅니다.
안전 장치로서 키보드를 내려다보면 자동으로 동작 인식을 일시 중지하는 컨트롤을 만들었습니다. 입력이 끝나면 모션 감지가 다시 작동합니다. 고개를 끄덕이고 기울이고 옆으로 시선을 돌리는 동작을 바꿀 수도 있고 전용 토글을 사용하여 y축을 따라 스크롤 방향을 반전시킬 수도 있습니다. 각 변경 사항은 자체 독립 실행형 토글을 통해 한 번의 클릭으로 이루어집니다.
물론 제스처가 등록되었는지 여부에 대한 의심은 항상 남아 있습니다. 그래서 저는 사운드와 화면 플래시 경고라는 두 가지 피드백 레이어를 구축했습니다. 머리 동작을 할 때마다 미세한 소리가 나서 등록되었음을 확인해줍니다. 동시에 어떤 제스처가 기록되었고 어떤 작업이 수행되었는지 정확하게 보여주는 작은 배지가 화면에 나타납니다.
책상에서 일하는 사람이라면 하루 종일 자세가 계속 바뀌기 때문에 잘못된 유발 요인이 발생할 가능성이 높습니다. 따라서 현재 머리 위치를 중립점으로 설정하는 원클릭 중심 버튼이 있습니다. 거기에서 모든 끄덕임, 요잉, 기울기가 새로운 기준 자세에 대해 측정됩니다. 작은 메뉴 표시줄 드롭다운에는 Headway에서 작업할 앱을 추가할 수 있는 전용 앱 섹션이 있습니다.
해당 드롭다운에서 바로 각 앱의 동작 감지를 켜거나 끌 수 있으며, 기본적으로 고개를 끄덕이거나 기울이는 동작을 사용할지 선택할 수 있습니다. 마지막으로 매일 내 머리 동작을 기록하는 통계 페이지가 있습니다. 내가 읽은 페이지 수를 대략적으로 확인할 수 있는 좋은 방법입니다. 예를 들어 하루에 80번 아래로 고개를 끄덕였다면 최소한 그만큼의 페이지를 읽었다는 의미입니다. 정확하다는 뜻은 아니고, 제가 앱에 내장한 재미있는 작은 부활절 달걀일 뿐입니다.
이 앱은 나에게 예상치 못한 유용함을 입증했습니다.
손이 닿지 않거나 손이 너무 지저분해서 만질 수 없는 다양한 상황에서 Mac의 화면이나 연결된 iPad의 화면을 제어할 수 있습니다. 설거지를 하고, 요리하는 동안 레시피를 따르고, 집에서 허드렛일을 하면서 만화책을 넘기는 등 이 모든 상황이 기술적인 작업을 할 필요 없이 앱이 정말 유용하게 된 상황입니다. 친구들에게 테스트하게 했을 때 더 재미있는 부분이 생겼습니다. 그들은 처음에는 회의적이었고 일부는 이상하게 들린다고 말하기도 했습니다. 하지만 눈앞에서 머리를 움직여 맥을 제어하는 그들의 놀란 표정을 보는 것은 꽤 멋진 일이었습니다.
관련 정보는 아래 링크에서 확인하세요