올해 초 macOS에서 Gemini Spark를 출시한 후 Google은 이제 작업 수행 방식을 바꿀 수 있는 두 가지 유용한 기능으로 Mac용 Gemini 앱을 업그레이드하고 있습니다. 즉, 현재 AI 받아쓰기 앱을 버리거나 Gemini가 화면에 있는 모든 작업에 작동하도록 허용하는 것입니다.
키를 한 번만 누르면 어디서나 음성이 깨끗한 텍스트로 변환됩니다.
최신 업데이트를 사용하면 열려 있는 창에서 Fn 키를 길게 누르고 대화를 시작할 수 있습니다. Gemini는 사용자가 말하는 내용을 커서 바로 앞에 깨끗한 텍스트로 기록하고, 진행하면서 “ums” 및 “ahs”와 같은 필러 단어를 잘라냅니다. 이 기능은 기본적으로 켜져 있으므로 먼저 설정할 것이 없으며 시스템 전체에서 작동하여 이메일을 입력하거나 Slack 메시지에 응답하거나 문서 초안을 작성할 수 있습니다.
Wispr Flow 및 Willow와 같은 AI 받아쓰기 앱은 이미 유사한 작업을 수행하여 음성 언어를 정리하고 커서가 있는 곳에 세련된 텍스트를 드롭합니다. 그러나 별도의 다운로드가 필요하며 경우에 따라 구독이 필요합니다. 이제 동일한 아이디어가 Gemini 앱에 직접 내장되었으므로 이미 사용하고 있는 Mac 사용자에게는 독립 실행형 받아쓰기 도구가 불필요하다고 느낄 수 있습니다.
받아쓰기 기능은 macOS의 모든 Gemini 앱 사용자에게 전 세계적으로 출시됩니다. 현재는 영어 받아쓰기를 지원하지만, 구글은 올해 말에 더 많은 언어가 추가될 것이라고 밝혔습니다.
이제 Gemini는 화면에 표시된 내용을 확인하고 이에 따라 조치를 취할 수 있습니다.
시스템 전반의 받아쓰기와 함께 Mac용 Gemini 앱은 화면 인식 추론 기능을 갖추고 있습니다. 이 옵트인 기능을 통해 Gemini는 활성 창을 읽고 이를 컨텍스트로 사용하여 보다 복잡한 요청을 처리할 수 있습니다. 예를 들어, 대략적인 메모 페이지를 강조 표시하고 Gemini에게 이를 요약으로 바꾸도록 요청할 수 있습니다. 그러면 Gemini는 텍스트를 다시 작성하여 커서가 있는 위치에 정확하게 배치합니다.
Google은 또한 팀 저녁 식사를 계획하는 사용자가 Gemini에게 강조 표시된 파일에서 예산 정책 및 식이 제한 사항에 대한 세부 정보를 확인하고 해당 세부 정보를 기반으로 알림 이메일 초안을 작성하도록 요청하는 보다 계층화된 예를 보여주었습니다. 동일한 요청으로 Gemini는 Google 지도에서 근처 보바 매장 추천을 가져와 이메일에 포스트스크립트로 추가했습니다.
이러한 새로운 기능을 통해 Mac용 Gemini는 단순한 답변을 넘어섰습니다. 이제 음성을 기록하고 화면에 표시된 내용에 따라 작업을 수행할 수 있는 더욱 유능한 도구가 되었으며, 유사한 기능을 갖춘 자체 Siri 점검이 아직 출시되지 않은 Apple보다 Google을 훨씬 앞서게 되었습니다.
이 주제에 대해 더 알고 싶다면 아래를 참고하세요