macOS용 오프라인 음성-텍스트 변환 도구: MLX를 통한 로컬 Whisper 활용

개발자가 whisper-dictate를 만들었습니다. 이 macOS 도구는 완전히 오프라인으로 음성을 텍스트로 변환하고 실시간 번역 기능을 제공합니다. 이 도구는 Apple Silicon에서 MLX를 통해 로컬로 실행되는 OpenAI의 Whisper를 사용하며, 데이터가 사용자의 기기를 떠나지 않습니다.

작동 방식

워크플로는 간단합니다: fn 키를 누른 상태에서 말하고, 키를 놓습니다. 텍스트가 변환되어 입력 중인 위치에 바로 붙여넣어집니다. 이 도구는 Slack, VS Code, 브라우저, 이메일 또는 기타 텍스트 필드에서 작동합니다. 녹음 중에는 떠다니는 "Listening..." 오버레이가 시각적 피드백을 제공합니다.

기술적 세부사항

• 말하기를 멈춘 후 약 500ms 내에 변환이 이루어집니다
• Apple Silicon에서 MLX를 통해 로컬로 실행되는 Whisper를 사용합니다
• 소형 모델은 일상적인 사용에 적합합니다
• large-v3-turbo 모델은 거의 완벽한 정확도를 제공합니다
• 100% 오프라인 작동 - 계정, 토큰 또는 데이터가 사용자의 기기를 떠나지 않습니다

번역 기능

Whisper는 추가 모델이나 번역 API 없이 즉시 번역할 수 있습니다. 번역은 Whisper의 디코딩 단계에 내장되어 있습니다. 예를 들어, 프랑스어로 말하면 영어 텍스트가 출력됩니다. 출력 언어를 영어로 설정하면, Whisper가 기본적으로 번역을 처리합니다.

설정 및 구성

실행 시, 이 도구는 사용자가 말할 언어와 출력할 언어를 묻습니다. 이를 통해 순수 변환과 번역 사이를 쉽게 전환할 수 있습니다. 설치 후 전체 설정에는 인터넷 연결이 필요하지 않습니다.

사용 가능성

이 프로젝트는 GitHub에서 오픈소스로 공개되어 다른 사람들이 사용하고 자신의 워크플로에 맞게 수정할 수 있습니다.