Apple Silicon에서 AI 에이전트를 위한 로컬 음성 제어 설정
이 설정은 Parakeet STT와 Kokoro TTS를 Apple Silicon, 특히 Mac Mini M4에서 테스트하여 AI 에이전트에 대한 로컬 음성 제어를 구현하는 방법을 상세히 설명합니다. 목표는 클라우드 서비스에 대한 의존성을 제거하고 완전히 로컬이며 빠른 음성 상호 작용 계층을 구축하는 것이었습니다.
주요 세부 사항
- 하드웨어: OpenClaw + Claude를 AI 에이전트로 실행하는 Mac Mini M4.
- 소프트웨어 설정: 음성 입력을 약 240ms 내에 전사하는 음성-텍스트(STT)용 Parakeet와 거의 즉각적인 응답을 제공하는 텍스트-음성(TTS)용 Kokoro.
- 장점: 타이핑에서 음성 명령으로 전환하면 발코니나 개 산책 중과 같이 사무실에 구애받지 않고 작업할 수 있어 워크플로 유연성이 크게 향상됩니다.
- 과제: 가끔 STT가 악센트 인식에 어려움을 겪어, AI 에이전트가 사용자의 발음을 교정하는 재미있는 상황이 발생하기도 합니다.
- 개선 사항: Mimora라는 3D 아바타를 통합한 브라우저 확장 프로그램을 통해 시각적 상호 작용이 가능하며, 에이전트 응답 중 듣기, 생각하기, 행복한 상태 등 다양한 표정을 보여줍니다.
이 구성은 특히 Apple Silicon 하드웨어를 사용하여 클라우드 독립적이고 빠른 음성 상호 작용을 AI 에이전트와 원하는 사용자에게 이상적입니다.
📖 전체 소스 읽기: r/LocalLLaMA
👀 See Also
Browser39: AI 에이전트를 위한 헤드리스 웹 브라우저
Browser39는 AI 에이전트를 위해 특별히 설계된 헤드리스 웹 브라우저로, 웹 페이지를 토큰 최적화된 마크다운으로 로컬에서 변환하고, 자바스크립트를 실행하며, 쿠키와 세션을 관리하고, DOM을 쿼리하며, 폼을 채웁니다. 외부 브라우저가 필요 없고, 비용이 없으며, 외부 서비스가 없는 단일 바이너리입니다.
MCP 서버, Claude를 스튜디오 음향 분석을 위한 Room EQ Wizard에 연결합니다
오픈소스 MCP 서버가 Claude AI에 Room EQ Wizard 제어 기능을 부여하여 자동화된 스튜디오 모니터 보정 및 실내 음향 분석을 가능하게 합니다. 이 도구는 측정 제어, 신호 생성, SPL 미터링, EQ 관리용 27개의 MCP 도구를 포함합니다.
듀얼 모델 아키텍처는 긴 대화에서 토큰 소비를 절반으로 줄입니다.
한 개발자가 소형 '잠재의식' 모델이 배경에서 대화 기록을 압축하는 이중 모델 시스템을 구축하여 주 모델이 원시 기록 120K 토큰 대신 선별된 ~35K 컨텍스트로 작업할 수 있게 했습니다. 이 아키텍처는 지속적인 프로젝트 작업에서 토큰 소비를 약 절반으로 줄입니다.
Crit: 로컬 우선, 단일 바이너리 CLI로 에이전트 계획과 차이점 검토하기
Crit는 단일 바이너리 CLI로, GitHub 스타일 UI로 파일 또는 diff를 브라우저에서 열어 AI 코딩 에이전트와 다중 라운드 피드백 루프를 가능하게 하며, 계정이 필요 없습니다.