클로드가 완료되면 풍선이 터지는: whisper.cpp를 활용한 물리적 에이전트 UI

한 개발자가 사용자가 작업을 말하면 부풀어 오르고, 실제 Claude Code 에이전트가 백그라운드에서 실행되는 동안 화면을 떠다니는 데스크톱 풍선 UI를 만들었습니다. 에이전트가 완료되면 풍선이 폭죽과 결과 카드와 함께 터집니다. 실패하면 풍선이 슬프게 수축합니다.

작동 방식

• 음성 입력: 헬륨 탱크 아이콘의 노즐을 잡고 "내 다운로드 폴더 정리하고 하위 폴더로 분류해줘" 또는 "할 일 목록 앱 만들어줘" 같은 작업을 말하세요. 풍선이 목소리로 부풀어 오르고, 대화 내용이 풍선에 직접 표시됩니다.
• 에이전트 실행: 손을 떼면 실제 Claude Code 에이전트가 백그라운드에서 작업을 실행하는 동안 풍선이 화면을 가로질러 떠다닙니다. 에이전트가 무언가를 하고 있을 때 풍선이 움찔거립니다.
• 실시간 콘솔: 풍선을 더블 클릭하면 모든 생각과 도구 호출을 실시간으로 보여주는 작은 콘솔이 나타납니다.
• 병렬 에이전트: 여러 작업을 말하면 여러 풍선이 동시에 떠다니며 각각의 에이전트를 병렬로 실행합니다.
• 드래그 앤 파크: 풍선을 태그로 끌어서 원하는 곳에 고정할 수 있습니다.

기술적 세부사항

• 음성 인식: whisper.cpp를 사용하여 로컬에서 실행되며 클라우드 의존성이 없습니다.
• 에이전트 백엔드: 에이전트는 Claude Agent SDK를 통해 기존 Claude Code 로그인을 사용하므로 별도 설정이나 요금이 없습니다.
• 라이선스: 완전 무료 오픈 소스입니다.

만들어진 이유

제작자는 대부분의 사람들에게 에이전트가 여전히 위협적으로 느껴지며 "아무도 풍선을 두려워하지 않는다"고 말합니다. 이 프로젝트는 모델 전환용 물리적 기어 시프터와 같은 아이디어의 반대편으로, 에이전트 소프트웨어를 물리적으로 느끼게 만듭니다.