AgentHandover: 화면을 보면서 에이전트 스킬을 만드는 Mac 메뉴 바 앱

AgentHandover의 기능

AgentHandover는 Gemma 4(Ollama를 통해 로컬에서 실행)를 통해 화면을 감시하고 반복적인 워크플로우를 어떤 에이전트든 따를 수 있는 구조화된 Skill 파일로 변환하는 오픈소스 Mac 메뉴 바 애플리케이션입니다. 제작자는 매번 에이전트에게 무언가를 처리하도록 요청할 때마다 일상적인 작업이라도 처음부터 과정을 설명해야 하는 번거로움을 피하기 위해 이 도구를 만들었습니다.

주요 기능 및 작동 방식

• 두 가지 기록 모드: 특정 작업을 위한 Focus Record와 백그라운드에서 실행되며 사용자가 무언가를 몇 번 반복하는 것을 보고 패턴을 감지하기 시작하는 Passive Discovery
• 자기 개선 기술: Skill은 매 관찰마다 더욱 정교해지며, 더 많이 학습함에 따라 단계, 안전 장치, 신뢰도 점수를 업데이트합니다
• 기기 내 처리: 전체 시스템은 11단계 파이프라인으로 완전히 기기 내에서 실행되며, 어떤 데이터도 사용자의 기기를 떠나지 않고 저장 시 암호화됩니다
• 에이전트 통합: MCP(Model Context Protocol)를 통한 원클릭 에이전트 통합으로 Claude Code, Cursor, OpenClaw 또는 MCP를 지원하는 어떤 도구든 사용자의 Skill을 활용할 수 있습니다
• CLI 제공: 터미널 사용자를 위한 명령줄 인터페이스 포함

기술적 세부사항

이 애플리케이션은 화면 이해를 위해 Ollama를 통해 로컬에서 실행되는 Gemma 4를 사용합니다. Apache 2.0 라이선스로 제공되며 GitHub에서 이용 가능합니다. 제작자는 이 접근 방식에 대한 피드백을 구하고 있으며, 화면 이해를 위한 다른 로컬 비전 또는 OS 모델에 관심이 있습니다.

이러한 유형의 도구는 수동 문서화 없이 인간의 워크플로우를 AI 에이전트로 전달하는 과제를 해결합니다. 실제 화면 상호작용을 관찰함으로써, 문서화된 지시사항에서는 놓칠 수 있는 미묘한 차이와 변형을 포착합니다.