코스티 AI 에이전트, 훈련 없이 레벨 6까지 CAPTCHA 문제 해결
코스티의 컴퓨터 사용 에이전트, 실제 데스크톱 환경의 도전 과제 처리
코스티의 컴퓨터 사용 에이전트(CUA)는 '로봇이 아닙니다' 테스트에 대해 특별히 훈련되지 않았음에도 CAPTCHA 도전 과제를 레벨 6까지 해결할 수 있는 능력을 보여주었습니다. 이 에이전트는 실제 데스크톱 환경에서 작동하는 컴퓨터 사용 에이전트를 위한 최첨단 성능을 나타내는 OSWorld 벤치마크에서 82%를 달성했습니다.
이 에이전트는 일반적으로 다른 에이전트들을 실패하게 만드는 다양한 웹 인터페이스 도전 과제들을 처리합니다:
- 레벨 6까지의 CAPTCHA 도전 과제
- 브라우저 팝업
- 쿠키 배너
소스에 따르면, 개발자들은 CUA에게 '로봇이 아닙니다' 도전 과제를 특별히 해결하도록 가르치지 않았으며, "아이러니가 느껴집니다"라고 언급했습니다. 에이전트의 성능은 개별적인 도전 과제 유형에 대한 특화된 해결책보다는 일반화된 컴퓨터 상호작용 능력을 개발했음을 시사합니다.
에이전트의 작동 모습을 보고 싶은 분들을 위해 재생 링크가 제공됩니다: https://coasty.ai/share/1cd404ae-3fcb-4d7f-b9d4-dac7aa26fc6d
📖 전체 소스 읽기: HN AI Agents
👀 See Also
RTX 4090 vs H100: Llama-3-8B 파인튜닝 비용 대비 성능 비교
한 개발자가 RTX 4090과 임대한 H100 인스턴스 모두에서 Llama-3-8B 파인튜닝을 테스트했습니다. 4090 설정은 선불로 2,000달러가 들었고 24시간이 걸렸으며, H100 임대는 약 80달러가 들었고 4시간 만에 완료되었습니다.
다트머스 강좌에서 새 AI 튜터가 0.71-1.30 SD 효과 크기 달성
다트머스 대학의 입문용 컴퓨터 과학 과정에 도입된 새로운 AI 튜터가 대조군과 비교하여 0.71~1.30 표준편차의 학습 향상을 보였습니다.
AI의 PR 문제: 정체된 임금, 급등하는 자본, 대중의 반발
25년간 대학 학력 프리미엄 정체, S&P 500은 380% 상승. 노동자들은 AI를 자산 도용의 도구로 인식해 데이터센터 규제 법안을 추진 중.
클로드 맥스 $100 구독 API 확장 작업 사용 데이터
클로드 맥스 $100 구독 사용자가 기존 API에 선호하는 라이브러리 기능을 추가하는 데 5시간 세션의 13%를 소모했다고 보고하며, 컨텍스트 사용률은 11%, 주간 사용률은 5%에서 6%로 증가했습니다.