한눈에
Lenny's Newsletter의 How I AI에서 클레어 보가 개인 에이전트 네 개를 직접 비교했다. Grok Bot, ChatGPT의 Dot, Meta의 Muse, Anthropic의 Claude Duet이다.
과제는 9개다. Slack 답장 쓰기, 짧은 영상 편집, 버그 고치기, 썸네일 만들기, 받은편지함에서 할 일 찾기, 가족 신문 만들기, 숙제 설명, 신발 쇼핑, 출시 영상 만들기다.
왜 중요한가
최종 점수는 Grok Bot이 93%로 1위였다. 썸네일, 받은편지함 정리, 쇼핑에서 이겼다. Claude Duet은 79%로 꼴찌였지만 버그를 가장 완전하게 고쳤고 출시 영상도 가장 잘 만들었다.
Muse는 9개 중 4개에서 가장 빨랐고, 짧은 영상과 가족 신문처럼 생활·창작 과제에 강했다. 다만 업무 도구를 연결하지 않아 일부 과제는 못 했다. Dot은 코딩은 잘했지만 창작 과제에서 약했다.
어떻게 바뀌나
클레어 보의 정리는 업무는 Grok Bot, 생활은 Muse다. 코딩은 Dot과 Duet이 가장 나았지만, 코딩은 에이전트보다 Codex와 Claude 같은 원래 도구로 하겠다고 했다.
비교 요령도 남겼다. 에이전트마다 연결된 도구와 권한을 먼저 맞추지 않으면 결과가 공정하지 않다는 것이다.