한눈에
OpenAI가 10월 6일 Ironclad와의 연구 협업 결과를 공개했다. Ironclad는 AI 계약 관리 소프트웨어 회사다. 목표는 에이전트가 특정 업무용 소프트웨어를 제대로 다루게 하는 것이다.
GPT-6 Astra가 Ironclad 과제로 학습한 첫 프론티어 모델이다. OpenAI는 Ironclad를 이 작업의 첫 파트너라고 불렀다.
무슨 일
OpenAI는 Astra를 공개하면서 컴퓨터 사용 능력을 앞세웠다. 문서를 만들고 웹사이트를 테스트하는 식의 일이다.
다음 목표는 한 단계 더 깊다. 회사마다 다른 업무 규칙을 이해하고, 여러 단계짜리 작업을 해내고, 결과가 처음 요구에 맞는지 스스로 확인하는 것이다.
Ironclad 팀과 함께 과제를 만들었다. 계약서 설정, 승인 흐름, 재사용하는 법률 조항 관리 같은 일이다. 무엇을 성공으로 볼지는 Ironclad가 정의를 도왔다.
숫자
- 과제 11개 평균 점수: GPT-6 Astra 55.0%, GPT-5.6 Sol 41.6%.
- 과제 한 번에 걸린 예상 시간: Sol 37.0분, Astra 19.2분.
- Astra 개발 과정에 쓴 내부 모델: 63.7%. OpenAI는 이 성능을 다음 모델에 담겠다고 했다.
- 비교 조건: Astra는 Max 추론, Sol은 High 추론. 각 모델 점수가 가장 높게 나온 설정이다.
배경
Crypto Briefing 보도에 따르면 Ironclad는 2023년부터 OpenAI 모델을 써 왔다. 올해 OpenAI는 Ironclad 공동창업자 Jason Boehmig을 영입해 새 법률 분야를 맡겼다.
왜 중요한가
범용 벤치마크 점수 경쟁과는 다른 방향이다. 업무 소프트웨어 회사가 과제와 성공 기준을 만들고, 랩이 그걸로 모델을 학습시킨다.
OpenAI가 '첫 파트너'라고 한 만큼 다른 업무 분야로 이어질 가능성이 있다. 다만 점수 55.0%는 아직 절반 남짓이다. 실제 업무에 바로 맡길 수준인지는 따로 봐야 한다.