한눈에

Latent Space가 법률 AI 회사 Legora의 CTO 제이콥 라우리첸을 인터뷰했다.

Legora는 에이전트가 변호사를 위해 한 일의 기록을 하나도 볼 수 없다. 데이터가 로펌 고객의 것이기 때문이다.

어떻게 시험하나

엔지니어 3명과 변호사 3명이 고객 업무를 본뜬 시험 환경을 만든다. 강화학습에서 쓰는 ‘월드’와 비슷한 방식이다.

라우리첸은 모델이 이미 법률 일의 약 60%를 잘한다고 봤다. 나머지는 더 똑똑한 모델이 필요하다고 했다.

인용 과제 정확도는 70%였다가 모델 업데이트 한 번에 99%가 됐다. Legora는 아무것도 바꾸지 않았다.

왜 중요한가

데이터를 못 보는 상황에서도 에이전트 품질을 재는 방법을 구체적으로 들을 수 있다.

엔지니어 20명이면 충분하다던 팀이 지금은 100명인데도 손이 모자라다고 했다. 초안 작성에는 Fable과 Opus가 말이 많아 Astra의 간결한 글을 더 좋아한다는 이야기도 나온다.

어떻게 바뀌나

모델 연구소가 코딩 도구처럼 법률 도구도 막을지, 로펌 파트너 구조와 시간당 청구, 주니어 변호사 일자리가 어떻게 될지도 다뤘다.