|
종합 리걸테크 기업 로앤컴퍼니는 슈퍼로이어가 제15회 변호사시험 선택형에서 정답률 100%, 375점 만점을 기록했다고 24일 밝혔다.
현재까지 변호사시험 선택형 만점 사례는 공식적으로 알려진 바 없다. 이번 점수는 같은 시험 수석의 360점보다 15점 높은 수준이다.
변호사시험 선택형은 민사법, 형사법, 공법 영역에서 법률 지식과 판례·조문 이해도, 정답을 빠르게 가려내는 판단력을 평가한다. 로앤컴퍼니는 슈퍼로이어의 이번 만점이 단순한 고득점을 넘어 법률 AI 답변의 정확성과 신뢰성을 보여주는 결과라고 설명했다. 법률 분야는 하나의 오답이 실무상 큰 영향을 미칠 수 있는 만큼 정답률 100% 달성이 갖는 의미가 크다는 것이다.
슈퍼로이어의 성능은 최근 1년간 꾸준히 개선됐다. 지난해 3월 제14회 변호사시험 선택형 150개 문항 중 111개를 맞혀 합격선인 96개를 넘었다. 같은 해 5월에는 123개 정답, 정답률 82%를 기록했다. 이번 제15회 시험에서는 150개 문항을 모두 맞히며 1년 만에 정답률을 18%포인트 끌어올렸다.
로앤컴퍼니는 슈퍼로이어 성능 개선 배경으로 법률 데이터베이스와 AI 분석 시스템 고도화를 꼽았다. 슈퍼로이어는 로앤컴퍼니가 보유한 530만건의 판례 데이터를 기반으로 한다. 로앤컴퍼니는 국내 법률 전문 출판사 박영사의 법률서적을 10년간 독점 공급받는 계약도 체결했다.
최근에는 AI 기반 법률 데이터 분석 시스템을 고도화해 데이터 간 인용·참조 관계와 위계·구조 관계를 정교화했다. 법률 영역에 특화한 하네스 엔지니어링과 다수의 최신 상용 거대언어모델 조합도 적용해 응답 품질을 높였다고 회사 측은 설명했다.
이 같은 기술은 기존 슈퍼로이어를 비롯해 지난 5월 선보인 ‘롱폼 프리미엄’과 추론 기능을 갖춘 AI 에이전트 ‘슈퍼 에이전트’에도 활용되고 있다. 롱폼 프리미엄은 법률 서면 작성 기능인 ‘롱폼’의 업그레이드 버전이다. 기존보다 더 길고 정확도 높은 서면을 작성할 수 있도록 설계됐다. 슈퍼 에이전트는 사용자가 제시한 과제를 달성하기 위해 AI가 스스로 계획을 세우고 필요한 도구를 활용해 실행하는 기능이다. 다수 문서에 대한 입체적 분석, 복잡한 법률 쟁점 파악, 긴 서면 작성 등 일반 대화나 기존 롱폼 기능으로 처리하기 어려웠던 업무를 수행할 수 있도록 개발됐다. 현재는 베타 서비스로 운영 중이다.
김본환 로앤컴퍼니 대표는 “슈퍼로이어가 보여준 변호사시험 선택형 만점은 답변의 정확성과 신뢰성 측면에서 국내 최고 수준의 경쟁력을 갖췄다고 볼 수 있다”며 “한층 강화된 성능을 바탕으로 법률 지식과 논리 추론 모두 탁월한 역량을 갖춘 기능으로 발전시켜 차원이 다른 혁신을 선보이겠다”고 말했다.
Copyright ⓒ 이데일리 무단 전재 및 재배포 금지
