AI, 계약 위험 탐지에서 탑클래스 변호사 능가

새 연구에서 AI가 법률 계약 평가에서 최상위 변호사들을 이겼습니다. 로지지(LawGeex)가 개발한 AI는 수많은 법률 계약에서 이슈를 식별하도록 훈련됐습니다. 평균적으로 변호사들은 85% 정확률을 기록한 반면 AI는 94% 정확도를 달성했습니다.

인간 vs AI

로지지(LawGeex) 법률 인공지능(AI) 플랫폼이 새 연구를 진행했습니다. 미국 탑클래스 변호사들이 법률 계약 분석·평가 훈련된 AI와 경쟁했습니다. 듀크대 로스쿨, 스탠퍼드대, 서던캘리포니아대 출신 20년 경력 변호사 20명이 기술과 맞붙었고, 패배했습니다.

로지지 AI와 수십 년 경력 인간 변호사 모두 5개 NDA(비밀유지계약) — 대부분 비즈니스 거래의 계약적 기반 — 에서 이슈를 찾는 과제를 받았습니다. AI 알고리즘은 약 3년간 개발돼 수만 건 계약으로 훈련됐습니다.

연구는 데이터 과학자, 학자, 법률·머신러닝 전문가들 입력으로 진행됐으며 독립 변호사와 컨설턴트 감독하에 이뤄졌습니다. 대부분의 문서들 — 사업체 운영 계약, 유언장, NDA 같은 것들 — 은 많은 변호사들이 매일 다루는 것과 매우 유사했습니다.

AI와 인간 변호사 모두 4시간 동안 5개 NDA를 검토하고 배상, 중재, 관계 기밀성 등 30개 법률 이슈를 탐지했습니다. 결과는 성과 기반 — 각 이슈를 얼마나 정확히 식별했는지 — 으로 평가됐습니다.

평균적으로 변호사들은 85% 정확률, AI는 94% 정확도를 기록했습니다. AI는 '정확성'뿐만 아니라 '문서 평가 시간'에서도 인상적 결과를 냈습니다. 변호사들이 평균 92분 걸린 반면 AI는 26초 만에 과제를 완료했습니다.

출처: LawGeex

사실 5개 NDA 중 1개에서 AI는 100% 정확도를 달성한 반면, 인간이 기록한 최고는 86%였습니다. 결론: 인간은 완패했습니다.

로지지 개발 AI는 서비스·소프트웨어 계약, 구매 주문 등 수많은 법률 계약에서 이슈 식별하도록 훈련됐습니다. 연구는 NDA에만 초점 맞췄습니다.

맞춤 설계된 머신러닝과 딥러닝 메서드로 AI는 수만 건 NDA로 훈련됐습니다. 훈련은 알고리즘에 광범위한 예시를 제시해 여러 법률 개념을 구별하게 하는 독점 문서 코퍼스(corpus) 기반이었습니다.

간단히 말해, AI 훈련은 아마추어 변호사 훈련과 매우 비슷합니다 — 다양한 문서 유형 탐색이 법률 실무 깊은 이해 개발에 매우 중요합니다.

기술을 더 지능적으로 만든다고 인류 종말이 오는 건 아닙니다. 인공지능은 실제로 변호사들 업무 향상과 가속화를 돕고, 인간 개입이 필요한 다른 업무에 집중하게 할 수 있습니다.

로펌에서 AI는 준법률가(paralegal) 자리를 채워, 변호사들이 고객 상담과 기타 중요 업무에 귀중한 시간을 쓸 수 있게 합니다. 인간 변호사를 완전히 대체하진 않지만, 결정적 순간에 중요한 요소들을 강조해 업무를 확실히 증진시킬 수 있습니다.

이런 도구들은 주니어 변호사와 학생들 생산성 향상과 미래 법률 실무 형성에 도움됩니다. 기존 AI 애플리케이션들이 이미 신뢰받는 조언자로서 변호사 근본 역할을 개선하고 있습니다. 이는 법률 전문가 관련성 확보를 돕고, 다음 10년간 경쟁력 유지를 가능하게 합니다.

산업기술