휴먼 인 더 루프(Humans in the Loop): 신뢰할 수 있는 법률 AI를 움직이는 사람들

By Serena Wellen, VP Product Management, LexisNexis

인공지능(AI)의 활용이 법률 실무 전반에 확산되면서, AI를 사용하는 모든 법률 전문가들은 자연스럽게 한 가지 질문에 직면하게 됩니다. “이 결과를 정말 믿어도 될까?” “이 결과를 신뢰할 수 있는가?”
AI 플랫폼이 소장 초안을 작성하거나, 판례를 요약하거나,계약서에서 핵심 조항을 찾아낼 때, 그 결과가 갖는 무게는 매우 큽니다. 이런 상황에서 불확실성은 결코 용납되기 어렵습니다.

이 때문에 2025년 ABA Law Technology Today 법률 산업 보고서에서도,  변호사들이 꼽은 주요 AI 이슈로 법률 AI 결과물에 대한 신뢰성과 법률 윤리와의 정합성에 대한 우려가 포함된 것은 전혀 놀라운 일이 아닙니다.

LexisNexis는 50년 이상 법률 전문가를 위한 제품과 솔루션을 개발해 왔습니다. 우리는 AI가 생성하는 법률 콘텐츠의 신뢰성을 알고리즘에만 맡길 수 없다는 사실을 잘 알고 있습니다. 그래서 LexisNexis가 출시하는 LexisNexis가 제공하는 모든 AI 솔루션 뒤에는, 데이터베이스와 AI 모델이 만들어내는 결과의 정확성과 품질을 직접 검증하는 전문 법률 인력 팀이 함께하고 있습니다.

이제 LexisNexis의 Data Discovery and Enrichment 팀, 즉 AI 개발에 참여하는 ‘휴먼 인 더 루프(Humans in the Loop)’ 전문가들을 소개하고자 합니다. 이들은 최첨단 AI 기술과 법률 전문가들이 요구하는 엄격한 기준 사이를 잇는 핵심적인 가교 역할을 수행합니다.

이 전문가들은 누구인가?

Data Discovery and Enrichment 팀은 AI의 기술적 특성과 실제 법률 실무 환경을 모두 이해하는 법률 전문가와 법률 리서치 전문 인력으로 구성되어 있습니다. 법률 리서치, 분석, 품질 평가 분야에서 다년간의 경험을 쌓은 300명 이상의 J.D. 자격 보유 전문가로 구성되어있으며, 이들은 LexisNexis AI가 생성한 결과물의 정확성과 완성도를 꼼꼼히 검토합니다.

팀원 대부분은 본인의 전공과 실무 경험에 맞는 법률 분야에서 생성된 AI 결과물을 담당합니다. 이와 함께, AI가 만들어내는 법률 콘텐츠의 복잡한 문제를 다루기 위해 여러 전문 팀이 유기적으로 협업하고 있습니다. 이들은 단순히 “AI가 무엇을 할 수 있는지”를 아는 데 그치지 않고, “변호사에게 실제로 어떤 결과가 필요한지”를 이해하며, 그 기준에 AI 결과물이 부합하는지를 판단할 수 있는 법률적 전문성을 갖추고 있습니다.

이 팀은 법률 전문성과 기술 개발이 만나는 지점에서, 실제 법률 전문가들이 결과물을 검토할 때와 동일한 비판적 시각으로 AI 결과를 평가합니다. AI는 방대한 정보를 빠르게 처리할 수는 있지만, 법률 실무에 필수적인 전문적 판단, 맥락에 대한 이해, 윤리적 책임을 스스로 갖추지는 못하기 때문에 이러한 인간의 개입은 필수적입니다.

LexisNexis는 인간이 AI 모델의 개발과 운영에 적극적으로 참여하여 성능, 정확성, 윤리적 경계를 형성하는 가드레일 역할을 수행하는 ‘휴먼 인 더 루프(Humans in the Loop)’ AI 개발 체계를 도입함으로써, AI의 역량을 활용하는 동시에 법률 전문가의 판단을 보호하고 있습니다.

품질 평가의 핵심 기

Data Discovery and Enrichment 팀은 법률 실무의 특수성을 반영해, 여러 관점에서 AI가 생성한 콘텐츠를 평가합니다. 다음은 LexisNexis가 특히 중점적으로 살펴보는 다섯 가지 핵심 평가 요소입니다.

• 정확성: 신뢰의 출발점은 정확성입니다. . AI가 제시한 답변이 법률 원칙, 판결 요지, 법령 문구, 절차 규칙을 정확히 반영하고 있는지 확인합니다. 또한 모든 인용을 원문 자료와 대조해, 법적 근거가 왜곡되거나 잘못 해석되지 않았는지를 검증합니다. 핵심 질문은 단 하나입니다. “이 정보는 정확한가?”
• 포괄성: 법률 문제는 단순하지 않습니다. 하나의 쟁점에도 다양한 관점과 상반된 판례, 예외 사항이 존재합니다. AI 결과물이 특정 관점만 제시해 법률 전문가를 오도하지 않는지, 중요한 예외나 반대 판례를 빠뜨리지 않았는지를 점검합니다. 기술적으로는 맞더라도 핵심 요소가 빠져 있다면, 실무에서는 충분하지 않기 때문입니다.
• 환각(Hallucination) 검증: 존재하지 않는 판례나 법적 근거를 그럴듯하게 만들어내는 ‘환각’ 현상은 법률 AI에서 가장 위험한 문제 중 하나입니다. 팀은 이러한 사례가 없는지 면밀히 확인하며, 모든 판례와 인용은 반드시 검증 가능해야 합니다.선례에 기반한 법률 실무의 특성상 이 영역은 매우 엄격하게 관리됩니다.
• 유용성: 정확하고 포괄적인 정보라도, 실제 업무에 활용하기 어렵다면 의미가 없습니다. AI 결과물이 질문에 제대로 답하고 있는지, 구조와 표현이 명확한지, 그리고 변호사들이 실제 업무 흐름에 자연스럽게 적용될 수 있는지를 평가합니다.
• 편향성 검토는 AI 결과물이 부적절한 편견을 반영하거나 강화하지 않도록 보호합니다. 이는 공정성과 중립성이 직업적 의무인 법률 분야에서 특히 법률 맥락에서 매우 중요합니다.

이러한 평가 기준을 통해 LexisNexis는 법률 AI의 가능성을 최대한 활용하면서도, 윤리성과 전문성을 지키기 위한 안전장치를 마련하고 있습니다.

LexisNexis AI 기반 솔루션을 경험해 보세요

Data Discovery and Enrichment 팀은 AI 솔루션 개발 전 과정에서 인간의 감독을 유지하겠다는 LexisNexis의 철학을 가장 잘 보여주는 존재입니다. 이 법률 전문가들은 기술적 가능성과 고객에게 제공되는 콘텐츠 사이를 연결하며, AI 신뢰성의 핵심 수호자 역할을 수행합니다.

LexisNexis의 AI 기반 솔루션을 통해, 책임 있고 안전한 법률 AI의 기준을 어떻게 만들어가고 있는지 직접 확인해 보시기를 바랍니다.

＊링크된 페이지는 영어 페이지입니다.
＊본 글은 2026년 1월에 게재된 미국 기사를 번역한 것입니다. 블로그 원문 기사 (영어):

Humans in the Loop: The People Powering Trusted Legal AI