AI 법률서면 (2) 썸네일형 리스트형 AI 법률서면 실험실 #2 첫날 실패한 AI에게 다시 소장을 맡겨봤습니다 지난 실험에서 생성형 AI는 시작부터 연구자의 기대를 저버렸다. 동일한 차용증을 바탕으로 대여금반환청구 소장 작성을 요청하였으나, 답변의 일관성을 검증하기도 전에 서면 자체에서 실무상 문제점이 발견되었기 때문이다. 결국 제1차 실험은 AI의 일관성을 검증하는 실험이 아니라, AI가 작성한 결과물을 얼마나 신뢰할 수 있는지 확인하는 과정으로 마무리되었다.그러나 단 한 번의 결과만으로 결론을 내리는 것은 성급할 수 있다. 생성형 AI의 특성상 동일한 질문에도 매번 다른 답변이 생성될 수 있으며, 오히려 첫 번째 결과가 예외적인 사례일 가능성도 배제할 수 없다. 따라서 추가적인 검증이 필요하다.이에 따라 본 연구는 동일한 차용증, 동일한 프롬프트, 동일한 조건을 유지한 상태에서 다시 한 번 소장 작성을 요청하.. AI 법률서면 실험실 #1 AI는 대여금반환청구 소장을 제대로 작성할 수 있을까 생성형 AI의 발전으로 법률문서 작성 업무 역시 상당 부분 자동화가 가능해졌다는 평가가 이루어지고 있다. 그러나 실제 법률 실무에서 요구되는 핵심 역량은 단순한 문장 생성 능력이 아니라 동일한 사실관계에 대하여 일관된 판단과 논리를 유지하는 능력이라고 할 수 있다.본 연구는 생성형 AI의 답변 일관성을 검증하기 위한 목적으로 수행되었다. 이를 위하여 동일한 차용증을 반복적으로 입력하고, 매회 동일한 프롬프트를 사용하여 대여금반환청구 소장 작성을 요청하는 방식으로 실험을 진행하였다. 실험 조건은 가능한 한 동일하게 유지하였으며, 오직 생성 시점만을 달리하였다.본 실험의 핵심 연구 질문은 다음과 같다. 생성형 AI는 동일한 사실관계와 동일한 요청에 대하여 매번 동일하거나 유사한 결과물을 산출하는가. 또는 답.. 이전 1 다음
