AI에게 긴 문서를 요약시킬 때 중요한 내용이 빠지는 이유와 줄이는 방법
긴 문서의 AI 요약에서 조건·예외·숫자가 빠지는 이유를 살펴봅니다. 문서를 나누는 기준, 근거를 함께 요청하는 예시, 최종 요약을 원문과 대조하는 순서를 정리했습니다.
안녕하세요. Jay입니다!
긴 자료를 AI로 요약하면 문장은 매끈한데, 정작 필요한 조건이나 예외가 빠질 때가 있습니다. 읽기 좋은 요약과 판단에 충분한 요약은 다를 수 있습니다. 요청 기준과 확인 순서를 정해 두면 이런 누락을 찾아내기 쉬워집니다.
긴 문서를 넣었다고 모두 반영되는 것은 아닙니다
요약은 내용을 줄이는 작업입니다. “핵심만 짧게”라고 요청하면 독자에게 중요한 세부 조건까지 생략될 여지가 있습니다. PDF에서 표나 각주가 제대로 추출되지 않았다면, 요약 전에 입력부터 불완전할 수도 있습니다. 원문에서 중요한 구절 하나를 골라 AI가 읽은 내용에 있는지 먼저 확인해 보세요.
길이도 고려해야 합니다. 2023년 연구 Lost in the Middle에서는 다중 문서 질의응답과 키·값 검색에서 정보의 위치에 따라 성능이 달라졌습니다. 다만 모든 최신 모델의 요약 성능을 입증한 실험은 아닙니다. 여기서 얻을 실용적인 시사점은 긴 입력을 받는 능력과 필요한 내용을 빠짐없이 활용하는 능력을 구분하자는 것입니다.
분량보다 목차와 기준을 먼저 나눠 보세요
문서를 무조건 같은 글자 수로 자르면 표와 설명, 규칙과 예외가 떨어질 수 있습니다. 먼저 장·절 단위로 나누고 제목과 원문 쪽수를 유지하세요. PDF 뷰어 쪽수와 문서에 인쇄된 쪽수가 다르면 어느 기준인지도 적어 둡니다.
각 부분에는 같은 추출 기준을 적용합니다. 예를 들어 안내문이라면 대상, 해야 할 일, 기한, 예외, 확인할 항목을 먼저 뽑고, 그다음 전체 요약으로 합치는 방식입니다. 이는 누락을 점검하기 위한 작업 방법이며 정확성을 보장하는 공식은 아닙니다.
아래는 특정 문서와 무관한 요청문 예시입니다.
아래 문서를 요약하기 전에 다음 항목을 표로 추출해 줘.
- 주요 주장 또는 결정
- 수치와 날짜, 적용 조건, 예외
- 각 항목의 근거가 있는 절 제목과 원문 쪽수
본문과 표·각주를 함께 확인하고, 제공된 내용에 없는 정보는
추측하지 말고 '원문에서 확인되지 않음'으로 표시해 줘.
그다음 이 표를 바탕으로 요약하되, 조건과 예외는 보존해 줘.
쪽수 정보가 없다면 만들지 말고 절 제목으로 표시해 줘.
Anthropic의 2023년 장문 회수 실험에서도 답변 전에 관련 근거를 추출하는 방법이 도움이 됐습니다. 이 결과를 모든 도구에 그대로 적용할 수는 없지만, 요약과 근거를 함께 살펴보는 절차를 설계할 때 참고할 수 있습니다.
마지막에는 요약이 아니라 원문을 확인하세요
부분 요약을 다시 요약하면 앞에서 빠진 조건이 그대로 사라질 수 있습니다. 최종본을 만든 뒤에는 원문으로 돌아가 다음을 대조하세요.
- 숫자·단위·날짜: “최대”, “이상”, “이내” 같은 범위 표현도 남았는가?
- 부정·조건·예외: “할 수 있다”가 “해야 한다”로 바뀌지 않았는가?
- 근거 위치: 표시된 쪽이나 절에 실제로 해당 내용이 있는가?
가상의 문장이 “신청 후 7일 이내, 단 주말 제외”라면 “7일 이내 처리”만 남긴 요약은 조건을 잃은 것입니다. 이런 문장을 기준으로 누락 점검을 요청하고 직접 대조하세요. AI가 붙인 쪽수나 인용도 확인 대상입니다.
요약 분량보다 먼저 정할 것
요약 분량을 먼저 정하기보다 빠지면 안 되는 항목을 먼저 정하는 방식을 권합니다. 전체 흐름은 짧게 읽되, 숫자·조건·예외는 근거 표로 따로 남겨 두면 검토하기 좋습니다. 중요한 판단에 사용할 부분은 원문을 직접 읽으세요.
결론
긴 문서는 목차를 유지해 나누고, 같은 기준으로 근거를 추출한 뒤 요약해 보세요. 마지막에 숫자와 예외를 원문과 대조하면 매끄러운 문장 속에 숨은 누락을 발견하는 데 도움이 됩니다.
다음에도 유익한 포스팅으로 찾아오겠습니다. 감사합니다!