문서 요약용 AI 도구, 고르는 기준

문서 요약에 ChatGPT, Gemini, Claude 중 무엇을 써야 할까요? 같은 문서와 같은 요청을 세 도구에 넣고 결과를 비교해 봤습니다.

그래서 뭘 쓰면 되나요?

가장 현실적인 답은 “지금 쓰는 도구를 그대로 쓰고, 요청문만 바꾸라”입니다. 이번 실험에서 세 도구 모두 근거 문장이 100% 일치해서, 도구를 갈아탈 이유가 크지 않았습니다. 상황별로는 이렇게 시작하세요.

이런 경우라면	이렇게 시작하세요	이유 (이번 실험 기준)
이미 쓰는 AI 도구가 있다	그 도구를 그대로 쓰고, 요청문만 바꾸세요	세 도구 모두 근거 문장이 모두 원문과 일치했습니다.
가입 없이 바로 해 보고 싶다	ChatGPT(로그인 없이) + 요청문 + 두 줄 문구	가입 없이 약 2만 6천 자를 넣고 답을 받았습니다. 다만 문서에 없는 질문을 7번 했을 때 2번은 문서에 없는 내용을 문서의 내용처럼 답했으므로, 두 줄 문구는 꼭 붙이세요.
구글 계정이 있고 대화 기록을 남기고 싶지 않다	Gemini의 임시 채팅 + 요청문	임시 채팅에서 근거 문장 9개가 모두 일치했고, 문서에 없는 질문에는 “없다”고 답했습니다(1번).
요약에 구체적인 사례와 숫자까지 담고 싶다	Claude + 요청문	Claude만 요약에 병원 사례와 수치를 넣었고, “원문에 명시 없음에 해당하는 항목이 없다”고 직접 밝혔습니다. 다만 이번에는 유료 계정으로 실행해서, 무료에서도 같은지는 확인하지 못했습니다.
개인정보나 비공개 문서를 요약해야 한다	어떤 도구든 설정부터 확인하세요	서비스마다 대화 기록과 학습 이용 설정이 다릅니다.

한 줄 결론: 도구를 새로 고르기 전에, 지금 쓰는 도구에 이전 글의 요청문을 넣고 근거 문장을 검색해 보세요. 확인이 되면 그 도구를 쓰면 됩니다.

이 추천은 문서 1건, 각 도구 1회 실행에 기반한 것이라 절대적인 순위가 아닙니다.

도구를 고르는 4가지 기준

기준	확인할 것	이번 실험에서 본 것
1. 무료로 쓸 수 있나	가입이나 결제 없이 시작할 수 있는지	ChatGPT는 로그인하지 않은 상태에서도 문서를 넣고 답을 받았습니다. Gemini는 구글 계정으로 바로 사용했습니다. Claude는 유료 계정으로 실행해서 무료 사용 여부는 확인하지 못했습니다.
2. 긴 문서를 한 번에 넣을 수 있나	내 문서 길이를 한 번에 받아 주는지	약 2만 6천 자짜리 문서를 세 도구 모두 한 번에 받았습니다. 이보다 긴 문서는 확인하지 않았습니다.
3. 결과를 확인하기 쉬운가	요약마다 근거를 붙여 주는지	요청문에 “근거 문장을 그대로 인용해줘”라고 쓰면 세 도구 모두 그렇게 했습니다. 도구의 능력보다 요청문의 영향이 컸습니다.
4. 내 자료를 넣어도 되나	대화 기록과 학습 이용 설정	서비스마다 설정이 다릅니다. 개인정보나 비공개 문서를 넣기 전에 각 서비스의 설정을 확인하세요.

같은 요청을 세 도구에 넣었습니다

한국어 위키백과 「기계 학습」 문서(약 2만 6천 자, 원문 보기)를 세 도구에 넣고, 이전 글의 요청문을 똑같이 사용했습니다. 요청문은 “AI를 처음 접하는 직장인이 5분 안에 이해하도록 핵심 5가지로 요약하고, 항목마다 원문 문장을 그대로 인용하고, 원문에 없는 내용은 추가하지 말고, 뺀 내용 3가지를 알려달라”는 내용입니다.

	Claude	Gemini	ChatGPT
사용한 환경	유료 요금제 계정, 화면에 표시된 모델명 Opus 5.5, 기록이 남지 않는 시크릿 대화	일반 구글 계정(화면에 “업그레이드” 버튼 표시), “자동 모드(Gemini 3 모델)”, 임시 채팅	로그인하지 않은 상태, 모델명은 화면에 표시되지 않음
답변 길이	약 2,000자	약 1,600자	약 1,800자
붙인 근거 문장	11개	9개	8개
원문과 일치한 근거 문장	11개 모두	9개 모두	8개 모두

요금제와 모델이 서로 달라서, 이 표로 도구의 우열을 가릴 수는 없습니다. “같은 요청을 넣으면 확인할 수 있는 결과가 나오는가”만 본 것입니다.

근거 문장은 같았지만, 이런 차이가 있었습니다

• 구체성: Claude만 요약 안에 구체적인 사례와 숫자(병원 자료 정확도 93.2%에서 70.3%로 하락)를 넣었습니다. Gemini와 ChatGPT는 개념 중심이었습니다.
• 뺀 내용: ChatGPT는 “뺀 내용” 3가지에도 원문 근거를 붙였습니다. Claude와 Gemini는 붙이지 않았습니다.
• “원문에 명시 없음” 표시: Claude만 “이번에는 해당하는 항목이 없다”고 직접 밝혔습니다. 나머지는 이 부분을 언급하지 않았습니다.
• 형식: Gemini는 이모지를 넣었고, 한 항목에 인용문을 두 개씩 붙인 경우가 많았습니다.

방심하면 안 되는 점: 인용이 맞아도 말이 섞입니다

근거 문장은 모두 맞았지만, 세 도구 모두 요약 문장 곳곳에 원문에 없던 표현을 조금씩 섞었습니다. 틀린 내용은 아니었지만 “원문만 바탕으로”라는 조건에서는 어긋난 부분입니다.

• Gemini: “뺀 내용”에서 “Loss function”, “Gradient descent”, “Regularization”, “SVM”, “GAN” 같은 영문 표기를 썼습니다. 원문에는 한글 용어만 있고 이 표기는 없었습니다.
• Claude: “뺀 내용”의 마지막에 “업무 의사결정에 AI 예측을 쓸 때 특히 주의해야 할 부분입니다”라는 조언 한 문장을 덧붙였습니다. 원문에 없는 문장입니다.
• ChatGPT: 활용 분야를 “이미지·음성 인식, 문서 처리, 번역…”이라고 풀어 썼습니다. 원문은 “컴퓨터 비전, 음성 인식, 자연어 처리…”라고 쓰고 있고, “문서 처리”라는 말은 없습니다.

이런 부분은 근거 문장을 검색하는 것만으로는 잡히지 않습니다. 요약 문장에서 처음 보는 용어나 낯선 표현을 골라 Ctrl+F로 원문에서 찾아보세요. 원문에 없으면 AI가 덧붙인 말입니다.

내 문서로 3분 테스트

도구를 고르기 전에, 내 문서 하나로 직접 해 보는 것이 가장 정확합니다.

1. 공개해도 되는 문서 1개를 고릅니다.
2. 이전 글의 요청문을 복사해 문서와 함께 쓰려는 도구에 넣습니다.
3. 근거 문장 2~3개를 Ctrl+F로 원문에서 찾아봅니다.
4. 요약에 처음 보는 용어가 있으면 그것도 원문에서 찾아봅니다.
5. 가장 쓰기 편하고 확인이 쉬운 도구를 고릅니다.

한계와 주의할 점

• 문서 1건, 각 도구 1회 실행입니다. 같은 요청도 할 때마다 답이 달라질 수 있어서 도구의 순위를 매길 수 없습니다.
• 요금제와 모델이 서로 다릅니다. Claude는 유료, Gemini와 ChatGPT는 무료로 보이는 환경이라 공정한 성능 비교가 아닙니다.
• 한국어 위키백과 한 문서만 사용했습니다. 표나 그림이 많은 문서, 파일 업로드, 더 긴 문서는 확인하지 않았습니다.
• 중요한 문서는 원문을 꼭 보세요. 계약, 의료, 법률 문서는 요약만 믿지 마세요.
• 개인정보와 비공개 자료는 넣지 마세요. 서비스별 대화 기록과 학습 이용 설정을 먼저 확인하세요.

정리

• 세 도구 모두 “근거 문장을 그대로 인용해줘”라는 요청을 정확히 따랐습니다.
• 도구는 무료로 쓸 수 있는지, 내 문서 길이를 받는지, 확인하기 쉬운지, 내 자료를 넣어도 되는지로 고르세요.
• 근거 문장만이 아니라 요약 문장 속 낯선 표현도 원문에서 검색해 보세요.

실험 환경

• 날짜: 2026년 10월 17일
• 도구: Claude(시크릿 대화), Gemini(임시 채팅), ChatGPT(로그인하지 않은 상태). 서비스는 자주 바뀌므로 이 날짜 기준으로 읽어 주세요.
• 문서: 한국어 위키백과 「기계 학습」 (원문, CC BY-SA 4.0)

다음에 읽으면 좋은 글

• AI 요약, “요약해줘”만 쓰면 놓치는 것들
• AI가 엉뚱한 답을 낼 때 먼저 확인할 5가지