Writing Test
ChatGPT vs Claude 한국어 글쓰기 테스트: 같은 원문으로 비교한 기록
“ChatGPT가 낫다”, “Claude가 낫다”처럼 결론만 말하면 실제 업무에는 도움이 적습니다. 이 글은 같은 원문과 같은 요청문을 넣었을 때 어떤 결과를 사람이 더 적게 고쳐도 되는지 확인한 기록입니다.
아이디어를 빠르게 많이 뽑을 때는 ChatGPT가 편했고, 이미 있는 문단을 차분하게 정리할 때는 Claude가 덜 흔들렸습니다. 다만 두 도구 모두 가격, 정책, 최신 기능을 직접 확인하지 않고 단정하는 문장이 생길 수 있어 최종 글에는 별도 검증 단계가 필요합니다.
테스트 입력문
테스트 주제는 “AI 도구 구독을 처음 고민하는 블로거를 위한 선택 기준”으로 잡았습니다. 같은 원문을 넣고 목차, 도입문, 확인해야 할 사실을 요청했습니다.
아래 원문을 바탕으로 초보자가 이해할 수 있는 정보성 글의 목차와 도입문을 작성해줘. 각 소제목에는 독자가 가질 질문, 확인해야 할 사실, 과장하면 안 되는 표현을 함께 적어줘. 원문: AI 도구는 무료로 시작할 수 있지만, 글을 자주 쓰거나 긴 자료를 정리하는 사람은 유료 플랜을 고민하게 된다. 문제는 결제 후에도 자주 쓰지 않으면 비용이 낭비된다는 점이다. 구독 전에는 자신의 반복 업무, 수정 시간, 출처 확인 필요성을 기준으로 판단해야 한다.
관찰 결과
| 항목 | ChatGPT 관찰 | Claude 관찰 |
|---|---|---|
| 목차 구성 | 소제목 후보가 많고 빠르게 확장됐습니다. 대신 비슷한 항목이 반복되어 2개를 합쳤습니다. | 항목 수는 적지만 흐름이 안정적이었습니다. 초보자 설명 순서가 비교적 자연스러웠습니다. |
| 도입문 | 후킹 문장이 강했지만 “반드시”, “최고” 같은 표현을 줄여야 했습니다. | 과장은 적었지만 문장이 길어 첫 문단을 두 개로 나눴습니다. |
| 검증 필요 문장 | 가격과 기능을 예시로 들 때 확인 출처가 빠지는 문장이 있었습니다. | 단정은 적었지만 최신 기능 설명은 별도 확인이 필요했습니다. |
| 사람 수정 시간 | 중복 목차 정리와 과장 표현 제거까지 약 24분이 걸렸습니다. | 긴 문장 분리와 예시 추가까지 약 18분이 걸렸습니다. |
사람이 실제로 고친 부분
수정 전 문장
AI 도구를 제대로 활용하면 누구나 글쓰기 생산성을 폭발적으로 높일 수 있습니다.
수정 후 문장
반복해서 쓰는 글의 구조가 정해져 있다면 AI 도구가 초안 작성 시간을 줄이는 데 도움이 될 수 있습니다.
수정 전 문장은 읽기 좋지만 근거 없이 결과를 크게 말합니다. 수정 후 문장은 조건을 붙였고, 독자가 자기 상황에 맞춰 판단할 수 있게 표현을 낮췄습니다.
점수표
| 평가 항목 | ChatGPT | Claude | 메모 |
|---|---|---|---|
| 아이디어 확장 | 4.5 / 5 | 3.5 / 5 | ChatGPT가 제목과 관점 후보를 더 많이 제시했습니다. |
| 문단 안정성 | 3.5 / 5 | 4.5 / 5 | Claude는 긴 설명을 차분하게 묶는 데 유리했습니다. |
| 검증 필요성 | 3 / 5 | 3.5 / 5 | 둘 다 최신 가격과 정책은 별도로 확인해야 합니다. |
| 최종 편집 부담 | 3.5 / 5 | 4 / 5 | 이번 테스트에서는 Claude 쪽 수정 시간이 조금 짧았습니다. |
실패한 조건
- “최신 가격까지 포함해줘”라고 요청하면 확인 날짜 없이 단정적인 문장이 생겼습니다.
- 블로그 제목 후보는 많았지만, 검색 의도와 맞지 않는 과장형 제목을 걸러야 했습니다.
- 초보자용 글이라고 요청해도 “워크플로우”, “컨텍스트” 같은 용어 설명이 빠지는 경우가 있었습니다.
- AI가 만든 FAQ는 그럴듯했지만 실제 독자가 물을 질문인지 다시 골라야 했습니다.
어떤 도구를 먼저 써볼까?
제목 후보, 글감 확장, 짧은 문단 변형, 블로그 초안처럼 빠른 발상이 필요한 작업에 먼저 맞춰봅니다.
이미 쓴 글을 정리하거나 긴 문서를 차분한 문체로 바꾸는 작업이 많을 때 먼저 확인합니다.
한 달에 2~3번 이하로만 쓴다면 무료 플랜으로 충분한지 먼저 기록하는 편이 낫습니다.