같은 과제를 여러 도구로 만들고 비용과 시간을 같은 잣대로 잰 기록. 설계와 채점 방법까지 공개합니다.
클로바 OCR, 업스테이지 OCR, 클로드 하이쿠 5.5, 제미나이 3.8 플래시, GPT-6 루나 등 10가지 방법으로 영수증, 계약서, 공문의 항목을 뽑고 책 쪽을 통째로 옮겨 적었습니다. 영수증과 계약서는 하이쿠 5.5가 문서 1건에 약 1원으로 가성비가 가장 좋았고, 흐리게 찍은 사진은 제미나이 플래시가 버텼고, 책 200쪽은 24쪽을 모두 옮긴 방법 중 업스테이지 Document OCR이 0.30달러로 가장 쌌습니다. 하이쿠 5.5는 책 원문을 통째로 재현할 수 없다며 거절했습니다.
AI 업무 자동화에 어떤 모델을 쓸지, 다이어그램, 강의 슬라이드, 웹페이지, 차트, 대외 문서, 블로그 초안, 웹 리서치, 브라우저 작업까지 실제 업무 11가지로 비교했습니다. GPT-6 Luna, GPT-5.6 Luna, Claude Haiku 5.5, Haiku 4.5, Sonnet 5.5에 같은 일을 3번씩, 모두 165번 맡겼습니다. 기계로 잰 규격은 하이쿠 5.5와 소넷 5.5가 33번 모두 통과했고, 그림, 차트, 문서 결과물을 사람이 사람이 채점한 점수(평가자 1명)는 가장 싼 GPT-6 Luna가 가장 높았습니다.
GPT 루나와 클로드 하이쿠 5.5를 공식 벤치마크가 아니라 실제 업무 과제 6개(추출, 분류, 채점, 표 분석, 규칙 글쓰기, 코드 수정)로 비교했습니다. GPT-6 Luna, GPT-5.6 Luna, Claude Haiku 4.5, Claude Sonnet 5.5까지 모델 5개를 과제마다 3번씩, 모두 90번 돌려 정확도, 시간, 비용을 쟀습니다. 추출, 분류, 표 분석, 코드 수정은 다섯 모델 모두 만점이었고, 점수 차이는 대부분 자기소개서 채점에서 났습니다.
AI 에이전트 브라우저 Aside에 클로드와 GPT 모델을 하나씩 연결해 같은 일 세 가지(웹 검색, 쇼핑몰 조건 비교, 예약 폼 입력)를 9번씩 맡기고 정확도, 소요 시간, 비용을 쟀습니다. Claude Sonnet 5.5, Claude Opus 5.5, GPT-5.6 Sol은 9번 모두 만점이었고 가장 싼 GPT-6 Luna는 조건 비교에서 두 번 틀렸습니다. 실험 설계, 과제별 점수, 클로드 연결의 캐시 쓰기 비용, 상황별 추천까지 그래프로 정리했습니다.
같은 발표자료 5장을 python-pptx 소유 코드, codex 내장 image_gen, Gemini nano-banana-pro, Canva MCP, Genspark 두 티어, Claude Design으로 각각 만들고 비용과 시간, 규격 준수를 실측했습니다. 프롬프트와 디자인 규격을 문자 단위로 똑같이 주고 잰 결과, 가장 비싼 경로가 가장 규격을 못 지켰습니다. 비용은 회계 기준이 갈리고 한 경로는 아예 못 쟀는데, 그 사정까지 그대로 적었습니다. 실험 설계와 채점 방법, 그리고 제 채점표가 놓친 항목까지 그대로 공개합니다.
