#LLM 벤치마크

LLM 벤치마크 태그가 붙은 글 2편

• 실험

  AI 업무 자동화, 어떤 모델에 맡길까: 실제 작업 11개로 GPT 루나와 클로드 하이쿠 비교

  AI 업무 자동화에 어떤 모델을 쓸지, 다이어그램, 강의 슬라이드, 웹페이지, 차트, 대외 문서, 블로그 초안, 웹 리서치, 브라우저 작업까지 실제 업무 11가지로 비교했습니다. GPT-6 Luna, GPT-5.6 Luna, Claude Haiku 5.5, Haiku 4.5, Sonnet 5.5에 같은 일을 3번씩, 모두 165번 맡겼습니다. 기계로 잰 규격은 하이쿠 5.5와 소넷 5.5가 33번 모두 통과했고, 그림, 차트, 문서 결과물을 사람이 사람이 채점한 점수(평가자 1명)는 가장 싼 GPT-6 Luna가 가장 높았습니다.

  2026년 10월 8일읽는 데 약 6분

  
• 실험

  GPT 루나 vs 클로드 하이쿠 5.5, 업무 과제 6개로 비교한 결과

  GPT 루나와 클로드 하이쿠 5.5를 공식 벤치마크가 아니라 실제 업무 과제 6개(추출, 분류, 채점, 표 분석, 규칙 글쓰기, 코드 수정)로 비교했습니다. GPT-6 Luna, GPT-5.6 Luna, Claude Haiku 4.5, Claude Sonnet 5.5까지 모델 5개를 과제마다 3번씩, 모두 90번 돌려 정확도, 시간, 비용을 쟀습니다. 추출, 분류, 표 분석, 코드 수정은 다섯 모델 모두 만점이었고, 점수 차이는 대부분 자기소개서 채점에서 났습니다.

  2026년 10월 8일읽는 데 약 7분