"오픈AI 사상 최악" vs "ARC-AGI 3 만점"…GPT-6.2 아스트라, 값 20% 내렸지만 첫날 평가는 정반대
X 첫 글 44시간 전@OpenAI ♥ 26,577조회 51
"오픈AI가 지금까지 내놓은 모델 중 최악이라고 생각한다." 출시 전부터 GPT-6.2 아스트라를 써 봤다는 개발자 유튜버 테오(theo)가 17일(현지시간) X에 올린 글이다. 이 글은 '좋아요' 6900개를 받았다. 같은 날 모델 평가 계정 루미나벤치는 아스트라가 ARC-AGI 3에서 100%를 받았다며 "값에 비하면 괴물"이라고 썼다. 한 모델을 두고 첫날 평가가 정반대로 갈렸다.
오픈AI 공식 블로그에 따르면 이날 나온 모델은 둘이다. 어려운 일을 맡는 최상위 모델 'GPT-6.2 아스트라(Astra)'와 일상 업무용 'GPT-6.2 솔(Sol)'이다. 챗GPT와 코덱스(Codex), 응용프로그램인터페이스(API)에서 바로 고를 수 있다. API 가격은 아스트라가 100만 토큰당 입력 8달러, 출력 40달러로 GPT-6 아스트라보다 20% 내렸고 캐시 입력은 0.4달러로 60% 깎았다. 솔은 입력 2달러, 출력 10달러로 GPT-6.1 솔과 같다. 오픈AI는 여러 단계 전문 업무를 보는 '에이전츠 라스트 이그잼'에서 아스트라가 클로드 페이블 5.2보다 5.5점 높았고 비용은 5% 수준이었다고 밝혔다. 코드 수정 평가 '프런티어코드 2.0'에서는 솔이 아스트라와 0.5점 차이였지만 비용은 5분의 1이었다.
외부 지표는 덜 후했다. 스페인 AI 유튜버 닷CSV는 아티피셜 애널리시스 지능 지수에서 아스트라가 62점으로 페이블 5.2(65점)에 못 미친다면서도 비용은 7분의 1 수준이라고 정리했다. 같은 기관의 코딩 에이전트 지수에서 아스트라와 솔이 이전 모델보다 뒷걸음질했다는 글은 '좋아요' 1500개를 받았다. 영국 AI안보연구소(AISI)는 출시 전 시험에서 GPT-6 아스트라보다 탈옥 방어가 크게 약해졌다고 밝혔고, 오픈AI가 이후 안전장치를 고쳤지만 아직 다시 검증하지 않았다고 덧붙였다.
반론도 나왔다. 테오가 "앤트로픽이 얼마나 앞서 있는지 말로 하기 어렵다"고 쓴 글에는 "법률 일을 하는데 앤트로픽 모델은 오픈AI 모델에 비하면 한참 모자란다"는 답글이 '좋아요' 127개를 받았다. 블로그에 따르면 아스트라는 법률 과제 평가 '하비 LAB-AA'에서 페이블 5.2의 통과율을 두 배 넘게 웃돌았다. 유튜버 닉 사라에프의 '기대 이하' 리뷰 영상에는 "일상 업무의 95%를 4분의 1 값에 해낸다면 나머지 5%는 다른 데서 싸게 사면 된다"는 댓글이 가장 많은 공감을 받았다.
댓글 0
본문 문장을 드래그하거나 꾹 눌러 고르면 그 문장에 댓글을 달 수 있어요.
“Some of you have been asking very politely. Some of you have just been asking. GPT-6.2 Astra and Sol are now available.”
