실시간 업데이트
오픈AI, 숨겨 온 사전학습 성적표 공개하고 업계 공동 AI 개발 상한선 제안
X 첫 글 3시간 전@sama ♥ 2,900조회 32
오픈AI가 그동안 밖에 내놓지 않던 사전학습 성적표를 처음 공개하고, AI 개발사들이 함께 넘지 않을 '공동 상한선'을 정하자고 제안했다. 샘 올트먼 최고경영자(CEO)는 "오픈AI가 근래 내놓은 것 가운데 가장 중요한 글"이라고 했다.
22일(현지시간) 오픈AI 블로그에 따르면 야쿱 파호츠키 수석과학자는 '퍼플렉시티와 지능'이라는 글에서 GPT-3.5부터 최신 모델까지 기본 모델의 로그 퍼플렉시티를 차트로 공개했다. 퍼플렉시티는 모델이 다음 단어(토큰)를 얼마나 잘 맞히는지 재는 값으로, 낮을수록 똑똑하다. 오픈AI 내부 코드로 만든 평가 데이터 기준 GPT-3.5는 약 0.99, GPT-4는 약 0.91이었다. 파호츠키는 0.8 아래로 내려오자 사이버보안과 수학에서 판을 바꾸는 능력이 나타났고, 약 0.76짜리 모델로 바꾼 뒤엔 수학 미해결 문제 풀이가 "슬랙 스레드 하나에 줄줄이" 올라왔다고 적었다. 차트 맨 끝에는 이름 없는 '내부 모델'이 약 0.73에 찍혀 있다. 최신 공개 모델 GPT-6.2 아스트라(약 0.76)보다 한 칸 아래다. 각주에는 2026년 들어 곡선이 가팔라졌으며 최근 모델 설계엔 AI가 의미 있게 기여했다고 썼다.
제안의 핵심은 상한선이다. 파호츠키는 로그 퍼플렉시티 0.68~0.7 구간에서 또 다른 큰 능력이 나올 것으로 내다봤다. 그는 개발사들이 퍼플렉시티 같은 지표로 공동 한도를 정하고, AI 행동을 이해·감시하는 기술이 사고 사슬(CoT) 모니터의 후속 기술 같은 구체적 단계에 이를 때까지 넘지 말자고 했다. 이르면 2027년 AI가 사전학습 연구를 직접 앞당기는 '눈사태'가 올 수 있다는 경고도 붙였다. 경쟁사에 오픈AI의 위치를 드러내는 부담보다 공동 안전 기준이 더 급하다는 설명이다. 올트먼은 X에 "업계가 공동 한도에 합의하길 바란다"며 연구소들이 백악관 협약에서 안전 기준을 만들기로 한 만큼 이 논의가 보탬이 될 것이라고 썼다.
파호츠키의 X 글은 1시간여 만에 조회수 38만회, '좋아요' 2700개를 넘겼다. 답글에는 차트 속 "내부 모델?"을 묻는 반응이 몰렸다. 한계도 있다. 연구소마다 평가·학습 데이터가 달라 수치를 맞대 보기 어렵고, 생각하고 답하는 추론 능력은 퍼플렉시티에 잡히지 않는다. 파호츠키도 이 두 가지를 과제로 꼽았다.
댓글 0
본문 문장을 드래그하거나 꾹 눌러 고르면 그 문장에 댓글을 달 수 있어요.
“This is the most important thing OpenAI has published in awhile.”
