제미나이 4 카본, 7시간 반 로봇 팔 휘두르다 집게 부쉈다…로봇 시험 1위는 '줄자 눈금 읽은' 페이블 5.2
X 첫 글 2일 전@ArtificialAnlys ♥ 511조회 10
AI 모델 평가 업체 아티피셜 애널리시스가 실제 로봇 팔을 AI 모델에 맡기는 새 시험에서 구글 제미나이 4 카본이 로봇 집게를 부쉈다고 12일(현지시간) 밝혔다.
아티피셜 애널리시스는 X에 "제미나이 4 카본이 우리 팔 하나를 부쉈다"며 카본이 AA-로보틱스 v0.1 실험실에서 7시간 33분 동안 로봇 팔을 이리저리 부딪치다 집게(그리퍼)를 망가뜨렸고, 그 과제는 다시 시켰다고 적었다. 이 글은 '좋아요' 500여 개를 받았다.
같은 시험 1위는 클로드 페이블 5.2(75점)였고 GPT-6 아스트라(69점), GPT-6.1 솔(65점)이 뒤를 이었다. 페이블 5.2는 '상자 크기 재기' 과제에서 처음으로 점수를 받은 모델이다. 준비물로 놓인 줄자를 집어 쓰지 않고 영상에 보이는 줄자 눈금을 기준 삼아 상자 크기를 어림했다고 이 업체는 설명했다. AI 모델이 화면 속 작업을 넘어 실제 기계를 움직이는 '피지컬 AI'로 넓어지면서 이런 실물 시험도 늘고 있다.
반응은 갈렸다. "로봇 연구실마다 첫날 집게 부수는 사람이 하나씩 있는데 이제 제미나이가 그 사람"이라는 농담과 "구글에 수리비를 청구하라"는 답글이 달렸다. 반면 "눈금이 화면 밖에 있으면 통하지 않는 요령"이라며 자가 보이지 않는 조건으로 다시 재야 한다는 지적, 카본의 재시도 결과가 점수에 들어갔는지 업체가 분명히 밝히지 않았다는 지적도 나왔다.
“Gemini 4 Carbon broke one of our arms….”
