아지봇(AgiBot)의 GO-3 Nano Preview가 RoboDojo 시뮬레이션 에이전트 트랙에서 평균 61.90점과 성공률 56.42%로 1위에 올랐다. 2위인 PyRUA-Lean보다 평균 점수는 6.64점, 성공률은 6.07%포인트 높다.
11
17
다만 이번 결과는 RoboDojo 전체 과제에서 거둔 성적도, 실제 로봇 환경에서의 우위를 입증한 결과도 아니다. 공개된 순위표를 보면 종합 1위와 모든 세부 항목의 1위는 구분해서 읽어야 한다.
전체 60개 과제 중 이번 순위는 시뮬레이션 결과
RoboDojo는 조작 능력을 평가하기 위해 시뮬레이션 과제 42개와 실제 환경 과제 18개를 운영한다. 10월 27일 공개된 업데이트에서 GO-3 Nano Preview는 아지봇이 제출한 시뮬레이션 에이전트 트랙 항목으로 등록됐다.
17
따라서 61.90점과 56.42%는 시뮬레이션 순위표에 해당하는 수치다. 60개 과제 전체에서 같은 결과를 냈다거나, 실제 로봇 과제에서도 1위라는 뜻으로 확대 해석해서는 안 된다.
12
17
종합 점수는 선두, 세부 능력은 엇갈려
RoboDojo 순위표에 표시된 GO-3 Nano Preview의 세부 점수는 일반화 33.66점, 정밀 조작 76.00점, 장기 과제 수행 53.50점, 기억 63.67점, 개방형 과제 55.25점이다.
12 같은 표에서 HexaShell-Preview는 일반화 34.50점, 기억 81.00점으로 GO-3 Nano Preview보다 높은 점수를 기록했다.
12
즉, 종합 점수에서 1위를 차지했더라도 모든 평가 항목에서 앞선 것은 아니다. 공개된 표만 놓고 보면 GO-3 Nano Preview는 여러 능력을 합산한 전체 결과에서 강세를 보였지만, 일반화와 기억 항목에서는 다른 시스템이 더 높은 점수를 받았다.
세부 점수를 둘러싼 보도와 순위표 사이에는 차이도 있다. 중국어 보도는 GO-3 Nano Preview의 정밀 조작 78.65점, 장기 과제 수행 68.21점, 개방형 의미 이해 61.71점을 각각 해당 부문 1위로 소개했다.
8
10 그러나 이 수치는 RoboDojo 순위표에 표시된 점수와 일치하지 않는다.
12
두 자료의 차이가 왜 생겼는지는 확인되지 않았다. 따라서 보도에 실린 수치와 순위표의 점수를 한데 섞어 해석하기보다, 출처별로 구분해 보는 편이 안전하다.
아지봇 모델을 공통 기준으로 비교했다는 의미
이번 등록은 GO-3 Nano Preview가 RoboDojo의 공통 과제와 채점 기준 아래 다른 정책들과 비교됐다는 점에서 의미가 있다. 로봇 하드웨어의 시연을 넘어, 아지봇의 로봇 조작 시스템 자체가 공개 벤치마크에서 평가받은 사례다.
12
17
그렇다고 순위만으로 모델의 구체적인 구성이나 성능의 원인을 알 수 있는 것은 아니다. 공개된 순위 정보는 벤치마크에서의 결과를 보여주지만, 특정 기술 구조가 성적을 이끌었는지, 실제 현장에서 안정적으로 작동하는지까지 설명해 주지는 않는다.
핵심은 ‘시뮬레이션 종합 1위’라는 범위
GO-3 Nano Preview의 RoboDojo 성적은 시뮬레이션 에이전트 트랙에서 평균 61.90점과 성공률 56.42%를 기록한 강한 종합 결과다. 다만 전체 벤치마크의 실제 환경 과제까지 포함한 성적은 아니며, 공개 순위표에서도 모든 세부 항목을 선도하지는 않는다. 일부 보도와 순위표의 항목별 점수 차이도 함께 고려해야 한다.
8
12
17