Generalist AI, 3~12초 시연만으로 새 작업을 학습하는 로봇 파운데이션 모델 GEN-1.5 공개
기사 3줄 요약
- 1GEN-1.5는 3~12초 길이의 센서·모터 데이터를 30초 문맥 창에 넣기만 하면 새로운 물리 작업을 수행하는 로봇 파운데이션 모델이다.
- 2추가 학습(그라디언트 업데이트), 파인튜닝, 작업별 프로그래밍 없이 오직 한 번의 시연으로 작업을 익힌다.
- 310가지 다양한 조작 작업 평가에서 원샷 인컨텍스트 프롬프팅 방식이 평균 59% 성공률을 기록했다.
초등학생도 이해하는 NEWS 설명
로봇이 새로운 일을 배우려면 보통 수많은 데이터와 재학습(파인튜닝)이 필요했어요.
GEN-1.5는 친구가 요리하는 모습을 3~12초만 보고 따라 하는 것처럼, 짧은 시연 데이터만으로 작업을 수행해요.
‘로봇 파운데이션 모델’이 동작 데이터의 패턴을 읽고 30초 문맥 창 안의 시연 내용을 그대로 해석하기 때문이에요.
인사이트 & 시사점
이번 발표는 로봇이 작업별로 프로그래밍되던 방식에서, 데이터 패턴을 보고 즉석에서 작업을 이해하는 방식으로 옮아가는 흐름을 보여준다.
파인튜닝 없이 한 번의 시연으로 59% 성공률을 낸 것은 모든 로봇 작업을 다시 학습할 필요 없이 한 모델로 확장할 수 있는 가능성을 의미한다.
용어해설
이 기사에서 GEN-1.5 로봇 파운데이션 모델을 공개한 AI 회사 이름이다. 이 회사는 시연 데이터만으로 새로운 작업을 일반화하는 범용 로봇 AI를 목표로 한다.
Generalist AI가 공개한 로봇 파운데이션 모델이다. 3~12초 길이의 센서·모터 시연 데이터를 입력받아, 추가 학습 없이 해당 물리 작업을 수행한다.
다양한 로봇 동작 데이터로 미리 학습되어 새로운 작업에도 적용할 수 있는 대규모 AI 모델을 뜻한다. GPT 같은 언어 모델이 다양한 글을 처리하는 것처럼, 로봇이 다양한 물리 작업을 처리하도록 돕는다.
모델을 재학습하지 않고, 입력 앞에 예시 1개를 붙여 그 패턴을 따르게 하는 기법이다. 이 기사에서는 로봇 시연 데이터 1개가 일종의 예시로 주어지고, GEN-1.5가 그 예시를 보고 작업을 수행한다.