오픈 폰 에이전트 OpenMobile-2, 안드로이드 시험서 Gemini 제쳐
난징대·센스타임 등 6개 기관 연구진이 공개한 오픈 스마트폰 에이전트 OpenMobile-2의 27B 모델이 AndroidWorld에서 79.9점으로 Gemini 3.1 Pro Preview(70.7점)를 앞섰다. 다만 MobileWorld·SPA-Bench에선 상용 모델에 뒤졌다.
중국 난징대와 센스타임(SenseTime) 등 6개 기관 연구진이 공개한 오픈 스마트폰 에이전트 'OpenMobile-2'가 안드로이드 조작 벤치마크 AndroidWorld에서 79.9점을 기록했다. 구글 Gemini 3.1 Pro Preview(70.7점)보다 높다. 논문은 10월 9일 arXiv에 올라왔고, 10월 25일 해외 매체 The Decoder 보도로 주목받았다.

핵심 정리
- 270억 파라미터 모델 OpenMobile-2-27B는 AndroidWorld 79.9점으로, 바탕 모델 Qwen3.6-27B(67.1점)와 Gemini 3.1 Pro Preview(70.7점)를 앞섰다.
- 더 어려운 시험에선 상용 모델에 뒤진다. MobileWorld 50.4점(GPT-5.6 Sol 70.1점), 실기기 SPA-Bench 59.6점(Gemini 70.2점)이다.
- 연구진은 앱 110여 개 훈련장, 학습 궤적 1만1600건, 검증 가능한 과제 2000여 개, 모델 2종을 모두 공개했다고 밝혔다.
OpenMobile-2는 어떤 AI 에이전트인가
OpenMobile-2는 휴대폰 화면을 읽고 직접 눌러 가며 일을 끝내는 에이전트 2종이다. 90억 파라미터 모델은 알리바바 Qwen3.5-9B를, 270억 파라미터 모델은 Qwen3.6-27B를 바탕으로 지도학습 뒤 강화학습을 거쳤다.
연구진은 이를 "훈련 환경과 레시피를 모두 공개한, 최상위급에 근접한 모바일 에이전트"라고 소개했다. 다만 학습용 시범 데이터는 폐쇄형 모델이 만들었다. Gemini 3.1 Pro Preview가 과제 지시문을 쓰고 '교사' 에이전트 역할을 했다.
앱 110여 개로 만든 훈련장
핵심은 MobileGym++다. 상용 서비스를 본떠 새로 만든 앱 35개에 안드로이드 에뮬레이터 앱 62개를 더했다.
앱 종류를 늘리는 효과도 컸다. 학습 궤적을 2000건으로 고정하고 앱을 15개에서 53개로 늘리자, 학습에 쓰지 않은 AndroidWorld 과제 점수가 60.7점에서 67.5점으로 올랐다.
OpenMobile-2 벤치마크 성능 비교
| 모델 | AndroidWorld | MobileWorld(GUI) | SPA-Bench L3 |
|---|---|---|---|
| OpenMobile-2-27B | 79.9 | 50.4 | 59.6 |
| OpenMobile-2-9B | 74.0 | 38.5 | 48.9 |
| Gemini 3.1 Pro Preview | 70.7 | 58.1 | 70.2* |
| GPT-5.6 Sol | — | 70.1 | 68.1* |
| Qwen3.6-27B(바탕 모델) | 67.1 | 35.9 | 31.9* |
별표(*)는 연구진 재현 점수이며, 수치는 독립 검증 전이다.
화면 조작에 앱 '도구 호출'까지
논문은 앱이 일부 기능을 호출 가능한 도구로 내놓고 일반 화면도 함께 쓰는 '하이브리드' 방식도 시험했다. 50여 개 앱에 도구 300여 개를 붙였다. 하이브리드 학습 후 도구를 켜자 27B 모델의 성공률은 10.3%포인트 올랐고, 과제당 단계는 평균 5.8단계 줄었다.
평가용 MobileGym++ Bench는 앱 데이터를 검사해 채점하는 과제 215개로, 106개는 여러 앱을 오가야 한다.
배경: 붐비는 폰 에이전트 경쟁
이 분야엔 MAI-UI, GUI-Owl 같은 공개 모델이 경쟁 중이며 논문도 이들과 비교했다. Qwen 등 중국 오픈웨이트 모델의 추격 흐름과도 맞닿아 있다.
전망
모델 가중치는 허깅페이스에 올라와 있지만 논문과 프로젝트 페이지는 라이선스를 밝히지 않았다. 프로젝트 페이지는 바탕이 된 원래 MobileGym 데이터를 비상업 조건(CC BY-NC 4.0)으로 표시하고 있다. 상용화 전 조건 확인이 필요하다.
자주 묻는 질문
OpenMobile-2는 내려받을 수 있나
그렇다. 모델은 허깅페이스, 코드는 깃허브에 있다. 라이선스는 아직 명시되지 않았다.
Gemini·GPT보다 폰을 더 잘 다루나
연구진 수치로는 AndroidWorld에서만 앞서고, 나머지 두 시험에선 Gemini·GPT가 더 높다.
참고 자료
- OpenMobile-2: Building Versatile Mobile Agents with Scalable Environments and App-Native Tools — arXiv(2026년 10월 9일)
- OpenMobile-2 project page — OpenMobile-2 연구진
- OpenMobile-2 proves open-source smartphone agents can rival proprietary models — The Decoder(2026년 10월 25일)
댓글 0
현재 댓글 작성이 비활성화되어 있습니다.