🇺🇸 English 🇰🇷 한국어 🇯🇵 日本語
홈 › AI & 머신러닝
AI & 머신러닝

오픈 폰 에이전트 OpenMobile-2, 안드로이드 시험서 Gemini 제쳐

난징대·센스타임 등 6개 기관 연구진이 공개한 오픈 스마트폰 에이전트 OpenMobile-2의 27B 모델이 AndroidWorld에서 79.9점으로 Gemini 3.1 Pro Preview(70.7점)를 앞섰다. 다만 MobileWorld·SPA-Bench에선 상용 모델에 뒤졌다.

중국 난징대와 센스타임(SenseTime) 등 6개 기관 연구진이 공개한 오픈 스마트폰 에이전트 'OpenMobile-2'가 안드로이드 조작 벤치마크 AndroidWorld에서 79.9점을 기록했다. 구글 Gemini 3.1 Pro Preview(70.7점)보다 높다. 논문은 10월 9일 arXiv에 올라왔고, 10월 25일 해외 매체 The Decoder 보도로 주목받았다.

앱 아이콘이 놓인 안드로이드 홈 화면을 띄운 원플러스 노드 스마트폰 정면
안드로이드 스마트폰 홈 화면(자료사진). 사진: Gannu03 / 위키미디어 공용(CC BY-SA 4.0)

핵심 정리

  • 270억 파라미터 모델 OpenMobile-2-27B는 AndroidWorld 79.9점으로, 바탕 모델 Qwen3.6-27B(67.1점)와 Gemini 3.1 Pro Preview(70.7점)를 앞섰다.
  • 더 어려운 시험에선 상용 모델에 뒤진다. MobileWorld 50.4점(GPT-5.6 Sol 70.1점), 실기기 SPA-Bench 59.6점(Gemini 70.2점)이다.
  • 연구진은 앱 110여 개 훈련장, 학습 궤적 1만1600건, 검증 가능한 과제 2000여 개, 모델 2종을 모두 공개했다고 밝혔다.

OpenMobile-2는 어떤 AI 에이전트인가

OpenMobile-2는 휴대폰 화면을 읽고 직접 눌러 가며 일을 끝내는 에이전트 2종이다. 90억 파라미터 모델은 알리바바 Qwen3.5-9B를, 270억 파라미터 모델은 Qwen3.6-27B를 바탕으로 지도학습 뒤 강화학습을 거쳤다.

연구진은 이를 "훈련 환경과 레시피를 모두 공개한, 최상위급에 근접한 모바일 에이전트"라고 소개했다. 다만 학습용 시범 데이터는 폐쇄형 모델이 만들었다. Gemini 3.1 Pro Preview가 과제 지시문을 쓰고 '교사' 에이전트 역할을 했다.

앱 110여 개로 만든 훈련장

핵심은 MobileGym++다. 상용 서비스를 본떠 새로 만든 앱 35개에 안드로이드 에뮬레이터 앱 62개를 더했다.

앱 종류를 늘리는 효과도 컸다. 학습 궤적을 2000건으로 고정하고 앱을 15개에서 53개로 늘리자, 학습에 쓰지 않은 AndroidWorld 과제 점수가 60.7점에서 67.5점으로 올랐다.

OpenMobile-2 벤치마크 성능 비교

OpenMobile-2 논문이 밝힌 주요 결과(단위 %)
모델AndroidWorldMobileWorld(GUI)SPA-Bench L3
OpenMobile-2-27B79.950.459.6
OpenMobile-2-9B74.038.548.9
Gemini 3.1 Pro Preview70.758.170.2*
GPT-5.6 Sol—70.168.1*
Qwen3.6-27B(바탕 모델)67.135.931.9*

별표(*)는 연구진 재현 점수이며, 수치는 독립 검증 전이다.

화면 조작에 앱 '도구 호출'까지

논문은 앱이 일부 기능을 호출 가능한 도구로 내놓고 일반 화면도 함께 쓰는 '하이브리드' 방식도 시험했다. 50여 개 앱에 도구 300여 개를 붙였다. 하이브리드 학습 후 도구를 켜자 27B 모델의 성공률은 10.3%포인트 올랐고, 과제당 단계는 평균 5.8단계 줄었다.

평가용 MobileGym++ Bench는 앱 데이터를 검사해 채점하는 과제 215개로, 106개는 여러 앱을 오가야 한다.

배경: 붐비는 폰 에이전트 경쟁

이 분야엔 MAI-UI, GUI-Owl 같은 공개 모델이 경쟁 중이며 논문도 이들과 비교했다. Qwen 등 중국 오픈웨이트 모델의 추격 흐름과도 맞닿아 있다.

전망

모델 가중치는 허깅페이스에 올라와 있지만 논문과 프로젝트 페이지는 라이선스를 밝히지 않았다. 프로젝트 페이지는 바탕이 된 원래 MobileGym 데이터를 비상업 조건(CC BY-NC 4.0)으로 표시하고 있다. 상용화 전 조건 확인이 필요하다.

자주 묻는 질문

OpenMobile-2는 내려받을 수 있나

그렇다. 모델은 허깅페이스, 코드는 깃허브에 있다. 라이선스는 아직 명시되지 않았다.

Gemini·GPT보다 폰을 더 잘 다루나

연구진 수치로는 AndroidWorld에서만 앞서고, 나머지 두 시험에선 Gemini·GPT가 더 높다.

참고 자료

#OpenMobile-2 #스마트폰 AI 에이전트 #모바일 에이전트 #AndroidWorld #오픈소스 AI #센스타임 #난징대 #Qwen #안드로이드
정
정승
AI Newsway · 개발자

AI Newsway의 편집 책임자이자 개발자입니다. 인공지능·개발 도구·클라우드·생산성 기술 기사를 씁니다.

기자의 다른 기사 ›
저작권자 © AI Newsway 무단전재 및 재배포, AI학습 및 활용 금지
공유
f X K

댓글 0

현재 댓글 작성이 비활성화되어 있습니다.

첫 댓글을 남겨보세요.