옵션
집
뉴스
알리바바, 실세계용 다중 모달 파운데이션 모델 ‘Qwen-UI-Agent’ 공개

알리바바, 실세계용 다중 모달 파운데이션 모델 ‘Qwen-UI-Agent’ 공개

2026년 9월 12일
138

알리바바는 실제 환경에서 작동하도록 설계된 GUI 에이전트용 파운데이션 모델인 ‘Qwen-UI-Agent’를 공식적으로 선보였습니다. 모바일, 데스크톱, 웹, 딥 서치 환경을 아우르는 이 모델은 기존의 시뮬레이션 테스트를 넘어, 복잡한 물리적 기기 전반에서 원활하게 작동합니다.

image.png

업계 선두주자를 능가하는 성능

Qwen-UI-Agent는 권위 있는 벤치마크와 실제 환경 모두에서 탁월한 성능을 입증했습니다:

모바일 성능: MobileWorld에서 82.1%라는 인상적인 점수를 기록하며, 여러 주요 국제 플래그십 모델을 능가했습니다. 100개 이상의 실제 기기를 포함한 자체 벤치마크인 MobileWorld-Real에서 성공률은 92.2%에 달했으며, Android Daily 작업에서는 거의 완벽한 결과를 기록했습니다. 데스크톱 성능: OSWorld-Verified에서 79.5%의 점수를 기록한 이 모델은 기준 모델에 비해 여러 작업에 걸친 실행 단계를 대폭 줄였습니다.웹 및 일반 기능: WebArena 웹 테스트에서 모든 비교 모델 중 1위를 차지했습니다. 일반 및 에이전트 기능이 기본 훈련 모델보다 뛰어나, 롱테일 요청도 손쉽게 처리할 수 있습니다.

시뮬레이션과 현실 간의 격차 해소

시뮬레이션과 실제 적용 간의 격차를 해소하기 위해, Qwen-UI-Agent는 100대 이상의 실제 휴대폰과 150개 이상의 애플리케이션으로 구성된 실시간 모바일 환경을 활용합니다. 이 환경은 작업 생성, 궤적 수집 및 모델 훈련을 지원합니다. 또한 연구팀은 400개 이상의 과제를 포함하는 실제 기기 벤치마크인 ‘MobileWorld-Real’을 도입하여, 실제 기기 성능을 기반으로 정확한 모델 선정을 가능하게 했습니다.

image.png

간소화된 명령어와 강력한 보안

표준 GUI 조작을 넘어, 이 모델은 명령줄 명령을 직접 실행할 수 있습니다. 단일 결정으로 일괄 작업을 출력함으로써 실행 경로를 단축하고 효율성을 높입니다. 전 과정에 걸쳐 포괄적인 보안 메커니즘이 통합되어 있습니다. 모델은 불법적이거나 고위험 요청이 포함된 작업을 거부하고 종료합니다. 결제, 데이터 삭제, 개인정보 승인 등 민감한 작업의 경우, 중요한 단계에서 일시 중지하여 사용자의 확인을 기다립니다.

또한, 이 모델은 100단계가 넘는 실행 경로에 대한 온라인 강화 학습을 지원합니다. 적응형 커리큘럼 학습과 결합되어, 까다로운 장기 과제를 해결하는 능력을 지속적으로 향상시킵니다.

프로젝트 홈페이지: https://tongyi-mai.github.io/Qwen-UI-Agent/

관련 기사
Gecko Robotics는 NVIDIA와 파트너십을 맺어 AI 에이전트 보안 및 제어를 통합합니다 Gecko Robotics는 NVIDIA와 파트너십을 맺어 AI 에이전트 보안 및 제어를 통합합니다 Gecko Robotics는 검사 로봇 군단에 NVIDIA의 최신 에이전트 AI 보안 계층을 활용하고 있습니다. 출처: Gecko RoboticsNVIDIA Corp.은 오늘 오픈 에이전트 안전 플랫폼을 공개했으며, 여기에는 오픈소스 OpenShell 소프트웨어와 Sentry 참조 시스템 설계가 포함되어 있습니다. 이 도구들은 AI 에이전트를 운영하는 로봇의 하드웨어, 컴퓨팅, 소프트웨어 전반에 대한 거버넌스와 제어를 강화하기 위해 설계되었습니
구글 제미니, 경량 AI 어시스턴트 확산을 위해 ‘플로팅 버블’ 기능 개선 구글 제미니, 경량 AI 어시스턴트 확산을 위해 ‘플로팅 버블’ 기능 개선 9월 6일부터 구글은 안드로이드 사용자를 대상으로 제미니(Gemini) 인터페이스가 적용된 업데이트된 ‘축소형’ 빠른 실행 버튼을 단계적으로 출시하기 시작했습니다. 이번 업데이트를 통해 사용자는 넓은 제미니 오버레이를 스파크(Spark) 로고가 표시된 작은 플로팅 버블로 축소할 수 있게 되었으며, 이 버블은 화면 공간을 최소한으로 차지합니다.이번 개선 사항
구글, 여러분의 삶을 만화처럼 바꿔줄 역대 가장 기발한 AI 도구 ‘드림빈즈(Dreambeans)’를 공개 구글, 여러분의 삶을 만화처럼 바꿔줄 역대 가장 기발한 AI 도구 ‘드림빈즈(Dreambeans)’를 공개 실험적인 제품 설계를 담당하는 부서인 구글 랩스(Google Labs)가 일상을 더욱 생동감 있게 만들어주는 새로운 AI 기반 애플리케이션을 iOS 및 안드로이드용으로 출시했습니다.‘드림빈즈(Dreambeans)’를 소개합니다. 이름에 담긴 의미는 잠시 후에 설명해 드리겠습니다.이 도구는 정확히 무엇일까요?이 애플리케이션의 제품 책임자인 고즈데 오즈누르(G
관련 특별 주제 추천
디자인과 예술 최고의 AI 일러스트레이션 도구: 편집용 장면과 표지 아트를 더 빠르게 제작하세요
최고의 AI 일러스트레이션 도구: 편집용 장면과 표지 아트를 더 빠르게 제작하세요

2026년 최신 최고 평점 AI 일러스트레이션 도구: 저희가 엄선한 이 목록에는 멋진 편집용 장면과 눈길을 사로잡는 표지 아트를 빠르게 제작할 수 있는, 강력하고 정교하게 설계된 최고의 도구들이 포함되어 있습니다. 각 도구는 엄격한 실전 테스트를 거쳤으며, 무료 버전과 유료 버전을 비교해 드려 여러분의 워크플로우에 딱 맞는 도구를 찾으실 수 있도록 도와드립니다. 오늘 바로 이 필수 솔루션을 사용해 AI의 장점을 극대화하고 창의적인 생산성을 높여보세요. 지금 XIX.AI에서 확인해 보세요.

10 도구
xix.ai
교육 및 학습 시험 준비를 위한 최고의 AI 과외 선생님: 수학, 과학, 영어 실전 연습
시험 준비를 위한 최고의 AI 과외 선생님: 수학, 과학, 영어 실전 연습

2026년 최신 최고 평점을 받은 최고의 시험 대비 AI 튜터들이 XIX.AI에 모였습니다! 저희가 엄선한 이 목록에는 무료와 유료 서비스 비교, 실제 시험 문제, 매주 업데이트되는 순위 정보를 제공하는 획기적인 도구들이 포함되어 있습니다. 이 도구들은 여러분의 글쓰기 효율을 높이고, 복잡한 주제 학습을 단순화하며, 학업적 잠재력을 최대한 발휘할 수 있도록 도와줍니다. 지금 바로 탐색하여 여러분에게 딱 맞는 시험 준비 도구를 찾아보세요. 오늘부터 창작을 시작하여 AI의 장점을 최대한 활용하세요!

10 도구
xix.ai
재원 개인 자금 관리를 위한 AI 예산 계획 도구
개인 자금 관리를 위한 AI 예산 계획 도구

2026년 최신 최고의 평점 높은 AI 예산 관리 도구들이 XIX.AI에서 만나보세요! 이 선별된 컬렉션은 실제 테스트를 수행하고, 지출 습관을 이해하며, 생산성을 높일 수 있는 맞춤형 계획을 수립할 수 있도록 도와주는 강력한 혁신 솔루션을 제공합니다. 무료와 유료 버전을 비교하고 상세한 순위도 확인하세요. 돈 관리를 간소화하고 AI의 이점을 극대화하도록 설계된 필수 도구들을 지금 바로 탐색해 보세요!

11 도구
xix.ai
건강과 웰니스 AI 수면 추적 어시스턴트: 더 나은 취침 습관으로 회복력 향상
AI 수면 추적 어시스턴트: 더 나은 취침 습관으로 회복력 향상

2026년 최신의 우수하고 평점이 높은 AI 수면 추적 보조 도구들을 엄선하여 최상의 회복 효과를 제공합니다. 완전히 새롭게 업데이트된 이 주간 가이드에는 실제 환경에서의 테스트 결과, 무료 버전과 유료 버전의 비교 내용, 그리고 상세한 순위 정보가 담겨 있어 수면의 질을 향상시키고 보다 건강한 취침 습관을 형성하는 데 도움이 되는 최적의 솔루션을 찾는 데 유용합니다. 지금 바로 XIX.AI에서 확인하여 AI 기술의 장점을 활용해 보세요.

10 도구
xix.ai
데이터 분석 제품 및 매출 분석을 위한 AI SQL 코파일럿
제품 및 매출 분석을 위한 AI SQL 코파일럿

2026년 제품 및 매출 분석을 위한 최신 최고 평점 AI SQL 코파일럿! XIX.AI는 매주 업데이트되는 랭킹을 통해 실제 환경에서 검증된, 강력하고 판도를 바꿀 만한 필수 도구를 엄선했습니다. 이 도구들은 데이터 분석 속도를 높이고, 복잡한 쿼리를 간소화하며, 정확한 인사이트를 도출하여 더 현명한 비즈니스 의사결정을 내릴 수 있도록 지원함으로써 사용자의 생산성을 획기적으로 향상시킵니다. 지금 바로 살펴보고, 여러분의 AI 경쟁력을 극대화할 완벽한 도구를 찾아보세요!

14 도구
xix.ai
교육 및 학습 배움을 돕는 최고의 AI 숙제 도우미: 단순한 정답이 아닌 개념을 익히세요
배움을 돕는 최고의 AI 숙제 도우미: 단순한 정답이 아닌 개념을 익히세요

2026년 최신 최고 평점을 받은 AI 숙제 도우미: 단순한 정답 제공이 아닌 핵심 개념을 가르쳐 주는 학생들을 위한 강력한 도구. 꼭 사용해 봐야 할 엄선된 목록, 매주 업데이트, 무료 vs 유료 비교, 실제 사용 후기, 정확한 순위 정보를 통해 여러분의 학습 잠재력을 최대한 발휘할 수 있도록 도와드립니다. 지금 바로 살펴보고 더 스마트한 공부를 위한 완벽한 도구를 찾아보세요.

10 도구
xix.ai
의견 (0)
0/500
OR