Microsoft, 온스크린 앱 인식을 지원하는 코파일럿 비전 업데이트 테스트 실시

Microsoft는 사용자가 Windows 응용 프로그램에서 AI와 상호 작용하는 방식을 혁신하는 향상된 Copilot 환경을 도입합니다. 이 혁신적인 업데이트는 Copilot Vision의 기능을 Microsoft Edge 이상으로 확장하여 지능형 화면 공유 기능을 통해 모든 데스크톱 애플리케이션에 대한 실시간 지원을 가능하게 합니다.

확장된 기능

Copilot Vision은 이제 전체 Windows 에코시스템에서 상황에 맞는 가이드를 제공합니다.

이제 모든 PC 애플리케이션에서 AI 기반 화면 분석 사용 가능

Adobe Photoshop과 같은 복잡한 소프트웨어에 대한 대화형 코칭 가능

시스템 전반에서 사진, 문서, 웹 콘텐츠의 시각적 분석 가능

현재 미국 기반 Windows 인사이더 테스터에게 먼저 배포됨

실용적인 응용 프로그램

대화형 소프트웨어 안내

향상된 코파일럿 비전은 기술 애플리케이션을 지원할 때 특별한 가치를 발휘합니다. 최근 Microsoft의 시연에서 AI는 성공적으로 시연을 마쳤습니다:

• 단계별 마인크래프트 게임 플레이 지침 제공
• Clipchamp에서 동영상 편집 설정 최적화
• 소프트웨어 튜토리얼 중 관련 인터페이스 요소 강조 표시

논란이 되고 있는 주기적인 스냅샷을 캡처하는 리콜 기능과 달리, Copilot Vision은 이미지를 영구적으로 저장하지 않고 AI가 눈에 보이는 콘텐츠를 적극적으로 해석하고 반응하는 동적 화면 공유 세션처럼 작동합니다.

보완 기능

지능형 파일 검색

Microsoft는 Copilot 내에서 고급 파일 검색 기능을 동시에 테스트하고 있습니다:

1. 여러 형식의 문서 콘텐츠 색인화 및 이해
2. Office 문서 및 PDF를 포함한 일반적인 파일 유형 지원
3. 자연어 쿼리를 통해 최근 작업 파일을 찾을 수 있도록 지원

접근성 및 가용성

플랫폼 지원

• Windows 11(Copilot Plus PC에 국한되지 않음)
• iOS 및 Android용 모바일 버전
• 초기 베타 버전은 미국 기반 테스터로 제한됨
• 수개월 내 공개 출시 예정

구현 요구 사항

곧 출시될 Copilot 개선 사항을 이용하려면 다음이 필요합니다:

• Windows용 표준 Copilot 애플리케이션
• 클라우드 처리를 위한 활성 인터넷 연결
• 업데이트된 Windows 11 설치

Microsoft는 베타 테스트를 성공적으로 마친 후 올해 말 모든 Windows 11 사용자에게 이러한 AI 기능을 단계적으로 출시할 예정입니다.