Cursor, AI 에이전트가 내 PC 앱 직접 조작…iOS 시뮬레이터도 테스트

AI 코드 에디터 Cursor가 10월 23일(현지시간) 코딩 에이전트가 개발자의 컴퓨터 화면을 직접 조작하는 '컴퓨터 사용(Computer Use)' 기능을 공개했다. 에이전트가 애플 iOS 시뮬레이터 같은 데스크톱 앱을 클릭하고 입력하며 자신이 만든 기능을 스스로 시험해 보는 방식이다. Cursor는 X(옛 트위터)에 "Cursor가 이제 당신의 컴퓨터를 제어할 수 있다"며 "에이전트가 iOS 시뮬레이터 같은 데스크톱 앱을 구동해 자신이 만든 기능을 테스트한다"고 밝혔다.

핵심 정리

• Cursor 에이전트가 브라우저나 원격 클라우드 PC를 넘어 내 컴퓨터의 데스크톱 앱에서 클릭·입력·화면 캡처를 할 수 있게 됐다.
• macOS에서는 'Cursor Computer Use'라는 보조 앱을 거쳐 작동하며, 손쉬운 사용과 화면 기록 권한이 필요하다.
• macOS·리눅스 자체 호스팅 작업 PC는 --computer-use 옵션을 켜야만 쓸 수 있다. 공식 문서는 "서버가 켜는 일은 결코 없다"고 적었다.

Cursor 컴퓨터 사용 기능, 어떻게 쓰나

개발자 Flavio Copes와 뉴스레터 AlphaSignal이 정리한 사용법에 따르면, 에이전트는 화면 조작이 필요한 작업이라고 판단하면 이 도구를 스스로 고른다. 사용자가 프롬프트 창에 @를 입력하고 'Computer Use'를 선택해 직접 불러낼 수도 있다. 한 번의 실행으로 코드를 고치고, 앱을 빌드하고, 화면을 눌러 결과를 확인하는 흐름이다.

맥에서는 권한을 Cursor 앱이나 터미널이 아니라 보조 앱 자체에 줘야 한다. 공식 문서는 macOS 15 이후 화면 기록 권한을 주기적으로 다시 묻는다며, 캡처가 멈추면 '한 달 동안 허용' 창을 확인하라고 안내했다.

자체 호스팅 에이전트: macOS·리눅스 지원

자사 장비에서 Cursor 에이전트를 돌리는 팀은 'agent worker --computer-use start' 명령으로 작업 PC를 띄우면 에이전트가 그 컴퓨터의 데스크톱을 조작할 수 있다. 리눅스는 X11 디스플레이를 쓰고, 화면이 없으면 가상 데스크톱을 직접 만든다.

리눅스 전용 옵션인 --share-desktop을 켜면 권한이 있는 사용자가 Cursor 안에서 에이전트 화면을 지켜보거나 넘겨받아 조작할 수 있다. 문서는 "두 기능 모두 명시적으로 켜야 하며 서버가 켜는 일은 결코 없다"고 밝혔다. 엔터프라이즈 관리자는 팀 설정의 스위치로 기능을 끌 수 있는데, 기본값은 '켜짐'이다.

코딩 에이전트에 화면 조작이 왜 필요한가

그동안 Cursor의 화면 단위 테스트는 주로 클라우드에서 이뤄졌다. 회사는 지난 2월 클라우드 에이전트마다 완전한 데스크톱을 갖춘 격리 가상머신을 제공했고, 사내에서 병합하는 풀 리퀘스트(PR)의 30% 이상을 클라우드 샌드박스의 에이전트가 자율적으로 만든다고 밝혔다.

내 컴퓨터를 직접 조작하는 기능은 사용자 요청이 꾸준했다. 7월 17일 커뮤니티 포럼에 어도비·오피스 같은 데스크톱 앱을 에이전트가 다루게 해 달라는 글이 올라왔고, Cursor 직원은 10월 6일까지도 "아직 검토 중이며 일정은 공유할 수 없다"고 답했다.

대가는 노출 위험이다. 화면에 접근하는 에이전트는 열린 모든 것을 볼 수 있어, 안내 글들은 테스트용 계정 사용, 무관한 앱 종료, 실행 전 커밋을 권한다.

전망

10월 25일 기준 Cursor의 공식 변경 기록(체인지로그)에는 이 기능 항목이 없다. 로컬 컴퓨터 사용 기능의 가격, 요금제별 제한, 윈도우 지원 여부도 공개되지 않았다. 감사 기록·승인 절차 같은 통제 장치 여부도 도입 전 확인할 대목이다.

자주 묻는 질문

Cursor가 내 맥의 앱을 조작할 수 있나?

그렇다. 최신 버전으로 업데이트한 뒤 보조 앱에 손쉬운 사용·화면 기록 권한을 주면 된다.

자체 호스팅 PC에서는 자동으로 켜지나?

아니다. 작업 PC를 --computer-use 옵션으로 시작해야 하며, 엔터프라이즈 관리자는 팀 단위로 기능을 끌 수 있다.

참고 자료

• Computer use and desktop sharing — Cursor Docs
• Cursor agents can now control their own computers — Cursor(2026년 2월 24일)
• Desktop Computer Use — let the Agent control local GUI apps (Adobe, Office, browsers) — Cursor 커뮤니티 포럼
• How to use Cursor Computer Use — Flavio Copes(2026년 10월 24일)