참고
컴퓨터 사용은 공개 미리 보기 상태이며 변경될 수 있습니다.
컴퓨터 사용 정보
Copilot 는 액세스 가능한 애플리케이션 콘텐츠 및 시각적 컨텍스트를 읽고, 컨트롤을 클릭하고, 텍스트를 입력 및 편집하고, 키를 누르고, 스크롤하고, 끌어서, 애플리케이션 간에 워크플로를 탐색하여 데스크톱 애플리케이션과 상호 작용할 수 있습니다.
컴퓨터 사용은 macOS 및 GitHub Copilot CLI Windows 사용할 수 있습니다GitHub Copilot app.
컴퓨터 사용은 API, 명령줄 인터페이스 또는 MCP 통합을 제공하지 않는 레거시 및 GUI 전용 소프트웨어의 워크플로를 포함하여 작업을 Copilot 자동화하는 데 도움이 될 수 있습니다.
컴퓨터 사용은 다음과 같은 작업을 완료하는 데 도움이 될 수 있습니다.
- 레거시 데스크톱 애플리케이션에서 정보 검토 및 요약
- 프레젠테이션의 콘텐츠를 업데이트합니다.
- GUI 전용 소프트웨어에서 정보 입력 또는 업데이트
- 다단계 워크플로의 일부로 애플리케이션 간에 정보를 이동하는 것
팁
컴퓨터 사용은 시각적 인터페이스와의 상호 작용이 필요한 작업을 위해 설계되었습니다. API, MCP 서버, 터미널 명령, 파일 시스템 도구 또는 전용 브라우저 도구가 작업을 직접 완료할 수 있는 경우 해당 도구는 일반적으로 보다 구조화된 정보와 예측 가능한 결과를 제공합니다.
Capabilities
사용하도록 설정하면 컴퓨터 사용을 통해 다음을 수행할 수 있습니다.Copilot
- 시각적 컨텍스트가 필요한 경우 운영 체제의 접근성 트리 또는 스크린샷을 통해 액세스 가능한 애플리케이션 콘텐츠 및 시각적 컨텍스트를 읽습니다.
- 컨트롤을 클릭합니다.
- 텍스트를 입력하고 편집합니다.
- 키를 누르고, 스크롤하고, 항목을 끕니다.
- 애플리케이션에서 워크플로를 탐색합니다.
에이전트는 프롬프트를 통해 작동할 때 이러한 도구를 선택합니다. 세션에서 도구 활동을 검토할 수 있습니다.
컴퓨터 사용에 대한 액세스 제어
컴퓨터 사용은 기본적으로 비활성화되어 있습니다. 에이전트가 해당 도구를 사용하려면 먼저 사용하도록 설정해야 합니다.
컴퓨터 사용은 세션이 실행 중인 화면에 대한 Copilot 도구 사용 권한 설정을 따릅니다. 이러한 설정은 데스크톱 애플리케이션을 제어하기 전에 승인을 요청하는지 여부를 Copilot 결정합니다. 각 화면에 대한 도구 사용 권한 설정을 변경할 수 있습니다. 애플리케이션에 대한 액세스를 승인하라는 메시지가 표시되면 현재 세션에 대한 액세스 권한을 부여하거나, 이후 세션에 대한 승인을 저장하거나, 액세스를 거부할 수 있습니다.
특정 애플리케이션 Copilot 에 대해 Always 허용을 선택하는 경우 결정을 로컬로 저장합니다. 결정은 동일한 컴퓨터 둘 GitHub Copilot CLI 다 GitHub Copilot app 에 적용됩니다. 앱에서 항상 허용되는 애플리케이션 목록을 검토하고 개별 승인을 제거할 수 있습니다. 애플리케이션을 제거하면 앱과 CLI 모두에서 향후 세션에 대한 저장된 승인이 삭제됩니다. 실행 중인 세션에서 이미 부여된 액세스 권한은 취소하지 않습니다.
도구를 거부하도록 설정된 권한 규칙은 자동 승인이나 저장된 승인보다 우선합니다.
엔터프라이즈 관리자는 관리되는 설정을 통해 컴퓨터 사용을 사용하지 않도록 설정할 수 있습니다. 로컬에서 컴퓨터 사용을 활성화해도 엔터프라이즈 정책보다 우선 적용되지는 않습니다. 구성 세부 정보는 엔터프라이즈 관리 설정을 참조하세요.
컴퓨터 사용이 예기치 않게 작동하기 시작하면 활성 작업을 중단할 수 있습니다. 에서 GitHub Copilot CLIEsc 키를 두 번 누릅니다. 에서 GitHub Copilot app중지를 클릭하거나 Esc 키를 누릅니다.
macOS에서는 컴퓨터 사용 가이드가 다음 권한을 부여하도록 안내합니다:
- 접근성 권한으로 애플리케이션 컨트롤과 상호작용할 수 있습니다.
- 시각적 맥락이 필요한 경우 애플리케이션 창을 확인할 수 있는 화면 녹화 권한.
제한 사항 및 위험
컴퓨터 사용은 애플리케이션 버전, 운영 체제, 창 상태에 따라 달라질 수 있는 인터페이스를 인식합니다. 잘못된 컨트롤을 선택하거나, 잘못된 위치에 텍스트를 입력하거나, 비표준 또는 동적 컨트롤 및 복잡한 워크플로에 어려움을 겪을 수 있습니다. 타이밍이나 창 상태가 변경되면 서로 다른 결과가 발생하거나, 컴퓨터 사용 중 같은 작업이 반복되거나, 작업을 계속 진행하지 못하게 될 수 있습니다.
경고
컴퓨터 사용은 데스크톱 애플리케이션에서 상호 작용을 자동화할 수 있지만 보안 위험도 발생합니다. 모호한 지침 또는 예기치 않은 화면 콘텐츠로 인해 개인, 재무 또는 엔터프라이즈 시스템에 대한 액세스를 포함하여 디바이스, 데이터 또는 연결된 계정에 영향을 주는 의도하지 않은 작업이 발생할 수 있습니다. 컴퓨터 사용은 인간의 판단을 대체하는 것이 아닙니다. 특히 데이터를 수정하거나 다른 사람에게 영향을 미치는 작업을 허용하기 전에 대상 애플리케이션, 요청된 권한 및 실행 결과를 검토하세요.
애플리케이션 창에는 다른 사람에 대한 정보를 포함하여 중요한 정보가 표시될 수 있습니다. 표시되는 콘텐츠를 컨텍스트 Copilot로 제공하는 데 익숙한 애플리케이션 및 작업에서만 컴퓨터 사용을 사용합니다.
애플리케이션에 대해 Always 허용을 선택하면 나중에 컴퓨터 사용 작업이 다시 묻지 않고 제어할 수 있습니다. 중요한 정보를 포함하거나 영향력이 높은 작업을 지원하는 애플리케이션에 대해 Always 허용 을 선택하지 마십시오.
책임 있는 사용에 대한 포괄적인 정보는 애플리케이션 카드: GitHub Copilot 에이전트을 참조하세요.
다음 단계
컴퓨터 사용을 사용하도록 설정하고 사용하려면 다음을 참조하세요.