AI AGENT (AI 에이전트)
Copilot Studio '컴퓨터 사용 에이전트' 정식 제공… 실시간 음성도
마이크로소프트가 Copilot Studio에서 웹사이트와 데스크톱 프로그램을 화면으로 직접 조작하는 '컴퓨터 사용 에이전트'를 정식 제공했습니다. API가 없는 오래된 사내 시스템이나 수시로 바뀌는 협력사 포털 업무를 자동화하려는 기업용 기능입니다. 새 시각적 워크플로 설계 화면과 실시간 음성 기능도 함께 나왔습니다.
핵심 사실 · 한눈에 보기
- 5월 26일 마이크로소프트가 Copilot Studio의 컴퓨터 사용 에이전트를 정식 출시(GA)했습니다.
- 인증 정보의 보안 관리, 작업별 모델 선택, 화면이 바뀌어도 깨지지 않는 자동화 기능이 함께 제공됩니다.
- 컴퓨터 사용 에이전트를 여러 단계 워크플로 안에 넣는 기능은 프리뷰로 들어갔습니다.
- 새 워크플로 설계 화면에서 기존 에이전트를 '에이전트 노드'로 넣어, 단순 조건문으로 처리할 수 없는 판단을 맡길 수 있습니다(조기 릴리스 환경).
- 이주 서비스 기업 Graebel이 API 없는 자사 플랫폼을 화면 조작으로 처리하는 주문 에이전트를 실제 운영 중이라고 소개했습니다.
왜 화면을 조작하나
전통적인 자동화는 예측 가능한 환경에서만 잘 작동합니다. 그런데 실제 업무는 화면이 바뀌고, 협력사 포털이 갑자기 개편되고, 오래된 시스템에는 API가 아예 없습니다. 그래서 간단한 업무도 자동화를 유지하는 데 손이 많이 든다는 것이 마이크로소프트의 진단입니다. 컴퓨터 사용 에이전트는 사람처럼 화면을 보고 클릭해 이런 시스템을 다룹니다.
- 정식 출시: 웹·데스크톱 UI 직접 조작, 인증 정보 보안 관리, 시나리오별 모델 선택, 화면 변화에 적응
- 프리뷰: 컴퓨터 사용 에이전트를 API 동작·승인·업무 규칙과 한 워크플로에 결합
- 새 워크플로 설계 화면(조기 릴리스): 하나의 캔버스, 에이전트 노드, 분류·생성·판단 지원 같은 AI 동작, 노드 단위 테스트
사례: Graebel
직원 이주 서비스 회사 Graebel은 해마다 수천 건의 이주 요청을 처리하는데, 대부분이 지시 사항과 첨부 파일, 예외가 제각각인 이메일로 들어옵니다. 자사 플랫폼에는 API가 없어 기존 자동화는 너무 경직돼 있었다고 합니다. Copilot Studio로 만든 주문 에이전트는 메일을 해석하고, 업무 규칙으로 검증하고, 플랫폼 화면을 직접 조작하고, 예외는 워크플로로 사람에게 넘깁니다. 마이크로소프트는 이 에이전트가 실제 운영 중이며 30개 넘는 서비스 범주로 확대하도록 설계됐다고 밝혔습니다.
AI마중 POINT · 해석
봐야 할 지점
마이크로소프트가 강조한 문구는 '필요한 곳은 구조적으로, 가치 있는 곳은 유연하게'입니다. 모든 것을 AI에 맡기지 않고, 정해진 단계는 기존 워크플로로, 판단이 필요한 단계만 에이전트로, API가 없는 곳만 화면 조작으로 처리하는 조합 방식입니다. 화면 조작은 느리고 실수할 수 있으므로, 가장 마지막 수단으로 쓰는 설계가 현실적입니다.
화면을 클릭하는 에이전트는 잘못 누르면 되돌리기 어려운 일을 할 수 있습니다. 인증 정보를 에이전트에 맡기는 것도 위험 요소입니다. 이번 정식 출시에 인증 정보 관리와 승인 단계 결합이 함께 들어간 것은 이 때문입니다.
그래서 나한테는?
기업이 검토할 것
- API 없는 사내 시스템에 반복 입력이 많은 부서: 화면 조작 에이전트로 자동화할 후보를 찾아볼 수 있습니다.
- IT·보안 담당: 에이전트가 쓰는 계정 권한을 최소로 하고, 결제·삭제·외부 발송 같은 작업에는 사람 승인 단계를 넣어야 합니다.
- 개인 사용자: Copilot Studio는 기업용 에이전트 개발 도구라 직접 바뀌는 것은 없습니다.
미확인 · 공식 발표만으로 알 수 없는 것
발표에 없는 것
- 컴퓨터 사용 에이전트의 실행 요금 체계는 이 글에 나오지 않습니다.
- 화면 조작 정확도나 실패율에 대한 수치는 공개되지 않았습니다.
- 실시간 음성 기능의 한국어 지원 여부는 확인되지 않습니다.
SOURCE공식 원문 확인
- PRIMARY · 공식New and improved: Computer-using agents, a new workflows experience, and real-time voice experiencesMicrosoft 365 Blog · microsoft.com · 발표 2026.05.26 · 확인 2026.10.05
수집 2026.10.01 · 정리 2026.10.01 · 수정 2026.10.05 · 원문 본문은 옮기지 않았습니다. 회사가 밝힌 수치·성능은 본문에서 출처를 붙여 구분했습니다.