컴퓨터 유즈 4장 카드뉴스

AI 활용 분야에서 Anthropic이 2024년 10월에 공개한 기능으로, Claude가 사람처럼 화면을 보고 마우스·키보드를 조작해 데스크탑 앱·웹사이트를 직접 사용하도록 한 도구입니다.

수강신청 페이지에 들어가 자동으로 강의 코드를 입력해 주는 인턴이 옆자리에 앉아 있는 셈이에요. AI한테 "이 사이트에서 이거 해 줘"라고만 말하면, AI가 화면을 직접 보고 마우스를 움직여 클릭하고 키보드로 타이핑까지 처리합니다. 학교 행정 포털처럼 API가 없어 손으로만 해야 하던 작업, 카톡 PC 버전에서 단톡방 공지 정리 같은 단순 반복까지 같은 방식으로 맡길 수 있어요.

5 Sonnet의 Computer Use를 자사 Replit Agent 제품에 적용해, 개발 중인 앱이 실제로 동작하는지 UI를 직접 클릭하며 점검하는 기능을 만들었습니다 [1]. Asana·Canva·Cognition·DoorDash·The Browser Company도 같은 시점에 수십에서 수백 단계가 걸리는 작업을 베타로 검증했습니다 [1].