Gemini 3.5 Flash 컴퓨터 사용 기능은 AI가 답변만 만드는 단계를 넘어 브라우저·모바일·데스크톱 화면을 보고 다음 행동을 선택하게 합니다. 검색 결과를 읽고, 폼을 채우고, 표를 확인한 뒤 다음 단계로 이동하는 긴 작업을 하나의 에이전트로 설계할 수 있다는 뜻입니다. 그러나 화면 조작이 가능하다고 해서 업무 전체를 통째로 맡기는 것이 정답은 아닙니다.
구글은 2026년 6월 24일 Gemini 3.5 Flash에 컴퓨터 사용 도구를 기본 통합했다고 발표했습니다. 개발자는 Gemini API와 엔터프라이즈 에이전트 플랫폼을 통해 브라우저·모바일·데스크톱 환경을 오가는 맞춤형 에이전트를 만들 수 있습니다. 일반 이용자의 Gemini 앱에 모든 기능이 똑같이 열렸다는 의미는 아니므로, 실제 사용 가능 범위는 계정·지역·제품별 문서를 확인해야 합니다.
컴퓨터 사용 AI는 무엇을 하는가
일반 챗봇은 “어떻게 해야 하는지” 설명합니다. 컴퓨터 사용 에이전트는 현재 화면을 보고 클릭·입력·스크롤 같은 행동을 선택한 뒤 결과 화면을 다시 읽습니다. 이 과정을 목표가 끝날 때까지 반복합니다. 정해진 API가 없는 오래된 웹사이트나 여러 도구를 넘나드는 작업도 자동화 후보가 되는 이유입니다.
예를 들어 경쟁사 제품 20개의 공개 가격을 조사한다고 가정해 보겠습니다. 에이전트는 검색 결과를 열고, 가격 페이지에서 필요한 값을 찾고, 스프레드시트에 입력하고, 빠진 행을 확인할 수 있습니다. 사람은 처음부터 끝까지 클릭하는 대신 조사 기준과 예외 처리, 최종 검수에 집중합니다.
처음 자동화하기 좋은 업무 4가지
1. 공개 정보 수집과 정리
가격·운영시간·제품 사양처럼 공개 페이지에 있는 정보를 정해진 표로 옮기는 작업입니다. 출처 URL과 확인 날짜를 함께 저장하게 하면 나중에 사람이 빠르게 검증할 수 있습니다.
2. 반복적인 웹 테스트
회원가입, 검색, 장바구니, 문의 폼처럼 매번 같은 순서로 확인하는 테스트입니다. 성공 화면만 보는 것이 아니라 오류 메시지와 화면 캡처를 남기게 해야 실패 원인을 찾기 쉽습니다.
3. 초안 입력
게시물 초안이나 상품 설명을 관리 화면에 넣되 발행 버튼 앞에서 멈추는 방식입니다. 에이전트가 시간을 줄이고, 공개 여부는 사람이 결정합니다.
4. 여러 도구 사이의 상태 확인
예약 시스템과 스프레드시트의 날짜가 같은지, 주문 목록과 배송 상태가 맞는지 비교하는 업무입니다. 다만 개인정보와 결제 정보가 포함되면 별도 계정과 최소 권한이 필요합니다.
좋은 설계는 6개의 칸으로 나뉩니다
목표
“고객 정보를 처리해”처럼 넓게 쓰지 말고 “공개된 문의 10건을 유형별로 분류하고 답변 초안을 저장하되 전송하지 않는다”처럼 끝나는 조건까지 적습니다.
입력
시작 URL, 사용할 파일, 대상 날짜, 필수 열을 명시합니다. 화면에서 우연히 보이는 다른 정보는 입력으로 취급하지 않도록 합니다.
허용 행동
열기·읽기·스크롤·초안 저장은 허용하지만 삭제·결제·공개 발행·외부 전송은 금지하는 식으로 경계를 만듭니다. 허용 목록이 길어질수록 사고 범위도 커집니다.
중단 조건
로그인 재요청, CAPTCHA, 예상하지 못한 팝업, 대상 건수 불일치, 개인정보 발견 시 즉시 멈추게 합니다. 실패를 숨기고 다음 단계로 넘어가는 에이전트는 빠른 것이 아니라 위험한 것입니다.
검수 자료
각 결과에 출처 URL, 처리 시각, 변경 전후 값, 화면 캡처를 남깁니다. 사람은 모든 클릭을 다시 볼 필요 없이 고위험 단계와 예외만 확인할 수 있습니다.
완료 승인
발행·결제·삭제·전송·권한 변경 같은 되돌리기 어려운 행동은 반드시 마지막 사람 승인 뒤 실행합니다. 구글도 민감하거나 되돌릴 수 없는 작업에 명시적 확인을 요구하는 안전장치를 제공합니다.
실전용 작업 지시 예시
“지정한 공개 웹페이지 10곳에서 요금제 이름과 월 가격을 찾아 표의 빈칸을 채워 주세요. 각 행에 출처 URL과 확인 시각을 기록하세요. 로그인이 필요하거나 가격 단위가 불명확하면 추정하지 말고 ‘검수 필요’로 표시하세요. 파일을 저장한 뒤 종료하고, 메일 전송·결제·게시·삭제는 실행하지 마세요.”
좋은 지시는 해야 할 일만큼 하지 말아야 할 일을 분명히 합니다. 또한 애매한 값을 억지로 채우지 않고 사람에게 돌려보낼 조건을 포함합니다.
도입 전 5단계 시험
- 실제 계정이 아닌 테스트 계정과 복사본 데이터를 준비합니다.
- 한 사이트, 한 종류의 작업, 5건 이하로 시작합니다.
- 모든 행동 로그와 화면 캡처를 저장합니다.
- 사람이 결과를 전수 검수해 오류 유형을 기록합니다.
- 오류가 반복되지 않을 때만 건수와 권한을 조금씩 늘립니다.
처음부터 100건을 맡기면 속도는 빨라 보여도 잘못된 규칙이 100번 복제됩니다. 작은 시험에서 실패 방식을 찾는 것이 가장 빠른 도입 방법입니다.
비용도 같은 방식으로 측정해야 합니다. 모델 사용료만 보지 말고 사람이 예외를 처리하고 결과를 다시 확인하는 시간까지 기록하세요. 자동화 전후의 처리 시간, 오류율, 재작업 건수를 함께 비교하면 ‘멋진 시연’과 ‘실제로 돈을 아끼는 업무’를 구분할 수 있습니다.
한 줄 결론
Gemini 3.5 Flash의 컴퓨터 사용 기능은 사람이 클릭하는 시간을 줄여 주지만, 업무 책임까지 가져가지는 않습니다. 목표·입력·허용 행동·중단 조건·검수 자료·최종 승인으로 작업을 잘게 나눌 때 브라우저 에이전트가 진짜 생산성 도구가 됩니다.