AI Market Signal
AI 에이전트 자동화는 이제 비싼 전용 모델을 따로 붙이는 일보다, 싼 주력 모델 안에 행동 도구를 넣는 쪽으로 기울기 시작했습니다.
Google은 6월 24일 Gemini 3.5 Flash에 computer use를 기본 도구로 넣었다고 발표했어요. 기존에는 standalone Gemini 2.5 computer use model로 따로 쓰던 기능이었는데, 이제는 Flash 본체에서 browser·mobile·desktop 환경을 함께 다룹니다. 무엇이 바뀌었냐면, 에이전트 팀이 기능 시연용 따로, 실행용 따로, 안전장치 따로 짜던 구조가 한 단계 단순해졌다는 점이에요. Google 블로그와 공식 문서 기준으로 이 기능은 Gemini API와 Gemini Enterprise Agent Platform에서 바로 쓸 수 있고, 장기 작업과 엔터프라이즈 자동화에 맞춰 설계됐습니다. Google 블로그 · Google AI Docs
영향을 먼저 받는 쪽은 브라우저 테스트 회사, 사내 업무 자동화 팀, 그리고 모바일까지 묶어 에이전트를 굴리려는 개발 조직입니다. 예전에는 브라우저 자동화 데모는 그럴듯해도, 실제 운영에 들어가면 환경마다 다른 모델과 다른 안전 규칙, 다른 액션 파서를 붙여야 했거든요. 이제는 같은 Flash 모델에서 intent가 붙은 액션과 safety policy를 같이 받으니, 성능 경쟁보다 오케스트레이션 비용과 검수 비용이 먼저 내려갈 가능성이 큽니다.
오늘 먼저 봐야 할 장면
- computer use가 별도 Gemini 2.5 모델에서 Gemini 3.5 Flash 기본 도구로 들어왔습니다.
- browser, mobile, desktop을 한 모델 계열에서 다루고, 액션마다 intent가 붙습니다.
- 안전 정책, prompt injection detection, user confirmation 체계가 함께 붙으면서 기업 도입 문턱이 내려갑니다.
01. Gemini 3.5 Flash computer use: 행동 도구가 별도 모델에서 기본 기능으로 들어왔습니다
Google이 이번에 바꾼 건 기능 하나 추가가 아니에요. computer use is now a built-in tool supported in Gemini 3.5 Flash라는 문장이 더 중요합니다. 별도 실험 모델을 불러오던 구조에서, 주력 Flash 모델이 클릭·입력·스크롤 같은 행동까지 같이 다루는 구조로 바뀐 거예요. 공식 블로그는 이 점을 두고 long-horizon enterprise automation과 continuous software testing에 더 잘 맞는다고 설명합니다. Google 블로그
개발팀 입장에서는 꽤 현실적인 변화예요. 예전에는 "생각하는 모델"과 "행동하는 모델"을 따로 붙이는 순간 파이프라인이 길어졌고, 실패 지점도 늘었습니다. 지금은 function calling, Search, Maps grounding을 잘하던 Flash 안에 컴퓨터 제어가 붙으니, 에이전트 스택이 짧아집니다. 짧아진다는 건 대개 디버깅 영수증이 줄어든다는 뜻이에요.
02. 예전엔 브라우저 자동화 데모, 지금은 browser·mobile·desktop 한 모델입니다
Google AI 문서는 Gemini 3.5 Flash computer use의 지원 환경을 browser, mobile, desktop 세 가지로 적어놨어요. 브라우저에선 click, type, navigate, scroll, drag_and_drop 같은 작업을, 모바일에선 open_app과 long_press까지, 데스크톱에선 OS 수준 커서 조작까지 다룹니다. 그리고 3.5 Flash 응답에는 왜 그 행동을 골랐는지 설명하는 intent 필드가 함께 붙습니다. Google AI Docs
생활 장면으로 바꾸면 이해가 빨라요. 어떤 팀은 브라우저에서 주문서 정보를 읽고, 모바일 앱으로 확인 코드를 보고, 데스크톱 ERP에 다시 입력해야 합니다. 전에는 이 흐름이 한 번에 이어지지 않았어요. 이제는 한 모델 계열에서 같은 좌표 체계와 같은 안전 규칙으로 묶을 수 있으니, "연결은 되는데 운영이 귀찮다"는 말이 조금 덜 먹히게 됩니다.
| 구분 | 예전 | 지금 |
|---|---|---|
| 실행 구조 | Gemini 2.5 computer use 별도 모델 중심 | Gemini 3.5 Flash 기본 도구로 통합 |
| 지원 환경 | 브라우저 자동화에 무게 | browser · mobile · desktop |
| 행동 설명 | legacy action 위주 | intent가 붙은 streamlined actions |
| 운영 질문 | 될까? | 얼마나 싸고 안전하게 굴릴까? |
03. AI 에이전트 가격표는 모델 성능보다 오케스트레이션 비용에서 먼저 바뀝니다
이 발표가 재미있는 건 성능 자랑보다 비용 구조 때문입니다. 문서에는 Playwright를 붙여 agent loop를 만드는 예시가 길게 나오는데, 요청 → 응답 → action 실행 → 새 스크린샷 캡처를 계속 반복하는 구조예요. 여기서 비싼 건 한 번의 클릭이 아니라, 모델 전환, 안전 필터, 환경별 핸들러, 디버깅 로그가 겹겹이 쌓이는 운영비입니다. Flash 본체에 행동 도구가 들어오면 줄어드는 건 토큰 몇 장이 아니라 그 연결비예요. Google AI Docs
예전에는 브라우저에서 폼을 채우는 데모를 잘 만들어도, 실제 현업 자동화로 넘기면 모바일 예외 처리와 데스크톱 입력기 문제, 승인 플로우가 발목을 잡았습니다. 이제는 같은 모델 계열에서 같은 좌표 정규화와 같은 액션 묶음을 쓰니, 테스트 회사와 내부 운영툴 팀은 견적을 다시 짜게 될 거예요. 브라우저 자동화가 싸진다기보다, 에이전트를 운영하는 전체 장부가 얇아지는 쪽에 가깝습니다.
04. safety policy와 prompt injection detection이 붙어야 기업이 결제 버튼을 눌러요
Google 문서가 꽤 노골적으로 적어둔 부분도 있습니다. FINANCIAL_TRANSACTIONS, ACCOUNT_CREATION, LEGAL_TERMS_AND_AGREEMENTS, USER_CONSENT_MANAGEMENT 같은 safety policy category가 내장돼 있고, 필요하면 override도 걸 수 있어요. 여기에 screenshot pixel을 스캔해서 숨은 지시문을 막는 prompt injection detection 옵션도 붙습니다. 이 정도가 있어야 기업이 "에이전트가 실수로 약관 동의하고 결제까지 눌렀다"는 악몽에서 조금 멀어집니다. Google AI Docs
물론 Google도 아직 조심스러워요. 문서에는 preview capability라서 오류와 보안 취약점이 있을 수 있고, critical decisions·sensitive data·serious errors에는 밀어 넣지 말라고 적혀 있습니다. 그럼에도 불구하고 기업 입장에선 이 문구가 오히려 현실적입니다. 허풍 대신 "어디까지 자동화하고, 어디서 사람이 멈춰 세울지"를 계약 문장으로 적기 시작했다는 뜻이니까요. 재미없지만, 돈 되는 게임이죠.
FAQ
Gemini 3.5 Flash computer use는 무엇인가요?
Google이 6월 24일 공개한 화면 기반 행동 도구예요. 스크린샷을 보고 클릭, 입력, 스크롤 같은 작업을 하며, 이제는 별도 실험 모델이 아니라 Gemini 3.5 Flash 본체에 붙습니다.
이번 발표에서 무엇이 가장 크게 달라졌나요?
browser, mobile, desktop을 한 모델 계열에서 다루고, 액션마다 intent가 붙고, safety policy와 prompt injection detection까지 같은 문서와 API 안에서 다뤄진다는 점이 가장 큽니다.
누가 먼저 영향을 받을 가능성이 큰가요?
반복 입력, 웹 테스트, 사내 백오피스 자동화, 여러 기기를 오가는 운영팀이 먼저 영향을 받을 가능성이 큽니다. 모델 점수보다 운영비가 먼저 달라질 장면이에요.
관련 글
- GitHub Copilot usage metrics API가 AI 예산 통제를 바꾸는 이유
- OpenAI Patch the Planet이 오픈소스 보안 패치를 바꾸는 이유
- Cloudflare Temporary Accounts가 AI 에이전트 배포를 바꾸는 이유
- Google AMIE 질환 관리가 의료 AI를 바꾸는 이유
출처
- Introducing computer use in Gemini 3.5 Flash — Google Blog, 2026.06.24
- Computer Use — Gemini API / Interactions API Docs, last updated 2026.06.24 UTC
- Google News RSS: Gemini 3.5 Flash computer use 최근 보도
- Gemini in Chrome adds ‘Select from screen’ tool as Gemini 3.5 Flash gains computer use — 9to5Google, 2026.06.24
'AI·스타트업 뉴스' 카테고리의 다른 글
| Anthropic Mythos 제한 해제가 frontier AI 출시 순서를 바꾸는 이유 (0) | 2026.06.27 |
|---|---|
| GitHub Copilot agentic harness가 AI 코딩 벤치마크를 바꾸는 이유 (0) | 2026.06.26 |
| Anthropic Claude Tag가 Slack 업무 권한을 바꾸는 이유 (0) | 2026.06.24 |
| OpenAI Patch the Planet이 오픈소스 보안 패치를 바꾸는 이유 (0) | 2026.06.23 |
| 삼성전자 ChatGPT·Codex 도입이 AI 업무 표준을 바꾸는 이유 (1) | 2026.06.22 |
