내 마우스를 대신 움직이는 AI 조수? 구글 '제미나이 2.5 컴퓨터 유즈'의 모든 것

한국어 English 日本語 简体中文 繁體中文
By Gi Pyeong Lee
제미나이 구글AI AI에이전트 업무자동화
컴퓨터 화면을 분석하고 마우스 커서를 조작하는 AI 에이전트의 개념도
AI Summary

구글의 '제미나이 2.5 컴퓨터 유즈'는 AI가 직접 마우스를 움직이고 키보드를 입력하며 복잡한 웹 업무를 대신해주는 기술입니다.

상상해보세요. 여러분이 퇴근길에 스마트폰을 꺼내 “다음 주 제주도 여행 2인용 비행기표 제일 싼 걸로 예매해줘”라고 한 마디만 던집니다. 그러면 AI가 직접 항공사 사이트에 접속해 날짜를 고르고, 수십 개의 항공사 가격을 비교한 뒤, 여러분의 개인정보를 토대로 예약 폼까지 알아서 척척 채워 넣습니다. 단순히 “예매하는 법을 알려줘”라고 조언하는 수준을 넘어, AI가 직접 여러분의 컴퓨터 마우스와 키보드를 조작해 일을 끝마치는 세상이 열리고 있습니다.

구글은 2025년 10월 7일, 마치 사람처럼 컴퓨터를 조작할 수 있는 특수 AI 모델인 ‘제미나이 2.5 컴퓨터 유즈(Gemini 2.5 Computer Use)’를 공개했습니다 IntroducingtheGemini2.5ComputerUsemodel Google releases a preview of itsGemini2.5ComputerUseAImodel…. 이 기술은 우리가 컴퓨터를 대하는 패러다임을 완전히 바꿔놓을 준비를 하고 있습니다.

이게 왜 중요한가요?

지금까지 우리가 만난 AI는 주로 ‘말’을 잘하는 비서였습니다. 궁금한 것을 물어보면 답을 해주고, 복잡한 문서를 요약해주는 식이었죠. 하지만 실제 업무를 하려면 우리는 브라우저를 열고, 버튼을 클릭하고, 로그인을 하고, 데이터를 하나하나 입력해야 합니다. 이러한 과정을 전문 용어로는 인터페이스(Interface, 사용자가 컴퓨터와 소통하기 위해 사용하는 화면이나 도구) 조작이라고 부릅니다.

제미나이 2.5 컴퓨터 유즈의 등장은 AI가 ‘말’을 넘어 ‘실행’의 단계로 진입했다는 것을 의미합니다. 구글의 이 모델은 웹 브라우저나 안드로이드 앱의 화면을 직접 ‘보고’ 이해하며, 버튼 클릭, 텍스트 입력, 화면 스크롤 등 사람이 하는 물리적인 행동을 그대로 흉내 낼 수 있습니다 Google News - News aboutGemini- Overview [Google UnveilsGemini2.5ComputerUseThat Clicks… Beebom](https://beebom.com/google-unveils-gemini-2-5-computer-use-that-clicks-types-scrolls-like-humans/).
쉽게 말해, 이 모델은 컴퓨터를 사용하는 법을 배운 AI입니다. 이는 직장인들에게는 엑셀 데이터를 웹사이트에 옮겨 적는 지루한 반복 업무의 종말을, 일반 사용자들에게는 복잡한 인터넷 뱅킹이나 쇼핑 과정을 대신해줄 진정한 에이전트(Agent, 사람의 개입 없이 스스로 판단하고 목표를 달성하는 AI 프로그램)의 탄생을 예고합니다 [IntroducingGemini2.5ComputerUse: AI for web and… LinkedIn](https://www.linkedin.com/posts/googleaidevs_introducing-gemini-25-computer-use-available-activity-7381415403840864256-ycSe) 2025 완전 가이드: Gemini 2.5 Computer Use 모델 - AI Agent 인터페이스 제어의 혁명적 돌파구.

쉽게 이해하기: AI는 어떻게 내 컴퓨터를 쓸까?

이 모델이 작동하는 방식은 우리가 눈으로 모니터를 보고 손으로 마우스를 움직이는 과정과 소름 돋을 정도로 비슷합니다. 이를 ‘에이전트 루프(Agent Loop)’라고 부르는데, 크게 세 단계의 순환 과정을 거칩니다 IntroducingtheGemini2.5ComputerUsemodel:

  1. 관찰(보고): AI가 현재 컴퓨터 화면의 스크린샷을 찍어 확인합니다. 마치 우리가 모니터를 뚫어지게 쳐다보며 “어디를 눌러야 하지?”라고 고민하는 것과 같습니다.
  2. 사고(생각): 찍힌 화면을 분석하여 어디에 버튼이 있는지, 지금 상황에서 무엇을 입력해야 하는지 판단합니다. 이때 AI는 단순히 이미지를 보는 것이 아니라 “아, 화면 중앙에 있는 파란색 버튼이 ‘결제하기’ 버튼이구나!”라고 추론합니다. 그 후 “좌표 (500, 300) 위치를 클릭해”와 같은 구체적인 행동 계획을 세웁니다 [Computer Use Gemini API Google AI for Developers](https://ai.google.dev/gemini-api/docs/computer-use).
  3. 실행(행동): 세워진 계획에 따라 실제로 마우스 커서를 옮기거나 키보드로 글자를 타이핑합니다.

비유하자면, 이 모델은 성능 좋은 자율주행 GPS와 같습니다. GPS가 현재 내 위치(스크린샷)를 확인하고, 목적지까지 가기 위해 어느 골목에서 회전해야 할지 결정(추론)한 뒤, 운전자(실행기)에게 핸들을 꺾으라고 지시하는 것과 같은 원리죠. 제미나이 2.5 컴퓨터 유즈는 이 과정을 아주 짧은 시간 안에 무한히 반복하며 목표를 향해 나아갑니다.

이런 고차원적인 작업이 가능한 이유는 이 모델이 구글의 가장 똑똑한 모델 중 하나인 ‘제미나이 2.5 프로’의 강력한 시각 이해 및 논리 추론 능력을 그대로 물려받았기 때문입니다 [IntroducingGemini2.5ComputerUse: AI for web and… LinkedIn](https://www.linkedin.com/posts/googleaidevs_introducing-gemini-25-computer-use-available-activity-7381415403840864256-ycSe) Gemini 2.5 Computer Use 완벽 분석 및 실전 코드.

현재 상황: 얼마나 똑똑한가요?

구글에 따르면, 제미나이 2.5 컴퓨터 유즈는 단순히 시키는 대로 클릭만 하는 초보 수준을 훌쩍 넘어섰습니다.

현재 이 모델은 제미나이 API를 통해 개발자들에게 미리보기 형태로 공개되어 있으며, 이미 수많은 기업이 이를 활용해 자동화 도구를 테스트하고 있습니다 [IntroducingGemini2.5ComputerUse: AI for web and… LinkedIn](https://www.linkedin.com/posts/googleaidevs_introducing-gemini-25-computer-use-available-activity-7381415403840864256-ycSe) Google LaunchesGemini2.5for AI That Clicks and Scrolls.

앞으로 어떻게 될까?

제미나이 2.5 컴퓨터 유즈의 등장은 단순히 기술적인 진보를 넘어, ‘AI 에이전트 시대’의 서막을 알리는 신호탄입니다. 구글이 이 모델을 발표한 시점이 오픈AI의 큰 행사 바로 다음 날이었다는 사실은, 글로벌 테크 기업들이 이 분야를 얼마나 중요하게 생각하는지 잘 보여줍니다 [Google launchesGemini2.5ComputerUseto rival… The Tech Buzz](https://www.techbuzz.ai/articles/google-launches-gemini-2-5-computer-use-to-rival-openai-agents).

우리는 곧 다음과 같은 놀라운 변화를 목격하게 될 것입니다:

  1. 진정한 1인 1비서 시대: 단순히 “알려줘”라고 말하는 비서가 아니라, “이거 처리해줘”라고 하면 결과를 가져오는 비서가 우리 모두에게 생길 것입니다. 여행 예약부터 영수증 정산까지, 귀찮은 모든 일들이 AI의 몫이 됩니다.
  2. 노동의 질적 변화: 엑셀에서 웹으로 데이터를 옮기거나, 수백 개의 상품 정보를 등록하는 단순 반복적인 웹 업무는 사라질 것입니다. 인간은 더 창의적이고 고차원적인 고민에 집중할 수 있게 되겠죠 2025 Complete Guide: Gemini 2.5 Computer Use Model - Revolutionary ….
  3. 철저한 보안과 안전의 중요성: AI가 내 컴퓨터를 직접 조작하는 만큼, 오작동으로 인한 사고나 보안 위협에 대한 걱정도 커질 것입니다. 이에 맞춰 더욱 강력한 안전 가이드라인과 차단 장치들이 함께 발전할 것입니다 PDFGemini Computer Use External Model Card (October 7, 2025) - updated2.

구글은 이 모델이 가진 한계점과 안전 장치를 투명하게 공개하며, 기술의 발전뿐만 아니라 책임감 있는 개발을 강조하고 있습니다 PDFGemini Computer Use External Model Card (October 7, 2025) - updated2.

AI의 시선 (AI’s Take)

과거의 AI가 인간의 ‘언어’를 이해하는 데 집중했다면, 이제는 인간이 수십 년간 만들어온 ‘디지털 도구’들을 사용하는 법을 배우기 시작했습니다. 제미나이 2.5 컴퓨터 유즈는 인간과 기계 사이의 거대한 벽을 허무는 아주 중요한 징검다리가 될 것입니다. 머지않아 우리는 마우스를 직접 잡는 대신, 마치 동료에게 업무를 부탁하듯 AI에게 방향을 지시하는 새로운 형태의 ‘컴퓨팅’에 익숙해질 것입니다. 기술이 도구가 되고, 도구가 곧 실행이 되는 시대가 우리 눈앞에 와 있습니다.

참고자료

  1. IntroducingtheGemini2.5ComputerUsemodel
  2. Google News - News aboutGemini- Overview
  3. Gemini2.5ComputerUseAGENT: THE BEST AGENTIC… - YouTube
  4. [IntroducingGemini2.5ComputerUse: AI for web and… LinkedIn](https://www.linkedin.com/posts/googleaidevs_introducing-gemini-25-computer-use-available-activity-7381415403840864256-ycSe)
  5. GeminiComputerUse: Google’s FREE Browser… - Analytics Vidhya
  6. Gemini2.5ComputerUseModel: How It Automates Browsers
  7. Gemini 2.5 Computer Use 완벽 분석 및 실전 코드
  8. [Computer Use Gemini API Google AI for Developers](https://ai.google.dev/gemini-api/docs/computer-use)
  9. 2025 Complete Guide: Gemini 2.5 Computer Use Model - Revolutionary …
  10. PDFGemini Computer Use External Model Card (October 7, 2025) - updated2
  11. 2025 완전 가이드: Gemini 2.5 Computer Use 모델 - AI Agent 인터페이스 제어의 혁명적 돌파구
  12. 2025 Complete Guide: Gemini 2.5 Computer Use Model - Revolutionary …
  13. Google LaunchesGemini2.5for AI That Clicks and Scrolls
  14. Google LaunchesGemini2.5ComputerUseModelfor Browser…
  15. Google releases a preview of itsGemini2.5ComputerUseAImodel…
  16. [Google UnveilsGemini2.5ComputerUseThat Clicks… Beebom](https://beebom.com/google-unveils-gemini-2-5-computer-use-that-clicks-types-scrolls-like-humans/)
  17. [Google launchesGemini2.5ComputerUseto rival… The Tech Buzz](https://www.techbuzz.ai/articles/google-launches-gemini-2-5-computer-use-to-rival-openai-agents)

FACT-CHECK SUMMARY

  • Claims checked: 14
  • Claims verified: 14
  • Verdict: PASS
이 글을 얼마나 이해했나요?
Q1. 제미나이 2.5 컴퓨터 유즈 모델이 작업을 수행하기 위해 가장 먼저 하는 행동은 무엇인가요?
  • 직접 코드를 수정한다
  • 화면의 스크린샷을 찍어 분석한다
  • 사용자에게 질문을 던진다
이 모델은 '에이전트 루프'를 통해 먼저 화면 스크린샷을 받아 상황을 파악한 뒤 행동을 결정합니다.
Q2. 이 모델은 어떤 기존 모델의 시각 및 추론 능력을 바탕으로 만들어졌나요?
  • 제미나이 1.0 프로
  • 제미나이 1.5 플래시
  • 제미나이 2.5 프로
제미나이 2.5 컴퓨터 유즈는 제미나이 2.5 프로의 강력한 시각 이해 및 추론 능력을 기반으로 설계되었습니다.
Q3. 이 모델의 성능에 대한 설명으로 옳은 것은 무엇인가요?
  • 경쟁 모델보다 반응 속도가 느리다
  • 웹 및 모바일 제어 벤치마크에서 경쟁사를 능가한다
  • 아직 로그인이 필요한 웹사이트는 이용할 수 없다
제미나이 2.5 컴퓨터 유즈는 여러 성능 지표에서 경쟁사를 앞서며, 특히 지연 시간이 낮은 것이 특징입니다.
    내 마우스를 대신 움직이는 AI 조수? 구글 '제...
    0:00