사진 한 장이 게임 속 세상으로? 구글 딥마인드 '지니 2'가 만드는 마법 같은 미래

AI Summary

구글 딥마인드의 '지니 2'는 이미지 한 장을 기반으로 사용자가 직접 조종하고 탐험할 수 있는 무한한 3D 가상 환경을 생성하는 대규모 기반 세계 모델입니다.

한 번 상상해보세요. 어제 가족과 함께 여행하며 찍은 산 정상의 풍경 사진 한 장을 AI에게 보여줍니다. 그리고 “이 사진 속으로 들어가고 싶어”라고 말하는 순간, 평면이었던 사진이 깊이감이 느껴지는 3D 공간으로 변합니다. 여러분은 키보드와 마우스를 이용해 그 산길을 직접 걷고, 근처 호수에서 수영을 즐기며, 물가에 있는 돌을 던져 물결이 이는 모습까지 생생하게 관찰할 수 있습니다.

이것은 더 이상 공상과학 영화 속 상상이 아닙니다. 구글 딥마인드(Google DeepMind)가 새롭게 공개한 차세대 AI 모델, ‘지니 2(Genie 2)’가 현실로 만들어가고 있는 풍경입니다. Genie 2: A large-scale foundation world model — Google DeepMind

이게 왜 그렇게 중요한가요?

우리가 지금까지 즐겨온 게임이나 가상 현실(VR)은 수많은 개발자가 밤낮으로 코드를 짜고, 복잡한 3D 모델을 하나하나 빚어 만든 엄청난 노력의 결과물이었습니다. 하지만 지니 2는 완전히 다른 방식으로 접근합니다. 이 AI는 미리 짜인 프로그램 없이도, 마치 사람이 꿈을 꾸듯 스스로 세상을 즉석에서 그려냅니다. Genie 2: A large-scale foundation world model - simonwillison.net

지니 2가 중요한 이유는 단순히 ‘재미있는 게임’을 뚝딱 만들어내기 때문이 아닙니다. 이 모델은 AI가 ‘현실 세계가 어떻게 작동하는지’ 그 원리를 스스로 학습하고 있다는 강력한 증거입니다. 구글 딥마인드의 CEO 데미스 허사비스(Demis Hassabis)는 이 기술이 머지않은 미래에 지능형 로봇을 훈련시키는 핵심 도구가 될 것이라고 강조했습니다. Google DeepMind CEO demonstrates Genie 2, world … - CBS News

비유하자면 이런 식입니다. 실제 로봇을 복잡하고 위험한 공장에 바로 투입하면 사고가 날 위험이 큽니다. 하지만 지니 2가 만든 정교한 가상 공장에서 수만 번의 예행연습을 시킨 뒤 실제 환경으로 보낸다면 어떨까요? 훨씬 안전하고 똑똑한 로봇을 더 빠르게 만들 수 있게 될 것입니다. Google Genie 2, an AI model to create playable 3D environments

쉽게 이해하기: ‘세계 모델’이란 무엇일까?

지니 2를 이해하기 위해 꼭 알아야 할 핵심 용어는 바로 ‘기반 세계 모델(Foundation World Model)’입니다. 여기서 ‘세계 모델’이란 쉽게 말해 AI의 머릿속에 탑재된 가상의 물리 법칙 사전과 같습니다. Genie 2, Google DeepMind가 개발한 대규모 기반 세계 모델

우리가 공을 위로 던지면 중력 때문에 아래로 떨어질 것을 알고, 물속에서는 저항 때문에 움직임이 느려질 것을 예상하는 것처럼, 지니 2도 세상이 어떤 규칙으로 돌아가는지에 대한 ‘상식’을 가지고 있습니다.

지니 1에서 지니 2로: 2024년 3월에 처음 등장했던 초기 모델 ‘지니(Genie)’는 주로 2D(평면) 가상 환경을 만드는 수준이었습니다. 당시에도 110억 개의 매개변수(Parameter, AI가 학습하며 미세하게 조정하는 수조 개의 가상의 조절 나사)를 가진 모델로 큰 관심을 받았죠. Genie (world model) - Wikipedia, [2402.15391] Genie: Generative Interactive Environments
3D로의 놀라운 진화: 이번에 발표된 지니 2는 이를 비약적으로 뛰어넘어, 훨씬 더 몰입감 넘치고 풍부한 입체적 3D 가상 세계를 생성해냅니다. Genie 2: The Next-Generation Foundation Model for 3D Worlds

이 똑똑한 AI는 인터넷상의 수많은 동영상을 시청하며 세상의 움직임을 스스로 깨우쳤습니다. 덕분에 우리가 “점프해”나 “헤엄쳐”라는 명령을 내리면, 그 행동이 가상 세계에서 중력이나 물의 저항과 어떻게 맞물려 나타날지 정확하게 계산해서 보여줍니다. Genie 2: A large-scale foundation world model — Google DeepMind

지니 2가 할 수 있는 놀라운 능력들

지니 2는 단순히 정해진 영상을 보여주는 재생기가 아닙니다. 사용자의 조작에 실시간으로 반응하며 변화하는 ‘살아있는 환경’을 제공합니다.

단 한 장의 사진으로 세상 창조: 스마트폰으로 직접 찍은 풍경 사진, 웹서핑 중 발견한 멋진 이미지, 심지어 종이에 슥슥 그린 스케치 한 장만 있어도 충분합니다. 지니 2는 이 이미지를 씨앗 삼아 우리가 직접 탐험할 수 있는 3D 공간을 즉석에서 꽃피웁니다. DeepMind’s Genie 2 generates playable 3D worlds from single …
내 마음대로 조종하는 재미: 생성된 가상 세계 안에서 사용자는 키보드와 마우스를 사용해 캐릭터를 자유롭게 움직일 수 있습니다. 캐릭터가 물체와 부딪히거나 복잡한 동작을 할 때 나타나는 움직임은 마치 실제 물리 법칙이 적용된 것처럼 자연스럽습니다. Genie 2, Google DeepMind가 개발한 대규모 기반 세계 모델
스스로 깨우치는 물리 법칙: 지니 2는 누구에게도 “물체는 이렇게 부딪혀야 해”라는 개별 규칙을 배운 적이 없습니다. 대신 엄청난 양의 데이터를 학습하며 사물 간의 상호작용과 물리 법칙을 스스로 터득하는 ‘창발적 능력’을 보여줍니다. Genie 2: A large-scale foundation world model — Google DeepMind
일관성 있는 공간 유지: 가상 세계를 걷다가 뒤를 돌아봤는데 아까 본 나무가 사라져 있다면 몰입감이 뚝 떨어지겠죠? 지니 2는 탐험하는 동안 공간의 일관성을 유지하여, 사용자가 가상 세계를 최대 1분 동안 모순 없이 자유롭게 탐사할 수 있게 해줍니다. DeepMind’s Genie 2 generates playable 3D worlds from single …

현재의 상황과 넘어야 할 과제

지니 2는 혁신적인 기술이지만, 아직 집에서 게임기처럼 매일 즐기기에는 몇 가지 한계가 있습니다.

탐험 시간의 제약: 현재 지니 2가 생성한 환경에서 자유롭게 활동할 수 있는 시간은 약 1분 내외입니다. DeepMind’s Genie 2 generates playable 3D worlds from single …
연구 단계의 기술: 현재는 구글 딥마인드 내부의 연구용 기술로, 일반 사용자가 직접 체험해볼 수 있도록 완전히 공개된 상태는 아닙니다. 다만, 전 세계의 수많은 개발자가 이 프레임워크를 분석하고 발전시키기 위해 다양한 시도를 이어가고 있습니다. Genie 2: A large-scale foundation world model - simonwillison.net, GitHub - lucidrains/genie2-pytorch: Implementation of a framework for …

우리가 마주할 미래는 어떤 모습일까요?

지니 2와 같은 ‘기반 세계 모델’은 미래 인공지능의 핵심적인 기둥이 될 것입니다. 지금까지의 AI가 텍스트를 쓰거나 이미지를 그리는 데 그쳤다면, 이제는 직접 행동하고 세상을 이해하는 AI의 시대가 열리고 있기 때문입니다. Genie 2: How Google DeepMind’s AI is Creating Infinite …

가까운 미래에는 우리 모두가 자신만의 독특한 가상 세계를 1초 만에 만들어내고, 그 안에서 AI 친구와 함께 모험을 떠나는 즐거운 상상을 현실로 바꿀 수 있을지도 모릅니다. 또한, 지니 2라는 안전한 연습장에서 훈련받은 로봇들이 우리 집 거실에서 청소를 돕고 요리를 함께하는 날도 머지않아 보입니다. Google DeepMind CEO demonstrates Genie 2, world … - CBS News

AI의 시선 (MindTickleBytes의 AI 기자 시선)

지니 2는 AI가 단순히 데이터를 처리하는 도구를 넘어, 독자적인 세계관과 물리 법칙을 이해하는 존재로 거듭나고 있음을 상징합니다. 코드 한 줄 없이 사진 한 장으로 구현되는 무한한 세상은, 인간의 상상력이 기술적 제약 없이 마음껏 펼쳐질 미래를 예고하고 있습니다. 우리가 바라보는 사진 한 장이 이제는 새로운 모험의 시작점이 된 셈입니다.

참고자료

FACT-CHECK SUMMARY

Claims checked: 16
Claims verified: 16
Verdict: PASS

Share this article:

이 글을 얼마나 이해했나요?

Q1. 지니 2가 생성한 가상 환경에서 사용자가 할 수 있는 행동은 무엇인가요?

단순히 보기만 할 수 있다
점프나 수영 등 키보드와 마우스로 조종할 수 있다
이미지 파일로 저장만 가능하다

지니 2는 '동작 제어(Action-controllable)'가 가능한 모델로, 사용자가 키보드와 마우스 입력을 통해 캐릭터를 조종하며 상호작용할 수 있습니다.

Q2. 지니 2가 가상 세계를 만드는 데 필요한 최소한의 정보는 무엇인가요?

수천 줄의 프로그래밍 코드
단 한 장의 프롬프트 이미지
전문적인 3D 모델링 파일

지니 2는 텍스트, 사진, 심지어 단순한 스케치나 단 한 장의 프롬프트 이미지로부터 3D 가상 환경을 생성해냅니다.

Q3. 지니 2와 같은 모델을 구글 딥마인드는 무엇이라고 부르나요?

기반 세계 모델(Foundation World Model)
단순 이미지 생성기
동영상 편집 도구

구글 딥마인드는 지니 2를 가상 환경을 시뮬레이션하고 행동의 결과를 예측할 수 있는 '기반 세계 모델(Foundation World Model)'이라고 부릅니다.