구글 딥마인드 지니 4 공개…가상세계에 소리까지 실시간 생성

구글 딥마인드가 10월 27일(현지시간) 실시간으로 소리까지 만들어 내는 월드 모델 '지니 4(Genie 4)'를 공개했다. 사용자가 조작하는 가상 세계를 실시간으로 생성하면서 배경음과 등장인물의 대화도 함께 만들고, 제미나이 3.8 플래시(Gemini 3.8 Flash)가 안내 에이전트로 시뮬레이션의 흐름을 잡는다. 현재는 일부 테스터 대상 연구 프리뷰이며, 구글은 AI 울트라 구독자용 '프로젝트 지니'에 "곧" 제공한다고 밝혔지만 날짜는 내놓지 않았다.

핵심 정리

• 지니 4는 딥마인드가 처음 내놓은, 오디오를 자체 생성하는 실시간 월드 모델이다. 장면마다 배경음이 붙고 등장인물 대화도 상황에 맞춰 바뀐다.
• 제미나이 3.8 플래시가 장면을 지켜보며 목표를 단계로 나누고, 새 프레임으로 각 단계를 확인한 뒤 계획을 고친다.
• 당장은 신뢰 테스터만 쓸 수 있다. AI 울트라 구독자와 제미나이 API·구글 AI 스튜디오 조기 이용 파트너가 다음 순서지만 일정은 미정이다.

월드 모델 지니 4란

월드 모델은 정해진 영상 대신 사용자 조작에 반응해 탐색 가능한 환경을 한 프레임씩 만드는 AI다. 시연에서는 키보드로 이동하고 문장을 입력해 장면을 바꾼다.

라이아 하드셀(Raia Hadsell), 디에고 리바스(Diego Rivas), 항 치(Hang Qi)가 쓴 딥마인드 공식 블로그에 따르면 사용자는 도중에 날씨를 바꾸거나 카메라를 옮기고 사람·사물을 추가할 수 있다. 제미나이가 입력 문장을 장면에 맞게 다듬는다.

지니 4 오디오, 소리와 대화를 실시간 생성

딥마인드는 "지니 4는 오디오를 자체 생성하는 우리의 첫 실시간 월드 모델"이라고 설명했다. 세계마다 고유한 배경음이 붙고, 등장인물의 대화도 장면 변화에 따라 달라진다. 공기역학이나 충돌 같은 물리 현상도 시뮬레이션한다고 했지만 정확도 수치는 공개하지 않았다.

제미나이가 시뮬레이션을 이끄는 방식

제미나이 3.8 플래시는 생성 중 안내 에이전트로 장면을 관찰하고 목표를 단계로 쪼개며, 새 프레임으로 단계 성공 여부를 확인한다. 사용자가 개입하면 계획을 고치고, 입력이 없는 동안에도 장면의 일관성을 유지한다.

제미나이 옴니(Gemini Omni)는 외형과 움직임을 실제 세계에 가깝게 잡는다. 로봇 시연에서는 '제미나이 4 아르곤(Gemini 4 Argon)'이 작업을 단계별 텍스트 캡션으로 지니 4에 넣었고, 앱트로닉(Apptronik)의 휴머노이드 '아폴로'가 체커 게임을 두는 장면이 나왔다.

배경: 지니 3에서 프로젝트 지니까지

전작 지니 3는 2025년 8월 5일 발표됐으며 720p 해상도, 초당 24프레임으로 몇 분간 일관성을 유지했다. 구글은 이를 바탕으로 한 실험 서비스 '프로젝트 지니'를 2026년 1월 29일 미국의 18세 이상 AI 울트라 구독자에게 열었고, 이용 시간은 회당 60초로 제한했다고 기술 매체 더 디코더(The Decoder)가 전했다.

누가 써 보고 있나, 한계는

테스터는 창작 산업·언론·교육·게임·엔지니어링 분야에서 모였다. 사전 시각화, 2D 사진의 가상 환경 변환, 홍수·산불 상황 재현, 게임 시제품 제작 등에 쓰였다.

딥마인드는 "시각적 세부와 사물의 지속성이 시간이 지나며 여전히 바뀌거나 어긋날 수 있다"고 인정했다. 복잡한 물리 상호작용, 실시간 오디오 정확도, 장기 일관성 등이 과제다. 지니 4가 만든 영상과 오디오에는 모두 구글의 비가시 워터마크 신스ID(SynthID)가 들어간다.

전망

구글은 프로젝트 지니의 AI 울트라 구독자와 제미나이 API·AI 스튜디오 조기 이용 파트너에게 순차 제공할 계획이며 대기자 명단을 받고 있다. 딥마인드는 제미나이가 이야기를 설계하고 지니가 화면을 그리는 '하이브리드 월드 모델'을 장기 방향으로 제시했다. API 가격과 국내 이용 가능 여부는 아직 발표되지 않았다.

자주 묻는 질문

지금 지니 4를 써 볼 수 있나?

신뢰 테스터가 아니면 어렵다. 구글은 '곧' 제공한다고만 했다.

지니 3와 무엇이 다른가?

오디오 자체 생성과 제미나이 3.8 플래시의 실시간 안내다. 해상도 등은 비공개다.

AI 생성물임을 어떻게 표시하나?

딥마인드에 따르면 지니 4가 만든 영상과 오디오에는 모두 신스ID 워터마크가 들어간다.

참고 자료

• Genie 4: A new generation of world simulation — Google DeepMind(2026년 10월 27일)
• Genie 3: A new frontier for world models — Google DeepMind(2025년 8월 5일)
• Google DeepMind opens Project Genie to US subscribers for real-time AI world generation — The Decoder(2026년 1월 29일)