텐센트 HYWorld 2.0: 이미지 한 장으로 편집 가능한 3D 가상 세계를 만드는 오픈소스 AI

3D 게임 맵을 만드는 데 수백 시간이 걸리던 시대가 끝나고 있습니다. 텐센트 Hunyuan 팀이 공개한 HYWorld 2.0은 사진 한 장(또는 텍스트 프롬프트)만으로 편집 가능한 3D 가상 세계를 생성하는 AI 시스템입니다. 게임 엔진에서 바로 사용할 수 있는 고품질 3D 메쉬를 출력하며, 학습 코드와 모델 가중치까지 오픈소스로 공개되었습니다.

이 글에서는 HYWorld 2.0의 핵심 기술, 기존 솔루션과의 차이점, Google Genie 3과의 비교, 그리고 실제 적용 가능성을 분석합니다.

HYWorld 2.0이란? 오브젝트가 아닌 "세계"를 만드는 AI

기존 AI 3D 생성 기술의 대부분은 오브젝트 수준에 머물러 있었습니다. 컵, 의자, 캐릭터 같은 단일 객체를 생성하는 것이 한계였죠. NVIDIA Edify 3D, Meta 3D Gen, Stability AI 모두 이 범주에 속합니다.

HYWorld 2.0은 근본적으로 다릅니다. 건물, 지형, 하늘, 도로를 포함한 전체 3D 세계를 단일 이미지에서 생성합니다. 단순히 보기 좋은 렌더링이 아니라, Unity와 Unreal Engine에서 바로 편집하고 사용할 수 있는 실용적인 3D 에셋을 만들어냅니다.

듀얼 출력 아키텍처

HYWorld 2.0의 가장 핵심적인 기술적 특징은 3D 메쉬 + 3D Gaussian Splatting(3DGS) 듀얼 출력 구조입니다.

• 3D 메쉬: 게임 엔진에서 편집 가능한 전통적인 3D 형식. 오브젝트 이동, 텍스처 수정, 물리 엔진 적용이 모두 가능합니다.
• 3DGS: 실시간 렌더링에 최적화된 포인트 클라우드 기반 표현. VR 경험과 고품질 시각화에 적합합니다.

하나의 입력에서 두 가지 형식을 동시에 출력함으로써, 개발 워크플로우(메쉬)와 프레젠테이션(3DGS)을 모두 커버합니다.

핵심 기술 스택: 어떻게 이미지에서 세계를 만드나

HYWorld 2.0의 파이프라인은 세 가지 핵심 기술로 구성됩니다.

1. Video Diffusion 기반 다중 뷰 생성

단일 이미지를 입력받으면, Video Diffusion 모델이 해당 장면의 다양한 각도에서 본 뷰를 생성합니다. 마치 드론이 공간을 한 바퀴 돌며 촬영한 것과 같은 효과입니다. 이 과정에서 일관성 있는 3D 구조 정보가 암묵적으로 학습됩니다.

2. Flow-Matching 네이티브 3D 생성

다중 뷰에서 3D 표현을 재구성하는 과정에서 Flow-Matching 기법을 사용합니다. 기존의 느린 최적화 기반 접근법과 달리, Feed-Forward 단일 패스로 3D 재구성을 완료합니다. 실시간에 가까운 속도로 대규모 3D 장면을 생성할 수 있는 핵심입니다.

3. Inference-Time Scaling

추론 단계에서 컴퓨팅 리소스를 추가 투입하면 품질이 비례적으로 향상됩니다. 빠른 프로토타입이 필요할 때는 가볍게, 최종 프로덕션 품질이 필요할 때는 리소스를 더 투입하는 유연한 운용이 가능합니다.

HYWorld 1.0에서 2.0으로: 무엇이 달라졌나

가장 의미 있는 변화는 게임 엔진 직접 호환입니다. 1.0에서는 생성된 결과물을 게임에 사용하려면 추가 변환 작업이 필요했지만, 2.0에서는 출력물을 Unity나 Unreal Engine 프로젝트에 바로 임포트할 수 있습니다.

Google Genie 3 vs HYWorld 2.0: 결정적 차이

3D 세계 생성 분야에서 가장 주목받는 비교 대상은 Google의 Genie 3입니다. 두 기술의 접근 방식은 근본적으로 다릅니다.

핵심 차이: Genie 3은 인터랙티브한 비디오 경험에 가까운 반면, HYWorld 2.0은 실제 게임 개발에 투입할 수 있는 3D 에셋을 생성합니다. 그리고 결정적으로, HYWorld 2.0은 오픈소스입니다.

적용 분야: 누가 이걸 쓸 수 있나

게임 개발

가장 직접적인 수혜 분야입니다. 인디 게임 개발자가 혼자서 오픈 월드 맵을 생성하거나, AAA 스튜디오가 레벨 디자인 프로토타이핑에 활용할 수 있습니다. 수백 시간 걸리던 환경 모델링이 이미지 한 장으로 시작됩니다.

VR/메타버스

가상 투어, 커스텀 가상 공간 제작이 대폭 간소화됩니다. 부동산 가상 모델하우스, 관광지 VR 체험 등에서 컨셉 이미지만으로 3D 공간을 빠르게 구축할 수 있습니다.

영화/VFX

가상 세트와 프리비즈(Pre-visualization) 제작 시간을 며칠에서 몇 분으로 단축합니다. 컨셉 아트에서 바로 3D 가상 세트를 생성해 촬영 전 미리 구도와 동선을 확인할 수 있습니다.

교육

역사적 공간의 3D 재현, 과학 실험 시뮬레이션 환경 구축에 활용할 수 있습니다. 사진이나 그림 한 장에서 몰입형 교육 공간을 만들어낼 수 있습니다.

텐센트 Hunyuan 생태계에서의 위치

HYWorld 2.0은 텐센트 Hunyuan AI 모델 패밀리의 최신 결과물입니다.

• Hunyuan-LLM: 대규모 언어 모델
• Hunyuan-DiT: 이미지 생성
• Hunyuan-Video: 비디오 생성
• Hunyuan-3D: 3D 오브젝트 생성
• HYWorld: 3D 세계 생성

오브젝트 수준의 3D 생성(Hunyuan-3D)에서 세계 수준(HYWorld)으로 확장하며, AI 기반 3D 기술 스택을 완성했습니다. 텐센트의 거대한 게임 사업과 직결되는 기술이기도 합니다. 게임 맵 제작 비용과 시간을 혁신적으로 줄일 수 있기 때문입니다.

오픈소스 임팩트

HYWorld 2.0이 특별한 이유 중 하나는 오픈소스 공개입니다. GitHub에서 학습 코드, 추론 코드, 사전 학습된 모델 가중치를 모두 내려받을 수 있습니다.

세계 수준의 3D 월드 생성 기술을 오픈소스로 공개한 것은 HYWorld 2.0이 사실상 최초입니다. NVIDIA, Meta, Google 등 경쟁사의 유사 기술은 비공개이거나 오브젝트 수준에 그치고 있습니다.

이는 연구자, 인디 개발자, 스타트업에게 진입 장벽을 크게 낮추는 의미가 있습니다. 대기업만 접근 가능하던 기술이 커뮤니티로 확산되면, 예상치 못한 혁신적 응용이 나올 가능성이 높습니다.

마무리: 3D 콘텐츠 제작의 민주화

HYWorld 2.0은 AI 기반 3D 세계 생성 분야에서 의미 있는 이정표입니다. 이미지 한 장에서 게임 엔진 호환 3D 세계를 만들고, 그 기술을 오픈소스로 공개했다는 점에서 두 가지 혁신이 동시에 이뤄졌습니다.

3D 콘텐츠 제작의 진입 장벽이 급격히 낮아지고 있습니다. 전문 3D 아티스트 없이도 고품질 가상 환경을 구축할 수 있는 시대가 현실로 다가왔습니다.

자주 묻는 질문 (FAQ)

HYWorld 2.0은 무료로 사용할 수 있나요?

네, 오픈소스로 공개되어 GitHub에서 코드와 모델 가중치를 무료로 다운로드할 수 있습니다. 다만 텐센트 Hunyuan Community License 조건을 확인해야 합니다.

어떤 입력이 필요한가요?

단일 이미지 또는 텍스트 프롬프트로 3D 세계를 생성할 수 있습니다. 별도의 3D 모델링 지식이 필요하지 않습니다.

Unity나 Unreal Engine에서 바로 사용할 수 있나요?

네, HYWorld 2.0은 게임 엔진 호환 3D 메쉬를 출력합니다. 추가 변환 없이 Unity와 Unreal Engine 프로젝트에 직접 임포트할 수 있습니다.

Google Genie 3과 무엇이 다른가요?

Genie 3은 비공개 2.5D 비디오 기반인 반면, HYWorld 2.0은 오픈소스이며 편집 가능한 진짜 3D 메쉬를 출력합니다. 게임 엔진 직접 호환이 가능한 것은 HYWorld 2.0뿐입니다.

참고 자료

• HYWorld 2.0 공식 프로젝트 페이지
• HYWorld 2.0 GitHub 저장소
• 텐센트 Hunyuan 공식 페이지