오늘 Bytedance Seed 팀은 단일 이미지에서 고품질 시뮬레이션 수준 3D 모델까지 엔드투엔드 생성을 가능하게 하는 대규모 3D 생성 모델인 Seed3D 1.0을 출시했습니다.Seed3D 1.0은 혁신적인 Diffusion Transformer 아키텍처를 기반으로 하며 대규모 데이터 트레이닝을 통해 완성되어 정밀한 기하학, 실제 텍스처 및 물리 기반 렌더링(PBR) 재료를 포함한 완전한 3D 모델을 생성합니다.
Seed3D 1.0을 통해 생성된 3D 모델은 Isaac Sim과 같은 시뮬레이션 엔진으로 원활하게 가져올 수 있으며, 구현된 지능형 대형 모델 훈련을 지원하는 데 약간의 적응 작업만 필요합니다.
또한, 단계별 장면 생성을 통해 Seed3D 1.0은 단일 객체 생성에서 완전한 3D 장면 구축까지 확장할 수 있습니다.
기존 3D 생성 모델과 비교하여 Seed3D 1.0은 장점을 보여줍니다. 텍스처 및 재료 생성 성능은 이전 오픈 소스 및 폐쇄 소스 모델을 능가하고, 지오메트리 생성 성능은 업계에서 더 큰 매개변수 규모를 가진 모델을 능가하며, 포괄적인 기능이 업계 최고의 수준에 도달합니다.
현재 Seed3D 1.0 기술 보고서가 공개되었으며 API도 출시되었습니다. 프로젝트 홈페이지를 방문하면 프로젝트 홈페이지, 체험 포털을 볼 수 있습니다.
Seed3D 1.0은 생성 AI에서 널리 사용되는 모델 아키텍처인 Diffusion Transformer를 사용하여 3D 지오메트리 생성 및 텍스처 매핑 모델을 설계합니다.
단계별 생성 전략을 사용하면 Seed3D 1.0은 단일 객체 생성에서 완전하고 일관된 3D 장면 생성으로 확장될 수도 있습니다.
실제 측정에 따르면 Seed3D 1.0은 지오메트리 생성 매개변수가 적고 효과가 더 좋습니다. 텍스처 재질로 생성된 이미지는 최고의 성능을 유지합니다.
