工具信息
文本到图像生成模型
添加于2023-04-15
功能介绍
DreamFusion是一个产品,使用了一个名为Imagen的文本到图像生成模型来优化3D场景。
该产品采用了一种称为Score Distillation Sampling (SDS) 的方式,通过优化损失函数生成扩散模型的样本。SDS允许在任意参数空间(如3D空间)中优化样本。
该产品使用类似于神经辐射场的3D场景参数化方法来定义这种可微分映射。DreamFusion添加了额外的正则化和优化策略,以改善几何形状,得到连贯、高质量的法线、表面几何和深度,并使用Lambertian着色模型进行重新照明的NeRFs。
DreamFusion的应用案例包括为各种应用程序(如视频游戏、虚拟现实体验和电影制作)优化3D场景。