利用DALL·E从文字合成图片相信大家已经比较熟悉,近年来类似的研究不少,比如Meta前不久公布的Make-A-Video研究,即利用AI才能够文本合成视频。近期,谷歌也公布了一项新的AI模型Dreamfusion,该模型的特点是将AI图像分析模型Imagen与NeRF(神经辐射场)结合,可根据文本来合成3D模型。
据青亭网了解,谷歌在2021年底曾推出3D合成AI系统Dream Fields,Dreamfusion则是在此基础上的演变,区别是Dreamfusion利用Imagen来取代OpenAI的CLIP图像分析模型,Imagen是谷歌预训练的2D文本图像扩散模型。而神经辐射场的部分则提供了合成3D视图的能力,并允许在神经网络中存储3D模型,接着通过Marching Cubs三维重建算法,可导出为具有网格的3D模型,并在常见的3D渲染引擎、建模软件中使用。
简单来讲,Imagen的优势在于使用2D文本图像即可训练,更容易规模化。Dreamfusion会使用Imagen生成的多视角2D图像来学习3D渲染,实现用文本来合成3D模型。此外相比于Dream Fields,Dreamfusion可合成更高质量、具有深度和法线的、可重新照明的3D模型,因此整体效果更逼真。而且,Dreamfision生成的多个3D模型可缝合到同一个场景中。
参考:Mixed
文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。
奥维云网(AVC)推总数据显示,2024年1-9月明火炊具线上零售额94.2亿元,同比增加3.1%,其中抖音渠道表现优异,同比有14%的涨幅,传统电商略有下滑,同比降低2.3%。
“以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。
华硕ProArt创艺27 Pro PA279CRV显示器,凭借其优秀的性能配置和精准的色彩呈现能力,为您的创作工作带来实质性的帮助,双十一期间低至2799元,性价比很高,简直是创作者们的首选。