欧宝体育张信哲代言下载 0755-33154377
2D视频变3D模型:英伟达推出“神经朗基罗”AI复刻“大卫”肌肉纹路可见
来源:欧宝体育张信哲代言下载    发布时间:2023-07-18 10:12:05

  智东西6月5日音讯,6月1日,英伟达研讨院发布了一篇文章,推出其新研发的AI模型——神经朗基罗(Neuralangelo),该模型运用神经网络技能,能够将2D视频片段转换为细节丰厚的3D大规模场景。英伟达乃至还展现了对米开朗基罗雕塑著作《大卫》的复刻,使得各种肌肉纹路肉眼可见。

  除了有目共睹的神经朗基罗,英伟达还计划在 6月18日至22日举办的计算机视觉职业顶会CVPR(计算机视觉与模式辨认会议)上发布近30款产品,充沛展现英伟达在AIGC立异上的打破。

  3D重建技能一向都是计算机图形学的要点研讨范畴,此前也有多项技能能够完结2D视频转3D模型,但那些技能总是很难捕捉重复的纹路图画、同质的颜色、激烈的颜色改变。

  与之比较,英伟达的神经朗基罗能够精准捕捉这些杂乱细节。它凭仗了自家的逆向烘托东西即时NeRF(Instant NeRF)的重要技能——即时神经图形基元(instant neural graphics primitives),因而,该模型能够精准再现房顶瓦片、玻璃板、润滑的大理石等一系列杂乱资料的细节纹路,乃至能够重现建筑物的内外部。

  除了所生成的3D模型有高精密度,神经朗基罗的共同之处还在于它的普适性,即用户乃至不需求运用专门的设备,仅凭仗智能手机就能完结一场3D重建。

  艺术家要完结一个雕像需求三个进程。首要,经过多个旁边面调查物体,以丈量其深度、巨细和形状等数据;其次,依据丈量数据凿出雕塑的主体形状;终究,详尽地描绘其间的细节纹路。

  和艺术家的雕琢进程类似,神经朗基罗的3D重建也会阅历三个进程。首要,经过不同视点的2D视频捕捉关键帧;其次,依据捕捉的关键帧创立一个大略的3D模型;终究,运用即时神经图形基元技能优化烘托、体现细节。

  英伟达研讨院估计将在 6月18日至22日举办的计算机视觉职业顶会CVPR(计算机视觉与模式辨认会议)上发布神经朗基罗模型。

  除了神经朗基罗模型,英伟达还将在大会上展现近30款模型,掩盖姿势辨认、三维重建和视频生成等范畴。

  其间DiffCollage是一款能够依据文本提示生成视频序列的AI模型,它还能够用拼图的方式,将小图画拼贴为大图画,终究能够生生长景象图、360度全景图和循环运动图画。

  正如英伟达研讨院高档主管兼论文的作者刘明宇(Ming-Yu Liu)所说到的,神经朗基罗模型这种2D转3D的重建才能将给创作者带来巨大优点,乃至引发工业新革新。

  构思人员能够将这些3D物体导入规划应用程序,进一步运用于艺术、视频游戏开发、机器人和“数字孪生”(Digital Twin)等范畴。

返回列表