新闻资讯

工程案例

当前位置:天深达信息科技 > 新闻资讯 > 行业新闻 >

中国人工智能公司发布新的三维人体技术,《丽

图片来源:视觉中国

仅仅用普通的光学相机就能打造出你的“3D立体肖像”,这是一种什么样的体验

人工智能平台公司云最近宣布了其在三维人体重建技术方面的成就 重大突破。 3月19日, 作为一个 《国产电脑视觉四小龙》 其中一项云从技术(以下简称云从)宣布,其基于单帧图像的三维人体重建技术创造了三项世界纪录。 这也是这种3D重建技术的一项重要成就,因为去年云在3D人脸数据集上打破了记录。。

所谓的三项世界记录指的是人类。 6M、超现实和UP-3D数据集是世界上关于3D人体重建技术的权威数据集。 名单上的竞争者包括知名企业、研究机构和大学,如加州大学伯克利分校、宾夕法尼亚大学、亚马逊和奥多比研究所。。

那么,这种“令人敬畏的”人工智能技术有什么应用? 对于公众来说,3D人体重建技术带来了新的体验:

这意味着高精度全身“瘦身”只能通过美容应用程序来完成。 当你站在镜子前时,购物中心的试衣镜可以在一秒钟内更换。 如果被归入电影产业的范畴,新的3D人体重建技术甚至会超过今年好莱坞大片《丽塔》(钛媒体)中使用的视觉效果 详细介绍了该电影的特效技术。 )。

在三维重建领域,误差通常是衡量算法性能的主要指标,它是指生成的模型与实际图像之间的差异。 一般来说,误差越小,精度越高,技术性能越好。。

云向钛媒体透露,技术突破“显著降低了原始最小误差记录30 %,使得3D人体建模结果更加优秀,更接近人体的实际情况。“2018年10月,从云科技完成B+轮融资,金额超过10亿元 以下信息是云服务器提供的最低错误记录:

超现实世界的总体精度误差是75°50亿元 4毫米至52毫米 7毫米;

联合精度误差从55。8毫米至40毫米。1毫米;

人类3。6M上的关节精度误差为59°。9毫米至46毫米。7毫米;

除了误差指标,流利度也是评价技术效果的关键指标。根据从云的说法,当前人体模型的帧速率已经达到了每秒200帧,而电影的帧速率是每秒24帧。即使对于要求高流畅性的视频游戏,达到每秒60帧也已经非常流畅了。在计算速度方面,人体建模所需的时间也从数百毫秒减少到5毫秒,因此建模效率更高。

关键指标取得重大突破,加快了三维人体重建的落地进程,但这一概念为公众所陌生。从提议的单帧3D人体重建的云具体是什么? 它的革命性是什么?

由于人体具有丰富的姿态和服装,云提出了一种新的基于人体三维深度预测的三维信息表示方法。这项技术通过分析三原色图像(没有深度信息的RGB )来预测人体的3D形状和姿势。

这是三维人体重建从二维到三维的飞跃。

传统的人体关键点检测技术经常监控 二维人体骨关节点 也就是说,通过技术预测了RGB图像中十多个人体关节点的坐标。这种方法有它的缺点。 首先,这样捕获的节点非常稀疏;其次,以这种方式捕获的结果通常仅包括二维平面的坐标预测,而不能恢复三维深度信息并反映深度感知。

然而,基于单帧图像的三维重建技术不仅可以输出骨关节点信息,同时还可以预测人体表面的大量关键点信息,使得预测结果更加丰富。 此外,每个点的坐标以三维形式呈现,可以反映不同主干的深度信息。
人体关键点监测:从2D向3D进化

值得注意的是,在新一代三维人体重建技术中,云也强调“是”。 基于单帧图像”。这与最需要“连续图像序列”或“多视图图像”的传统技术大不相同。

单帧图像是一张照片,只需要一个普通的光学相机作为传感设备来完成人体重建。 然而,在传统技术中,对图像的要求更高,硬件需要双目摄像机或结构光摄像机等设备,这在手机等便携式设备上是不可能完成的。

基于单帧图像的三维重建技术降低了设备使用的门槛,也给其背后的技术带来了更大的挑战。该技术需要从单帧图像中推断出人体或人脸的三维形状,并通过“光学透视”和“阴影叠加”等基本光学原理预测三维空间中每个关键点的位置和方向,从而获得人体的姿态或表情信息。