首页 > 生活 > 正文

GrandTheftAuto和AI帮助团队将狗的照片转化为3D模型

来源:生活2024-02-29 10:59:30
导读 得益于萨里大学的一项获奖研究和著名的视频游戏侠盗猎车手,狗的照片很快就能用于帮助生成比以往更准确的3D模型。研究人员教导人工智能(AI)...

得益于萨里大学的一项获奖研究和著名的视频游戏侠盗猎车手,狗的照片很快就能用于帮助生成比以往更准确的3D模型。

研究人员教导人工智能(AI)系统根据狗的2D图像预测3D姿势,并根据使用GrandTheftAutoV创建的图像对其进行训练。

“我们的模型是在CGI狗上进行训练的,但我们能够用它根据真实动物的照片制作3D骨骼模型。这可以让自然资源保护主义者发现受伤的野生动物,或帮助艺术家在虚拟世界中创造更逼真的动物,”MoiraShooter说,研究生。

教人工智能从2D图像中获取3D信息的一种方法是向其显示照片,同时向其提供有关3D“地面实况”的信息,即物体实际位于3D空间中的位置。对于人类来说,这意味着穿着动作捕捉服。

即使它们表现得最好,让几十只狗穿上动作捕捉服也很困难。

相反,研究人员创造了无数的虚拟狗来进行研究。

研究人员修改了《侠盗猎车手》的代码,将主角换成了八种狗中的一种——这一过程被称为“改装”。他们生成了118个狗在各种不同天气和照明条件下坐着、行走、吠叫和奔跑的视频。

该团队将他们的新数据库命名为DigiDogs,由27,900个帧组成。他们现在将使用Meta的DINOv2模型对其进行微调,以确保它能够预测3D姿势以及真实的狗图片。

“3D姿势包含的信息比2D照片多得多。从生态到动画,这个巧妙的解决方案有很多可能的用途,”Shooter说。

关键词:
版权声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。