英特尔用英伟达显卡 给GTA5打了个超强画质补丁,gta5画质补丁 2024-02-20 22:26:54 0 0 英特尔居然用英伟达显卡,给GTA5做了个画质增强补丁? 没错,画面亿点点接近真实世界的那种: 不过,英特尔怎么想起来搞计算机图形学方面的研究了? 毕竟,去年11月份,英特尔正式宣布推出他们的Iris Xe MAX独立显卡,研究已经在进行中了。 这波啊,这波英特尔在大气层。(手动狗头) 所以,这个画质增强补丁,究竟给GTA5的画面“施了什么魔法”? 不用光追,3点改变让图像更真实 通常来说,用GAN就能实现类似的逼真图像,例如将一匹马转换成斑马。 将这些物理信息与图像一起输入模型,就能避免网络在改变图像风格时,连着物理信息也一块改变了。 这样,既能增加图像真实性、又能减缓伪影出现的情况。 首先,来看生成部分。 研究人员发现,要想让GTA5中的图像看起来更真实,有3点特征可以改变: 增加汽车的光泽 改善植被的整体外观 让沥青路面看起来更光滑 为此,图像增强网络(架构基于HRNetV2)本身,采用了KITTI、Cityscapes和Mapillary Vistas三个数据集进行训练,分别学习这些特征。 △图像增强网络 其中,采用KITTI数据集训练网络,以增强GTA5中的汽车光泽(传说中的抛光): 再采用Cityscapes训练,模拟出更接近真实世界的气候情况(这里模拟了德国气候): 最后,用Mapillary Vistas数据集进行训练,以模拟出更光滑的沥青路面: 这样,相比于GTA5中的动画场景,生成的图像车子会反光、植被更丰富、路面也更平坦了,看起来更接近真实世界。 然后,就是鉴别部分了。 这部分包括感知鉴别器、和一个名为LPIPS(Learned Perceptual Image Patch Similarity)的指标,分别评估生成图像的真实性、以及与输入图像之间的相似性。 鉴别器包含分割网络和VGG-16两部分,用来对生成图像和现实场景中的图像进行对比,并给生成图像进行打分,越真实分数越高。 至于LPIPS,则是一个指标,用来评估生成图像与最初输入的图像之间的“感知相似度”。 与其他模型相比,效果如何? 论文将Intel的模型,与ColorTransfer、SPADE、WCT2、CUT、TSIT等模型进行了对比。 从视频中来看,Intel的模型生成的结果,基本都能保持与GTA5原始图像一致的结构。 但其他模型却暴露了一些不足,其中效果最糟糕的是SPADE,根本无法生成相应的场景布局。 再比如,ColorTransfer无法修改纹理,因此欠缺了一些真实感: 从各项指标来看,Intel的模型综合表现也是最优的(数值越低,效果越好)。 不过,新模型也有不太完美的地方,进行增强后的路人效果还是一般,看起来不太真实。 当然,这也和采用的训练数据集有关,Intel模型所用的数据集,并不过多地涉及行人,主要还是用于增强天空、沥青路、汽车光泽等真实感。 网友:比路径追踪便宜多了! 对于这次模型展现的效果,网友们的评价也是褒贬不一。 有网友迫不及待地想要用上了:搞起! 还有网友表示,这将是未来GTA-5这类游戏的发展方向——更接近真实世界。 而且,这项技术相比于路径追踪,不知道要便宜多少。 最重要的是,技术所用的神经网络,还修复了物体上那些不真实的纹理。 当然,也有网友调侃: 视频是用便宜的行车记录仪来拍的?(这个视频只有720p) 嗯,所以这就是《黑客帝国》色调呈绿色的原因。 还有一些网友不太喜欢这种类型的“写实风”: 这,这只是把加州变成‘德国风’吧? 这不是又回到GTA 4了? 对此,有网友解释说,研究人员和游戏开发者的出发点不同。 这是一个巨大的飞跃! 纹理和光照是CGI中两个非常棘手的问题,使用光线追踪呈现逼真的光泽,需要计算大量表面之间的光线反射。 应用ML可以巧妙地跳过最困难的部分。这项技术可以用来制作游戏、电影或电视剧。 你希望游戏用上这样的图像增强引擎吗? 责任编辑:随心文章纠错 收藏(0)