首页 > 科技动态 > 内容

研究人员提出的人工智能模型可以提高任何视频的质量

发布于：2024-06-17 编辑：匿名来源：网络

研究人员越来越多地使用人工智能将历史镜头转换为高分辨率、高帧率的视频，看起来就像是用现代设备拍摄的。

为了简化这个过程，罗切斯特大学、东北大学和普渡大学的研究人员最近提出了一个框架，可以从低帧率、低分辨率的视频生成高分辨率的慢动作视频。

研究团队表示，他们使用的“时空视频超分辨率（STVSR）”算法不仅在图像质量方面优于现有方法，而且速度也比之前的最佳水平快三倍。

艺术人工智能模型。

从某种意义上说，这个框架的提出是继2016年NVIDIA发布视频处理AI模型之后的又一次改进。

NVIDIA的AI模型可以对任何视频应用进行慢动作处理。

据了解，类似的高分辨率技术已经应用于视频游戏领域。

去年，《最终幻想》的用户通过使用基于此类技术的名为AI Gigapixel（售价美元）的软件提高了《最终幻想VII》的背景分辨率。

具体来说，STVSR同时学习时间插值（如何合成原始帧之间不存在的中间视频帧）和空间超分辨率（如何从相应的参考帧及其相邻帧重建高分辨率帧）；同时，得益于附带的卷积长短期记忆模型，它能够通过利用视频上下文和时间对齐从聚合特征重建帧来合成高分辨率慢动作视频。

研究人员使用来自 Vimeo 的 0 多个 7 帧剪辑的数据集来训练 STVSR，并使用单独的评估语料库将数据集划分为快运动、正常运动和慢运动集，以衡量各种条件下的表现。

。

在实验中，他们发现 STVSR 在快速运动视频上取得了显着的改进，包括那些具有挑战性的运动，例如篮球运动员在球场上快速移动的视频。

据外媒报道，该AI模型能够重建图像结构更准确、模糊伪影更少的帧，同时比基线模型小四倍，速度至少快两倍。

预印本论文的合著者写道：“通过这种单阶段设计，我们的网络能够很好地探索任务中时间插值和空间超分辨率之间的内在联系。

” “它使我们的模型能够自适应地学习，利用有用的局部和全局时间上下文来缓解大型运动问题。

研究人员提出的人工智能模型可以提高任何视频的质量

大量的实验表明，我们的框架比现有的人工智能模型更加有效和高效，并且所提出的特征时间插值网络和可变形模型可以处理非常具有挑战性的快动作视频。

”据外媒报道，该项目的研究人员计划于今年夏天发布源代码。

站长声明

标签：

上一篇：首批国产特斯拉轿车出口海外，预计下周二启运

下一篇：本周锋玩：新 Kindle 来了，默默看了一眼在吃灰的老款

创业板上市委员会：熵科技股份有限公司等三家公司将于12月2日首发

创业板上市委员会公告，熵科技股份有限公司、重庆宇芯平锐电子股份有限公司、锐捷网络将于12月2日首次亮相。

06-17
如何在Web3“熊市”中成为独角兽？

作者 |编辑：薛小万 |靖宇这是另一个Web3初创公司迅速成长为独角兽的故事——四位中国创始人花了9个月创建了Solana上最大的NFT交易市场Magic。 Eden今年6月完成1.3亿美元B轮融资，估值16亿美元。但这不仅仅是加密货币熊市逆向扩张的制胜手册。目前Web3的发展阶段，已经从概

06-18
中新网：“字节跳动将TikTok印度业务出售给Glance”的消息不实

近日，有媒体报道称，字节跳动正寻求将TikTok印度业务出售给当地竞争对手Glance。字节跳动表示不会对传闻发表评论。但有了解人士的人士向中新社透露，上述信息不实。

06-17
中国企业出海痛点分析及海外客服系统解决方案

.wp-block-column h3{margin-left:0} 随着中国经济的快速发展和全球化进程的加快，越来越多的中国人企业开始走出国门，寻求更广阔的市场和商机。然而，在出海过程中，很多企业面临着诸多痛点，其中最突出的就是海外客户服务问题。本文将分析中国企业出海的痛点，探讨海外客

06-18
移动互联网下半场伊始，HTML5是竞争焦点

昨晚，微信小程序更新了19个接口。一些试用用户表示，本次更新“显着优化了编辑体验”。这是微信小程序的第二次更新。一个月前，微信小程序的到来，让移动互联网进入了下半场。 App用户增长红利趋于缓和，百度随即出售了91无线的iOS应用分发和运营业务。两人对现有模式的

06-18
西瓜创客宣布融资1.5亿元，新东方教育文化产业基金领投

据投资界8月29日消息，在线少儿编程教育品牌“西瓜创客”宣布获1.5亿融资人民币B轮投资，由新东方教育文化产业基金领投，赛富投资基金、泛海投资跟投，现有股东红杉资本中国基金、经纬中国、百词展追加投资。资金将主要用于课程研发、AI双师课堂持续开发、人机交互体验提升

06-17
武汉光谷新成立天使创业投资基金

投资界（ID：pedaily）消息，1月15日，光谷金控集团注册成立武汉光谷天使创业投资合伙企业（有限合伙）（以下简称该基金主要投资于东湖高新区的种子期、天使期和早中期项目，重点支持关键核心技术和地方的研发。科技成果转化，培养和引进高层次人才到光谷创新创业，努力打通

06-18
株洲200亿基金中的基金到位

又一超级基金中的基金浮出水面。投资界-解码LP获悉，前进药业近日发布公告，为响应和支持株洲市政府关于发展先进产业集群的战略部署，公司首期投资3亿元。此次参与由株洲市人民政府、湖南省财政牵头。鑫金控集团与株洲市国企作为发起人设立的株洲先进产业集群发展基金中的

06-18
智翔光电完成数千万元B轮融资，上海长江国宏独家投资，

投资界（ID：pedaily）9月8日消息，据36氪报道，近日，高精度3D相机开发商西安智翔光电科技有限公司（简称“智翔光电”）发布公告称，已完成数千万元B轮融资，由上海长江国宏独家投资，清通资本作为独家投资方。这也是继今年初A+轮之后，志翔光电年内完成的第二轮融资。此前

06-18
深亮6英寸VCSEL芯片生产线即将投产，解决3D传感光源燃眉之急

MEMS 中国首条6英寸VCSEL芯片生产线落户火炬区逸仙微电子产业园广东中山深亮智能科技（中山）有限公司拥有VCSEL核心技术和深厚的行业积累。即将量产紧缺的VCSEL芯片，满足手机3D传感、光通信、智能驾驶传感等领域的迫切需求，一举解决我国半导体激光器“缺芯”问题。困境。

06-06
芯柔科技完成过亿元B轮融资，由国兴投资

投资社区（ID：pedaily）领投 1月29日消息，Metal Mesh传感器（柔性金属网格触摸传感器）制造商芯柔科技完成过亿元B轮融资B轮融资，本轮融资由国兴投资领投，融资资金将用于产品研发和产能扩张。浙江新柔科技有限公司（FlexTOUCH）成立于今年3月。是一家研发、制造和销售新

06-17
中东抢人之战，选择阿联酋还是沙特

阿联酋的黄金签证和沙特的高级居留签证是中东国家面临不同经济开放阶段的必然选择。当您选择阿联酋，您就选择了现在；当您选择沙特阿拉伯时，您就选择了未来。沙特和阿联酋是“去中东”绕不开的两块宝地。一个是改革开放的石油大亨，一个是久负盛名的海湾明珠。为了在未来

06-18