首页 > 科技未来 > 内容

编码为高清! AI一秒还原马赛克,杜克大学出品

发布于:2024-06-18 编辑:匿名 来源:网络

像素不够,后期修图怎么样?在知乎上搜索低像素照片修图,发现帮助帖子太多了,根本看不完,而且从PS技巧、插件神器到各种照片修图APP的教程也太多了,让我心疼不已。

我眼花缭乱。

关键是不知道效果如何。

不过,杜克大学的一个研究团队最近开发了一种可以解决所有低像素问题的黑色AI图像编辑技术PULSE。

据称,它可以将图像原始分辨率放大64倍,任何质量较差的图像都可以在几秒钟内转变为高清逼真的图像。

即使是马赛克的人脸图像,毛孔、皱纹、毛发也能清晰还原。

马赛克转高清人像PULSE是一种新的超分辨率算法,通过潜在的太空探索对照片进行采样,可以将16x16像素的低分辨率(Low Resolution,简称LR)放大到x像素的高分辨率(High Resolution) 。

,简称HR),在几秒钟内放大了64倍,而传统方法最多只能放大8倍。

我们先来看一组例子。

照片修图界最难处理的LR头像,通过PULSE可以秒变高清细腻的图像。

更重要的是,PULSE可以定位面部的关键特征,以更高分辨率生成一组类似的细节。

虽然画面中头像是马赛克的,但PULSE还可以“想象”眉毛、睫毛、头发、脸型等面部细节,形成高清、栩栩如生的肖像。

然而,过度模糊产生的肖像只是一张虚拟的新面孔,实际上并不存在。

因此,该技术无法用于身份识别。

例如,监控摄像头拍摄的失焦、无法识别的照片无法通过PULSE恢复为真实的肖像。

杜克大学研究团队的计算机科学家辛西娅·鲁丁 (Cynthia Rudin) 表示:“以前从未产生过如此超高分辨率的图像,可以生成尚不存在且看起来逼真的新面孔。

”同时她补充道,这项研究中使用的技术可广泛应用于医学、显微镜、天文学和卫星图像等领域。

此外,研究团队已将论文发表到预印本论文库arVix,并被IEEE国际计算机视觉与模式识别会议(CVPR)收录。

“减少损失”超越了传统的图像修饰方法。

对于LR图像,传统的通过将HR分辨率与LR图像进行部分匹配来获得超高分辨率(SR)的方法往往会导致HR图像的灵敏度较差且平滑度不均匀。

图像失真。

在这项研究中,杜克大学的研究团队提出了一种新的想法,提出了一种新的超分辨率算法——PULSE。

它并不是遍历LR图像来慢慢添加细节,而是找到HR对应的LR,并通过“reduce Loss”方法得到SR图像。

原始LR(第一行),PULSE输出HR(中间行),HR对应LR(最后一行) PULSE使用的是生成对抗网络(GAN),这是一种训练模型,顾名思义,是通过对抗性游戏进行的。

目标训练。

其主要结构包括生成器(Generator)和判别器(Discriminator)。

在同一组照片训练中,一个负责训练接收到的图像并输出,另一个负责接收输出并检查它是否足够真实。

以下是与原图对比后的测试结果:图中,第一行是原图,第二行是“减少损失”得到的HR对应的LR,第三行是得到的HRPULSE所著。

编码为高清! AI一秒还原马赛克,杜克大学出品

可以看到,虽然和原图还是有细微的差别,但是还原度已经非常高了。

论文显示,为了测试Confluence在SR方面的优势,杜克大学研究团队使用4种不同的图像缩放方法与其进行了对比研究。

本研究使用CelebA HQ数据集中的图像对LR面部图像进行实验,特别是眼睛、嘴唇和头发等细节,比例因子为x8和x64。

PULSE表现出明显的优势,尤其是在X64分辨率下,模糊的头像完全还原,尤其是眼睛、嘴唇等细节。

其他方法很难达到这样的效果。

另外,对于测试结果,研究人员采用感知超分辨率常见的MOS测试方法,邀请五位评分者对图像结果进行从1到5的打分,结果显示HR源高清图像分辨率得分为3.74 ,而PULSE则达到了3.60,仅相差0.14,可以说几乎达到了真实高画质图像的水平。

然而,研究人员也承认PULSE还不够完美。

它产生的高分辨率图像与专业原始图像有些不同。

但随着技术和工具的进步,这项技术会一点一点的完善。

现在研究团队已经将PULSE发布到Github开源平台并收获了stars。

编码为高清! AI一秒还原马赛克,杜克大学出品

站长声明

版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件 举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。

标签:

相关文章

  • 首次发布 -卫东时空完成新一轮数千万战略融资,世纪咏兴基金与SIA城市基金共同投资

    首次发布 -卫东时空完成新一轮数千万战略融资,世纪咏兴基金与SIA城市基金共同投资

    据投资界(ID:pedaily)7月26日消息,伟动视控近期获得千万级战略投资。 此次,世纪资本、世纪咏兴基金、大兴临空经济区发展基金(新航城市基金)共同投资。 资金主要用于产品研发、中试生产线和专业团队建设。 ,推动企业在航空航天核心机电零部件制造领域的业务拓展。 截

    06-17

  • 语音识别技术引发客户服务变革:沃峰科技智能语音机器人的应用

    语音识别技术引发客户服务变革:沃峰科技智能语音机器人的应用

    .wp-block-column h3{margin-left:0} 在客户服务领域,语音识别技术正在引发一场革命。 随着人工智能和机器学习的快速发展,智能语音机器人已成为提高服务效率和客户满意度的关键工具。 沃峰科技的智能语音机器人作为这一技术创新的先行者,正在重新定义客户服务的标准。 语音

    06-17

  • 中国民营文化产业商会与大唐西城集团共同设立中国民营文化产业基金

    中国民营文化产业商会与大唐西城集团共同设立中国民营文化产业基金

    投资圈(微信ID:pedaily)据11月19日消息,中国民营文化产业商会与大唐西城集团城市集团联合设立中国民营文化产业基金文化产业基金致力于推动中国文化旅游和健康产业的发展。 该基金主要依托商会在文化旅游、大健康项目方面的资源优势和会员单位的投资优势。 将重点投资商会

    06-18

  • 红杉周逵:IPO带来资产流动和中国市场四大机遇

    红杉周逵:IPO带来资产流动和中国市场四大机遇

    据投资界11月3日消息,在昨天举行的“2019新浪金麒麟论坛”上,红杉资本中国基金合伙人周逵表示:“红杉中国更像是一个将全球资源和经验带到中国投资的载体”,总结了红杉的团队构成、重点领域、投资案例以及中国当前的投资机会。   周逵表示,红杉中国团队成员平均拥有20年

    06-17

  • 日经新闻:三星和瑞萨已向美国提交了不包含客户信息的供应链数据

    日经新闻:三星和瑞萨已向美国提交了不包含客户信息的供应链数据

    据报道三星电子、瑞萨电子和其他亚洲芯片制造商已在周一之前回复了美国提供供应链数据的要求,但拒绝提供更详细的客户信息。 据《日经新闻》报道,日本瑞萨电子和铠侠表示,他们应美国政府的要求提供了数据,以帮助识别全球供应链中的漏洞,但两家公司都没有提交详细的客户数

    06-08

  • 中国电信宣布将云计算服务作为未来主要业务

    中国电信宣布将云计算服务作为未来主要业务

    雷锋网 近日,在广东举办的第十二届天翼智能生态博览论坛上,中国电信宣布将把云计算服务作为未来的主要业务< titlesplit >中国电信未来的核心业务。 主要工作。 同时,中国电信将采取混合多云云网融合战略,这不仅是中国电信自有网络与天翼云的深度融合,也是多云多网的融合

    06-06

  • 广开基金与西南证券共同成立硬科技投资基金

    广开基金与西南证券共同成立硬科技投资基金

    投资界(ID:pedaily)消息,近日,广州开发区产业基金投资集团有限公司(简称“广开基金”)与西南证券西南证券股份有限公司(简称“西南证券”)发起设立广州广开西众一期创业投资基金(简称“广开西众基金”)。 该基金重点投资新能源、新一代信息技术、生物医药、先进制造

    06-18

  • VC们开始抢化学博士了,月薪8万

    VC们开始抢化学博士了,月薪8万

    “你们有化学专业的学长想转VC吗?”最近HR同事经常问吴迪。 吴迪去年刚刚加入上海一家约20人的VC机构,专注于新能源、新材料。 2006年,他就读于国内知名大学化学专业。 毕业后,他以工程师的身份加入了一家上市显示材料公司。 在车间待了3年,工资没有太大变化。 感觉自己的

    06-18

  • 「万超帮」完成Pre-A轮融资,打通产业链解决快消品仓储配送问题

    「万超帮」完成Pre-A轮融资,打通产业链解决快消品仓储配送问题

    据投资界12月22日消息,快消品仓储配送综合服务平台万超帮发行后,已获得数千万元Pre-A轮融资,本轮融资由由君资本领投,君孜资本策略跟投。 据悉,本轮融资将用于系统建设和市场运营。   万超帮成立于2007年,是仓储配送+B2B交易平台。 连接上游品牌商、下游零售终端、经

    06-18

  • 哈尔滨新区推行“十大金科玉律”,为上市企业奖励1000万

    哈尔滨新区推行“十大金科玉律”,为上市企业奖励1000万

    今日头条获悉,4月19日,哈尔滨新区召开促进企业上市政策新闻发布会暨签约仪式,正式发布《哈尔滨新区暨自贸试验区哈尔滨片区关于推动企业进入资本市场实现高质量发展的十条政策措施》(又称“企业帮扶”)。 《上市十条》)。 《办法》指出,对拟在上海、深圳证券交易所上市

    06-17

  • 是人工智能影响了你的新闻阅读体验吗?我们做了这些解读

    是人工智能影响了你的新闻阅读体验吗?我们做了这些解读

    假新闻、旧新闻、低俗内容……等等,充斥着日常网络媒体平台。 对于读者来说,他害怕回避。 这时我们才发现,罪魁祸首就是所谓的技术!很大程度上,技术的滥用使得内容创作缺乏信息价值或审美追求,使得模式和分发机制只追求流量和效率。 近两年,基于标签、算法、策略和数据

    06-17

  • 创新药的权杖已经交给了ADC

    创新药的权杖已经交给了ADC

    现在的ADC很像过去的PD-1。 彼时O药、K药异军突起,让药企看到了PD-1的无限潜力。 恰逢国内创新药行业崛起,几乎所有药企都将目光投向了PD-1的潜力赛道。 甚至有投资者表示,世界属于获得PD-1的人。 事实上,这么认为的不只国内药企。 尚未布局的跨国药企(MNC)也觊觎PD-1赛

    06-18