Facebook研发新AI工具:让照片中闭眼的人重新睁眼
【网易智能讯 6月18日消息】有很多方法可以处理照片,比如消除红眼或镜头眩光等,让人像看起来更好看。但到目前为止,眨眼已经被证明是拍照最难解决的问题之一。然而,Facebook的研究可能会改变这一切,这个研究正在以一种非常令人信服的方式将闭眼替换为睁开的眼睛。
首先,让我们来回顾下“智能绘画”这项技术,当一个程序用其认为属于该空间的元素填充这个空间时,此技术就会被调用。特别是,Adobe通过其“上下文感知填充(context-aware fill)”充分应用这个技术,允许用户无缝地替换不需要的特征元素,例如突出的分支或云,通过很好地模拟该处应有的元素来进行预测和填充。
但有些功能超出了这类工具的替代能力,其中之一就是眼部位置的替换。眼睛的精细度和高度可变的性质,使系统改变或创建这些位置变得更难。现在,Facebook研究团队决定采取措施来攻克这个问题。
Facebook通过一个生成式对抗网络(Generative Adversarial Network,GAN)来解决这个难题,GAN本质上是一个机器学习系统,它试图欺骗自己认为其创作是真实的。在GAN中,系统的一部分学会识别面部表情,而系统的另一部分重复创建基于识别部分反馈的图像,逐渐接近现实图像。
从左至右:示范图像、源图像、Photoshop睁眼算法、Facebook算法。
在这种情况下,网络接受了训练,以识别和复制令人信服的睁眼图像,但正如你在右边的例子中看到的那样,Photoshop的方法看上去似乎贴在人们的眼睛上,没有考虑与其他图像的一致性。这是因为机器很幼稚,它们没有直觉性理解能力。
Facebook的研究人员所做的就是将示范图像数据包括在内,以显示目标人物睁开眼睛的图像,从中GAN不仅了解到人像的眼睛应该是什么样子,而且还知道目标人物的眼睛该如何塑造,例如如何着色等。
训练的结果是相当真实和令人信服的:没有颜色不匹配或明显的拼接,因为网络的识别部分知道这不是人看起来的样子。
在测试中,人们错误地将虚假的睁眼照片误认为是真实的照片,或者说他们不能确定哪些是真实的,认为这样的被测试者超过了50%。除非观看者知道一张照片被篡改,否则,如果只是在新闻采访中滚动浏览照片,可能也不会特别注意。不过,如果仔细看起来还是有点奇怪。
据Facebook相关研究人员介绍,在某些情况下,此功能仍然会失效,如果一个人的眼睛被头发部分覆盖,或者有时不能正确地重新创建颜色,就会产生奇怪的伪影。目前,研究人员正在解决这个问题。
你可以想象一下,Facebook上的一个自动开眼界工具的用处,它可以检查一个人的其他照片,并用它们作为参考来代替最新的照片。这有点令人毛骨悚然,但这对Facebook来说非常标准,至少它可以挽救一两张合影照片。
您可能也感兴趣:
官方微博/微信
每日头条、业界资讯、热点资讯、八卦爆料,全天跟踪微博播报。各种爆料、内幕、花边、资讯一网打尽。百万互联网粉丝互动参与,TechWeb官方微博期待您的关注。
想在手机上看科技资讯和科技八卦吗?
想第一时间看独家爆料和深度报道吗?
请关注TechWeb官方微信公众帐号:
1.用手机扫左侧二维码;
2.在添加朋友里,搜索关注TechWeb。
为您推荐
恒大汽车 2023 年净亏损 119.95 亿元,努力改善经营状况
日赚0.82亿 比亚迪2023年净利润300.41亿元,同比大涨80.72%
苹果WWDC 2024将于6月10日举行,或将推出生成式AI技术
苹果A18 Pro芯片细节曝光:采用更大尺寸 以提升AI性能
阿里撤回菜鸟上市申请 拟37.5亿美元收购菜鸟少数股东股权
AI造富能力一流
飞书开启裁员 全员信称会提供补偿方案或转岗机会
消息称小红书2023年首次实现盈利 但IPO前景仍不明朗
更多
- 小米再向前:小米SU7正式发布、引领汽车“智能化”下半场,「人车家全生态」全面开启
- 扬帆起航!小鹏汽车宣布正式进入德国市场
- Google 2023年移除超55亿条不良广告 9成由AI发现
- 中国移动全球首发5G-A商用部署 首批百城 年内扩至300+城
- 紫光同创推出Logos系列高性价比车规级FPGA芯片
- AI驱动营销创新Taboola Agency Award 2023名单公布
- IAR率先支持瑞萨首款通用32位RISC-V MCU
- 小米汽车上市发布会今晚7点召开 雷军确认小米SU7标准版CLTC工况续航700公里
- 最终悬念,小米SU7卖多少钱合适?
- Keep发布全新8.0版本 将投入AI资源提升运动课程生产
更多
- 全球生成式人工智能领域去年或有近700笔投资交易 总额291亿美元
- 华尔街预计特斯拉Q1交付47.1万辆电动汽车 但也有分析师预计低于43万辆
- 苹果WWDC24还有望推出Mac Studio 但Mac Pro可能要下半年
- 亚马逊再向AI初创公司Anthropic投资27.5亿美元 兑现40亿美元投资承诺
- 消息称苹果在测试一款新Apple Pencil 有望用于Vision Pro
- 现代汽车计划到2030年将电动汽车增至31款 韩国年产能增至151万辆
- 消息称苹果没有在iOS 18等新一代系统中引入自研AI聊天机器人计划
- 被美国司法部起诉垄断后 苹果在美国又面临至少3起集体反垄断诉讼
- 航拍显示特斯拉上海储能工厂准备动工 厂区内已有施工设备
- 消息称苹果不会在今晚宣布新iPad Air和iPad Pro 还得再等等