在看了几千小时的电视之后,谷歌的人工智能现在比人类的唇读能力强

来自谷歌人工智能部门DeepMind和牛津大学的研究人员利用人工智能创造了有史以来最精确的唇读软件。利用英国广播公司数千小时的电视录像,科学家们训练了一个神经网络,以46.8%的准确率对视频片段进行注释。这一点一开始似乎并不令人印象深刻——尤其是与人工智能在转录音频时的准确率相比——但在同一个镜头上进行测试,一个专业的人类唇部读取器只有12.4%的时间能读懂正确的单词。...

来自谷歌人工智能部门DeepMind和牛津大学的研究人员利用人工智能创造了有史以来最精确的唇读软件。利用英国广播公司数千小时的电视录像,科学家们训练了一个神经网络,以46.8%的准确率对视频片段进行注释。这一点一开始似乎并不令人印象深刻——尤其是与人工智能在转录音频时的准确率相比——但在同一个镜头上进行测试,一个专业的人类唇部读取器只有12.4%的时间能读懂正确的单词。

007Ys3FFgy1gqb96p6upaj30yp0ddtvo

本月早些时候,牛津大学另一个研究小组发表了类似的研究成果。利用相关技术,这些科学家能够创建一个名为LipNet的唇读程序,该程序在测试中的准确率为93.4%,而人类的准确率为52.3%。然而,LipNet只在使用自愿者说公式化句子的特别录音录像上进行了测试。相比之下,DeepMind的软件——被称为“观看、聆听、参与和拼写”——在更具挑战性的镜头上进行了测试;从BBC的政治节目中抄录自然的、没有剧本的对话。

《新闻之夜》、《提问时间》和《今日世界》等电视节目的5000多个小时的镜头被用来训练DeepMind的“看、听、听、拼”节目。这些视频包括11.8万个不同的句子和17500个独特的单词,而LipNet的视频测试数据库只有51个独特的单词。

DeepMind的研究人员认为,这个程序可以有很多应用,包括帮助听力受损的人理解对话。它还可以用来为无声电影添加注释,或者允许你通过对着相机说一些话来控制Siri或Alexa等数字助理(如果你在公共场合使用这个程序,就很方便)。

但当大多数人得知人工智能程序已经学会了唇读时,他们首先想到的是如何将其用于监控。研究人员说,在转录明亮、高分辨率的电视画面和低帧速率的颗粒状央视视频方面仍然有很大区别,但你不能忽视一个事实,人工智能似乎正在缩小这一差距。

  • 发表于 2021-05-08 19:40
  • 阅读 ( 145 )
  • 分类:互联网

你可能感兴趣的文章

使用正常运行时间与朋友观看youtube视频

...能的情况是,父母会抱在沙发上看电视,而十几岁的女儿在看Netflix,十几岁的儿子在看YouTube。都在智能**上。这就是谷歌推出正常运行时间的原因。 ...

  • 发布于 2021-03-15 07:49
  • 阅读 ( 143 )

谷歌的deepmind人工智能已经可以做的5件惊人的事情

人工智能革命既可怕又令人兴奋。尽管如此,我们始终感到安全的假设,有某些工作和任务,只有人类可以做。 ...

  • 发布于 2021-03-22 20:45
  • 阅读 ( 203 )

为什么netflix问“你还在看吗?“(以及如何阻止它)

...观看电视节目时,有时会被一个提示打断,询问你是否还在看电视节目。这就是为什么Netflix一直在烦你。 “你还在看吗?” 像其他流媒体服务一样,Netflix似乎是为狂欢的电视节目而设计的。对于平台上的大多数标题,任何特...

  • 发布于 2021-04-01 17:48
  • 阅读 ( 525 )

如何在线观看2019年足球感恩节直播

...游戏。虽然这不是什么大不了的事,但如果只有你一个人在看的话,想让你全家都在6英寸屏幕上看是不可能的。 买一个无线天线 虽然你可以通过互联网获取大部分内容,但拥有一个良好的空中传送(OTA)天线对于在本地频道...

  • 发布于 2021-04-02 21:45
  • 阅读 ( 232 )

《每日新闻》综合报道,4/14/19:大哥在看

...位置跟踪意味着谷歌准确地知道你在哪里,很可能知道你在看什么!-即使你在大楼里。对于如何使用特定的数据集,各种各样的想**让人想入非非。 基于你在商店里看到的东西的超特定广告?可能。考虑到《****》的报道,比如...

  • 发布于 2021-04-03 16:28
  • 阅读 ( 174 )

netflix正在测试一个功能,可以让你关闭它恼人的“还在看吗?”?'弹出窗口

...在连续看了三集之后出现的讨厌的弹出窗口,问你是否还在看。 这项新功能在某些地区似乎已经测试了一段时间,Netflix的一位发言人今天证实,这项功能仍处于测试模式。然而,最近几周,Twitter和TikTok都对这一功能...

  • 发布于 2021-04-17 12:52
  • 阅读 ( 259 )

netflix现在可以在谷歌的nest hub和nest hub max上使用

...tflix视频,然后点击Netflix应用程序上的“播放”按钮,在电视上播放该视频。 Nest Hub的7英寸显示屏和Nest Hub Max的10英寸显示屏都不会带来最具沉浸感的观看体验。但是如果你想在更多的地方观看你最喜欢的Netflix节目和电影,这...

  • 发布于 2021-04-18 14:46
  • 阅读 ( 175 )

谷歌的自动驾驶汽车已经发生了11起事故,但都不是汽车的错

...新定位”,它允许坐在电脑前的个人远程驾驶一辆可能在几千英里之外的车辆,只需使用LTE连接和一些摄像头和传感器。it有多种潜在用途,例如远程代客服务,但Tinskey提出的另一个例子是克服未来过于谨慎的自动驾驶系统:&#1...

  • 发布于 2021-04-29 21:05
  • 阅读 ( 159 )

youtube现在比twitch更擅长直播

...年,与之前的任何一款游戏不同,我几乎都在YouTube上观看了。有什么变化?
 去年在收购Twitch的过程中输给了亚马逊,谷歌仍决心拥有一个主导的流媒体直播平台,并加倍努力将YouTube打造成这一目标。YouTube已经提...

  • 发布于 2021-05-01 01:39
  • 阅读 ( 184 )

围棋冠军李世铎反击,首次击败谷歌的deepmind人工智能

...一定程度的报复——他刚刚击败了谷歌DeepMind部门开发的人工智能程序AlphaGo,在首尔五场比赛的第四场比赛中。
 阿尔法戈现在在系列赛中以3比1领先,如果你可以这么说的话,职业纪录是9比1,包括去年5比0战胜欧...

  • 发布于 2021-05-03 18:54
  • 阅读 ( 417 )
U908468865388
U908468865388

0 篇文章

相关推荐