谷歌的下一代人工智能培训系统速度惊人

谷歌今天将推出其第二代Tensor处理器单元,这是一个云计算硬件和软件系统,支撑着谷歌一些最雄心勃勃、影响最深远的技术。首席执行官sundarpichai今天上午在公司I/O开发者大会的主题演讲中宣布了这一消息。...

谷歌今天将推出其第二代Tensor处理器单元,这是一个云计算硬件和软件系统,支撑着谷歌一些最雄心勃勃、影响最深远的技术。首席执行官sundarpichai今天上午在公司I/O开发者大会的主题演讲中宣布了这一消息。

第一个TPU,作为一种专用于机器学习的专用芯片,去年被展示出来,是由Apple的人工智能系统用来作为其预测和决策技能的基础。每次有人向谷歌的搜索引擎输入一个查询时,谷歌也会使用TPUs的计算能力。最近,这项技术已经被应用到机器学习模型中,用于改进Google Translate、Google Photos和其他可以利用新的人工智能训练技术的软件。

通常,这项工作是使用商用GPU完成的,通常来自Nvidia-Facebook使用Nvidia GPU作为其Big Basin AI培训服务器的一部分。但在过去几年中,谷歌选择了自行构建部分硬件,并为自己的软件进行优化。

从这个意义上说,最初的TPU是专门为与Google的TensorFlow协同工作而设计的,TensorFlow是许多用于机器学习的开源软件库之一。然而,由于谷歌的进步和软硬件的整合,TensorFlow已经成为构建人工智能软件的领先平台之一。这种优化,再加上谷歌大脑(googlebrain)及其DeepMind子公司的内部人才,是谷歌在更广泛的人工智能领域保持领先地位的部分原因。

现在,谷歌表示,第二个版本的TPU系统已经全面投入使用,并正在其Google计算引擎中部署,其他公司和研究人员可以利用这个平台来获取类似于亚马逊AWS和微软Azure的计算资源。谷歌当然会使用这个系统本身,但它也将新的TPU视为其他公司可以利用的无与伦比的资源。

007Ys3FFgy1gqe1d1iaxsj31jk111e82

为此,该公司开发了一种方法,将64个TPU组装成TPU Pods,有效地将一个Google服务器机架变成了一台计算能力为11.5petaflops的超级计算机。谷歌人工智能和机器学习的首席科学家李飞(音译)说,即使靠自己的力量,第二代tpu也能够“提供令人震惊的180万亿次运算能力,而且是为推动当今机器学习的那种数字运算而构建的”。

谷歌大脑团队的高级研究员杰夫•迪恩(jeffdean)表示,这给谷歌带来了超越竞争对手产品的优势,即实验的速度和自由度迪恩在本周的新闻发布会上对一群记者说:“我们新的大规模翻译模式需要一整天的时间,才能在32个世界上最好的商用GPU上进行训练。”而TPU吊舱的八分之一可以在一个下午完成这项工作。”

除了速度,第二代TPU还将允许谷歌的服务器同时进行推理和训练。以前的TPU只能进行推断——例如,依靠Google云实时处理数据以产生结果。另一方面,训练是人工智能算法的发展过程,这需要额外的资源。

机器学习,作为现代人工智能研究的基石,有效地意味着输入数十万个例子的算法,以允许学习以一种从未明确编程过的方式执行任务。这表现在许多不同的消费产品上,比如Google Translate几乎能瞬间将英语句子转换成汉语句子,或者AlphaGo能以超人的熟练程度玩深奥的象棋般的棋盘游戏。

这一切都归结为在大量数据上训练神经网络,并将其转化为一个可行的算法——这需要计算能力。这些训练系统,在更一般的意义上,通过大量的数字运算来改进人工智能软件。因此,硬件功能越强大,获得结果的速度就越快。”如果我们能把每个实验的时间从几周减少到几天或几小时,这就提高了每个做机器学习的人更快地迭代和做更多实验的能力,”迪恩说。

因为这种新型的TPU现在能够同时进行推理和训练,研究人员可以比以前更快地部署更通用的人工智能实验——只要软件是使用TensorFlow构建的。谷歌还重申了其对开源模式的承诺,向同意公布研究结果甚至可能开放代码的研究人员提供TPU资源。该公司将该项目称为TensorFlow研究云,并将免费提供对1000个TPU集群的访问。

  • 发表于 2021-05-11 05:26
  • 阅读 ( 171 )
  • 分类:互联网

你可能感兴趣的文章

谷歌的量子霸权标志着计算技术的巨大进步

... 内文定律决定了量子处理器的发展速度,并以谷歌量子人工智能实验室主任哈特穆特·内文的名字命名。 ...

  • 发布于 2021-03-19 18:45
  • 阅读 ( 216 )

谷歌的deepmind人工智能已经可以做的5件惊人的事情

人工智能革命既可怕又令人兴奋。尽管如此,我们始终感到安全的假设,有某些工作和任务,只有人类可以做。 ...

  • 发布于 2021-03-22 20:45
  • 阅读 ( 203 )

谷歌正在用紫红色取代android吗?也许吧,但不会很久

今天彭博社报道说,谷歌的新项目Fuchsia操作系统实际上可能是Android的继任者。由于这可能会助长猜测,我们认为我们也应该权衡一下我们完全不知情的、受过教育的猜测。 对于那些还没有阅读过我们之前关于项目Fuchsia的解释...

  • 发布于 2021-04-05 04:53
  • 阅读 ( 223 )

智能手机的规格不再重要了:它现在是一个软件游戏

...的时钟速度都比上一部稍高,或者说内存稍大。HTC Droid和谷歌NexusOne等**中的1GHz处理器消除了之前的1GHz以下处理器的故障和滞后。这些CPU和RAM规格开始成为Android**的广告功能,它们变得非常重要,甚至连“普通”消费者也开始注...

  • 发布于 2021-04-08 03:25
  • 阅读 ( 172 )

据报道,谷歌的下一代像素将转向内部定制的gs101处理器

据9to5Google和XDA开发者报道,谷歌的下一代像素旗舰——可能命名为“pixel6”——将采用谷歌设计的GS101“Whitechapel”SoC(片上系统),这是谷歌的第一款产品。 9to5Google的报告称,谷歌正在开发两款**,将采用基于Arm的...

  • 发布于 2021-04-15 19:17
  • 阅读 ( 398 )

verge weekender:迪斯尼的大日子,cyberpunk 2077,谷歌的最新产品,以及我们最喜欢的小玩意

...行官桑达尔·皮查伊(sundar pichai)谈到了该公司如何处理人工智能伦理研究员蒂姆尼特·格布鲁(timnit gebru)离职的问题 皮查伊在给员工的一封电子邮件中写道:“我们需要为一位杰出的黑人**领导人,她拥有巨大的才华,不幸...

  • 发布于 2021-04-17 02:26
  • 阅读 ( 182 )

gmail、youtube、google docs和其他google服务遭遇大规模宕机

周一上午,谷歌的多个服务和网站(包括YouTube、Gmail、Google Assistant和googledocs)在遭遇大面积宕机后关闭了约一个小时。美国东部时间早上6点55分,谷歌承认了Gmail的问题,影响了其业务和个人服务,并表示该问题在美国东部时...

  • 发布于 2021-04-17 02:43
  • 阅读 ( 159 )

谷歌的安卓外围设备需要时间

...我们宣布了高通公司新推出的Snapdragon 4100处理器,它将为下一代操作系统手表提供急需的改进。高通公司上一次对**artwatch处理器的更新并没有加快任何速度,只是在电池寿命方面有所帮助。 大约每年我都会写一篇文章,暗示谷...

  • 发布于 2021-04-18 10:27
  • 阅读 ( 153 )

高通公司的新款snapdragon 4100为下一代操作系统手表提供了急需的改进

高通公司今天宣布推出两款新的Wear操作系统处理器,Snapdragon Wear 4100 Plus和Snapdragon Wear 4100,这是其**artwatch平台自2018年以来的首次重大更新。高通公司声称,新芯片将大大提高速度,新处理器的速度将大大提高,GPU、内存、摄像...

  • 发布于 2021-04-19 05:26
  • 阅读 ( 215 )

coral是google悄无声息地提出的一个让人工智能不需要云的计划

人工智能允许机器执行过去仅属于人类的各种任务。需要在工厂生产线上进行质量控制吗?设置一个人工智能摄像头来发现缺陷。解读医学数据怎么样?机器学习可以从扫描中识别潜在的肿瘤并将它们标记给医生。 ...

  • 发布于 2021-04-20 14:58
  • 阅读 ( 238 )
老花555
老花555

0 篇文章

相关推荐