Nvidia 和 Cerebras 竞相为 AI 推理活动提供大型芯片

Date:

如果您从事金融行业,那么围绕即将进行 IPO 的 Cerebras 的新闻都是关于该公司的股票代码在纳斯达克的表现。

但是,如果您喜欢技术,情况就有点不同了。事实上,如果你只关注这些公司将如何竞争,你就真的错过了大局。

很多人都知道 AI 革命的开始如何导致用 GPU 取代 CPU 的想法:GPU 是一种更复杂、更专业的逻辑处理器,适用于机器学习和相关工作。

当时,我们遵循一种非常常见的规定方法 – 输入大量训练数据,其中通常包括大量的 Web 抓取 – 然后用它来测试系统。

所有这些工作都需要大量的处理能力,而 GPU 就是为这些大型工作负载而构建的。

现在,该行业似乎正在向前迈进,朝着一种称为推理的东西发展,这是一种不同类型的任务,硬件将不得不更加专业化。

那么什么是推理呢?因为每次有人开始谈论它时,你都能看到人们的眼睛有点呆滞。一般来说,我们不喜欢在高度科学背景之外使用这种词。

嗯,无论如何,推理基本上是 AI 动态学习的能力——获取实时数据并将其放入经过训练的模型中,以获得合乎逻辑的结果。

换句话说,训练有素的 AI 正在展示它从训练课程中学到的东西。

因此,这种类型的活动将需要一些具有一定重量的硬件:为此,Cerebras 推出了晶圆级引擎 (WSE),对于技术爱好者来说,它具有一些令人印象深刻的规格。(这些怪物芯片是由台湾积体电路制造公司实际生产的,这可能并不奇怪)。

WSE:揭秘

Cerebras 的 WSE-3 拥有 4 万亿个晶体管和数量惊人的片上存储器。它有大约 9000 个内核,估计容量为 125 petaflops。

我们前段时间报道了这些类型的巨大多核引擎,其中的硬件物理尺寸很大 – 以英寸而不是厘米为单位。

“更低的延迟会带来更高的用户参与度,”Perplexity 首席技术官 Denis Yarats 在一份新闻声明中指出。“Cerebras 的速度比传统 GPU 快 20 倍,我们相信用户与搜索和智能答案引擎的交互将从根本上发生转变。”

不难看出,这种力量将如何为许多行业的 AI 工作提供动力。

AI 推理的使用案例

考虑这一消息的一种方式是,我们只是希望为一组更复杂的流程提供更高的速度和功能。但你也可以考虑推理在我们 AI 发展的这一部分将发挥的作用。换句话说,我们正在从监督性更强的学习类型转向监督较少的学习类型——从我们 10 年前做的那种确定性机器学习,到一种新型的神经网络活动,我们相信系统能够更多地自行学习。

因此,Cerebras 的新挑战的故事,更不用说另一家赶上潮流的公司 Groq,就是硬件迎头赶上的故事。

硬件本身令人印象深刻——这些新的凯迪拉克系统引起了人们的注意——但我们应该关注的是这些物品的制造目的,这将扰乱业务。

“随着 AI 融入日常生活和业务运营的更多方面,高效和准确的 AI 推理的重要性越来越大,”Run:AI 的一位作者写道。“准确推理在医疗保健、欺诈检测和自动驾驶等敏感使用案例中尤为重要。”

这些只是一些顶级示例:我们还没有真正发现更深层次推理模型的一些更隐蔽的用途。十年后的 AI 会是什么样子?它仍然看起来像是从计算机中出来的吗?还是情况真的会有所不同?

几年前,福布斯技术委员会成员 Nir Kaldero 给了我们这份名单:其中一些承认具有很强的持久力,尽管考虑其中的一些很有趣。例如,云:当然,云的采用仍在继续,但现在我们对许多工作负载有一个相互竞争的想法。它在边缘、设备上、网络边缘进行处理。而且这也正在取得进展。

无论如何,硬件之战确实预示着下一代技术系统的到来。他们将会非常壮观。

将本文分享至:

《亚洲人物》订阅

spot_imgspot_img

亚洲领袖

查阅更多《亚洲人物》
Figure Aisa

李嘉诚旗下基金掘金东南亚

香港亿万富翁李嘉诚的私人投资部门Horizons Ventures的联合创始人表示,该公司正通过加强东南亚交易来分散其以美国为中心的投资组合,同时瞄准日本的“以女性为中心”的投资。 Horizons Ventures正在将业务拓展至新加坡,该公司已在当地设立了首个海外办事处。 Horizons Ventures在 17 个国家/地区拥有 140 多项活跃投资,其中约三分之一的投资在美国。但这家总部位于香港的集团已于早些时候在新加坡设立办事处,增强了其在东南亚的业务。 “我们已经以不同的重点建立了东南亚集群:我们想看看我们能否快速将大量新技术引入现有制造商,”该基金的联合创始人、李嘉诚的长期商业伙伴周凯旋 (Solina...

菲律宾最大快餐品牌的新计划:向星巴克发起挑战

亿万富翁Tony Tan Caktiong旗下的Jollibee Foods,由他的兄弟Ernesto Tanmantiong运营,正大举扩展全球咖啡业务。 多年来,Jollibee Foods一直觊觎美国咖啡巨头星巴克的市场。星巴克总部位于西雅图,在全球拥有超过39,000家门店。而Jollibee运营的受欢迎快餐连锁店在菲律宾的表现早已超过了美国的竞争对手麦当劳和肯德基,这要归功于其畅销的脆皮炸鸡和甜味意大利面。 如今,在全球咖啡市场竞争激烈的环境下,Jollibee在热饮领域的扩展再次加速。现任总裁兼首席执行官的Ernesto Tanmantiong计划在全球扩展,目标是抓住快餐业中增长最快的咖啡市场。据市场研究公司Statista的数据,全球咖啡连锁店的总收入在2023年增长了9%,达到了6300亿美元,并有望在2030年达到8000亿美元。相比之下,全球快餐业在去年总收入仅增长了1.1%,达到了9780亿美元。 Tony Tan Caktiong,Jollibee的创始人兼董事长。 “这是一个快速增长的市场,对我们来说是巨大的机会。”Tanmantiong在马尼拉以东的帕西格市一家繁忙的Jollibee门店说道。就在前一天,Jollibee宣布以2.38亿美元收购韩国咖啡连锁品牌Compose...

Tan Chorh Chuan:杰出的新加坡医学科学家与教育家

Tan Chorh Chuan博士是新加坡备受尊敬的医学科学家和教育家,以其在医学研究和高等教育领域的杰出贡献而广受赞誉。他的学术生涯充满了创新和领导力,对新加坡医疗体系和教育体系的发展产生了深远的影响。本文将深入探讨Tan Chorh Chuan博士的生平、学术成就以及他在医学科学和教育领域的重要贡献。 早年生活与教育 Tan Chorh Chuan博士生于新加坡,自幼就展现出对医学和科学的浓厚兴趣。他在新加坡攻读医学学士学位,并在研究生阶段选择了医学研究作为专业。他的早期教育为他未来的科研和医疗生涯奠定了坚实的基础。 医学研究与成就 Tan Chorh...

Grab联合创始人Anthony Tan:《亚洲人物》2024年度最具影响力人物

在亚洲科技创新和企业发展的舞台上,一个名字以其卓越的领导力和创新精神脱颖而出——Anthony Tan,Grab的联合创始人兼首席执行官。在他的引领下,Grab已从一个简单的打车应用发展成为东南亚领先的超级应用平台,覆盖了出行、送餐、金融服务等多个领域。正因如此,Anthony Tan被《亚洲人物》杂志评选为2024年度最具影响力人物,以表彰他在推动区域经济增长、科技创新以及社会进步方面所做出的巨大贡献。 Anthony Tan出生于一个拥有深厚商业背景的家庭,但他选择了一条与家族企业完全不同的道路。他在哈佛商学院的学习经历,不仅为他提供了宝贵的知识和技能,更重要的是,激发了他对创业的热情和对社会责任感的认识。回到东南亚后,Anthony Tan立志要解决这一地区交通出行的长期问题。他与好友Tan Hooi Ling共同创立了Grab,从最初的打车服务开始,逐渐扩展到整个生活服务领域。 在Anthony Tan的领导下,Grab成功地将技术创新应用于解决实际问题,提高了交通出行的效率,促进了地区内的经济活动,同时也带来了社会价值。Grab不仅为乘客提供了便捷的出行服务,也为成千上万的司机创造了就业机会,改善了他们的生活质量。 更值得称赞的是,Anthony Tan对于企业社会责任的承担。在疫情期间,Grab推出了多项社会援助计划,支持了前线医护人员和受疫情影响的小微企业。此外,Grab还积极投身于教育和环境保护项目,致力于培养下一代领导者并推动可持续发展。 Anthony...