Nvidia 和 Cerebras 竞相为 AI 推理活动提供大型芯片

Date:

如果您从事金融行业,那么围绕即将进行 IPO 的 Cerebras 的新闻都是关于该公司的股票代码在纳斯达克的表现。

但是,如果您喜欢技术,情况就有点不同了。事实上,如果你只关注这些公司将如何竞争,你就真的错过了大局。

很多人都知道 AI 革命的开始如何导致用 GPU 取代 CPU 的想法:GPU 是一种更复杂、更专业的逻辑处理器,适用于机器学习和相关工作。

当时,我们遵循一种非常常见的规定方法 – 输入大量训练数据,其中通常包括大量的 Web 抓取 – 然后用它来测试系统。

所有这些工作都需要大量的处理能力,而 GPU 就是为这些大型工作负载而构建的。

现在,该行业似乎正在向前迈进,朝着一种称为推理的东西发展,这是一种不同类型的任务,硬件将不得不更加专业化。

那么什么是推理呢?因为每次有人开始谈论它时,你都能看到人们的眼睛有点呆滞。一般来说,我们不喜欢在高度科学背景之外使用这种词。

嗯,无论如何,推理基本上是 AI 动态学习的能力——获取实时数据并将其放入经过训练的模型中,以获得合乎逻辑的结果。

换句话说,训练有素的 AI 正在展示它从训练课程中学到的东西。

因此,这种类型的活动将需要一些具有一定重量的硬件:为此,Cerebras 推出了晶圆级引擎 (WSE),对于技术爱好者来说,它具有一些令人印象深刻的规格。(这些怪物芯片是由台湾积体电路制造公司实际生产的,这可能并不奇怪)。

WSE:揭秘

Cerebras 的 WSE-3 拥有 4 万亿个晶体管和数量惊人的片上存储器。它有大约 9000 个内核,估计容量为 125 petaflops。

我们前段时间报道了这些类型的巨大多核引擎,其中的硬件物理尺寸很大 – 以英寸而不是厘米为单位。

“更低的延迟会带来更高的用户参与度,”Perplexity 首席技术官 Denis Yarats 在一份新闻声明中指出。“Cerebras 的速度比传统 GPU 快 20 倍,我们相信用户与搜索和智能答案引擎的交互将从根本上发生转变。”

不难看出,这种力量将如何为许多行业的 AI 工作提供动力。

AI 推理的使用案例

考虑这一消息的一种方式是,我们只是希望为一组更复杂的流程提供更高的速度和功能。但你也可以考虑推理在我们 AI 发展的这一部分将发挥的作用。换句话说,我们正在从监督性更强的学习类型转向监督较少的学习类型——从我们 10 年前做的那种确定性机器学习,到一种新型的神经网络活动,我们相信系统能够更多地自行学习。

因此,Cerebras 的新挑战的故事,更不用说另一家赶上潮流的公司 Groq,就是硬件迎头赶上的故事。

硬件本身令人印象深刻——这些新的凯迪拉克系统引起了人们的注意——但我们应该关注的是这些物品的制造目的,这将扰乱业务。

“随着 AI 融入日常生活和业务运营的更多方面,高效和准确的 AI 推理的重要性越来越大,”Run:AI 的一位作者写道。“准确推理在医疗保健、欺诈检测和自动驾驶等敏感使用案例中尤为重要。”

这些只是一些顶级示例:我们还没有真正发现更深层次推理模型的一些更隐蔽的用途。十年后的 AI 会是什么样子?它仍然看起来像是从计算机中出来的吗?还是情况真的会有所不同?

几年前,福布斯技术委员会成员 Nir Kaldero 给了我们这份名单:其中一些承认具有很强的持久力,尽管考虑其中的一些很有趣。例如,云:当然,云的采用仍在继续,但现在我们对许多工作负载有一个相互竞争的想法。它在边缘、设备上、网络边缘进行处理。而且这也正在取得进展。

无论如何,硬件之战确实预示着下一代技术系统的到来。他们将会非常壮观。

将本文分享至:

《亚洲人物》订阅

spot_imgspot_img

亚洲领袖

查阅更多《亚洲人物》
Figure Aisa

信息科技巨匠:N.R. Narayana Murthy的印度科技之路

本文《亚洲人物》将深入介绍印度信息技术领域的传奇人物,N.R. Narayana Murthy(纳拉扬·穆尔蒂),以其在科技创业、领导力和社会影响力方面的卓越成就而备受瞩目。他的故事是印度科技界的标志性传奇,激励着全球的科技创业家、领袖和社会活动家,追求卓越并推动科技行业的进步。 N.R. Narayana Murthy是印度信息技术巨头Infosys(印孚瑟斯)的联合创始人之一,这家公司在全球范围内为客户提供信息技术咨询、软件开发和外包服务。他的创业故事始于1981年,当时他与六位合伙人创立了Infosys,以100美元的创业资金开启了一段不凡的旅程。 Infosys的成功得益于N.R. Narayana Murthy的坚定信念和卓越领导力。他坚持以卓越质量、客户满意度和企业道德为公司的核心价值观,并积极倡导全球化和技术创新。Infosys迅速成长为印度最大的信息技术服务公司之一,为全球各大企业提供了关键的技术解决方案。 N.R. Narayana Murthy在印度信息技术行业的贡献不仅仅体现在商业成功上,还表现在社会责任和领导力方面。他一直强调企业的社会责任,通过Infosys基金会积极参与教育、卫生保健和农村发展等领域的慈善工作。他的慈善使命有助于改善印度社会中弱势群体的生活质量,为社会福祉做出了积极贡献。 此外,N.R....

文学巨匠:巴金的思想与文学传承

巴金(Ba Jin),原名杨平,是20世纪中国文学史上的一位杰出作家,他的文学作品和思想影响深远,被誉为中国现代文学的伟大先锋。他以其深刻的洞察力和文学创作为世人铭记。 早年生活和革命情感 巴金于1904年出生在中国四川省成都市的一个知识分子家庭。他的家庭背景和早年教育为他的思想观念和文学创作奠定了坚实基础。青年时期,巴金积极参与了中国的新文化运动和反封建的思潮,这对他的后来文学创作产生了深远影响。 文学创作与代表作品 巴金以其丰富的文学作品而闻名,其中最著名的作品之一是小说《家》(Family),该小说描写了中国封建社会的家庭问题和社会矛盾。这部小说被认为是巴金文学生涯的代表作,也是中国现代文学的重要经典之一。 巴金的文学风格深受俄国文学和马克思主义文学理论的影响,他的作品充满了社会关怀和人道主义精神。他的小说以其深刻的人物刻画和社会批判而著称,揭示了封建社会的种种不公和不道德。 文学与革命 巴金是中国文学与政治革命的紧密结合者。他积极参与中国的左翼文学运动,支持马克思主义和社会主义思想。他的文学作品传达了对社会不平等和不公正的关切,成为中国社会变革的声音。 《激流三部曲》:政治与文学的交融 巴金最著名的文学系列作品之一是《激流三部曲》,包括小说《家》、《春》和《秋》。这一系列作品以中国封建社会为背景,深刻反映了中国社会的困境和矛盾。它们被认为是巴金文学生涯中最重要的作品之一,同时也代表了20世纪中国文学的高峰之一。 文学与批判 巴金的文学作品常常受到政府审查和批评,尤其在文化大革命期间,他的作品遭受到了严重的批判和打压。然而,他始终坚守自己的文学信仰,捍卫了自由思想和创作的权利。 晚年与文学传承 巴金的晚年生活充满了文学创作和思考。尽管他在政治上受到压力和困扰,但他依然坚持文学创作,并与中国文学界的后辈保持联系。他的文学传承延续至今,他的作品仍然被广泛阅读和研究,成为中国文学的经典之一。 思想与影响 巴金的文学作品和思想深刻地影响了中国文学和社会思潮。他的作品反映了对封建社会的批判和对社会不公的担忧,激发了社会变革的需求。他的思想和文学作品成为了中国文学的重要组成部分,影响了一代又一代的读者和作家。 巴金是中国现代文学的伟大先锋,他的文学作品和思想深刻影响了中国文学和社会。他的作品反映了对社会不平等和不公正的关切,同时也代表了中国文学的高峰之一。巴金将永远被铭记为中国文学的伟大作家和社会思想家,他的文学传承将继续为中国文学的繁荣做出贡献。

可再生能源的未来:Sagar Adani谈印度电力行业的挑战与机遇

在经济活动电力和气候危机的推动下,印度的电力需求创下历史新高。尽管印度对煤炭的依赖有所增加,但公司正在扩大其可再生能源产能。那么,他们是如何管理这一转型的呢? 印度的电力行业正迎来光明的时刻——字面上的光明。 有两个主要原因。首先是前所未有的电力需求的增加,其次是印度设定的雄心勃勃的绿色能源转型目标,这些目标将由可再生能源引领。 印度在5月30日记录了创纪录的250吉瓦的最高用电需求,电力部预计6月这一需求将达到260吉瓦。导致这一现象的主要原因是气温上升和热浪的侵袭,导致对空调等制冷设备的需求激增。 经济增长是电力需求高企的另一个原因。国际货币基金组织表示,印度将在2024年继续保持最快的主要经济体增速,并在最新的展望中将印度今年的增长预测从6.5%上调至6.8%。印度储备银行在最近的货币政策会议上将2025财年的国内生产总值(GDP)预测从之前的7%上调至7.2%。CareEdge评级公司的高级董事Sabyasachi Majumdar表示,普遍认为电力需求的增长约为GDP需求的0.9%。 未来二十年,印度的能源需求将占全球需求的四分之一,预计到2030年需求将增长25%至35%,Adani Green Energy Limited(AGEL)的执行董事Sagar Adani表示。“这一激增与印度雄心勃勃的基础设施发展计划紧密相连,包括道路、铁路、港口和机场,这些都需要扩大能源容量。” 满足日益增长的需求的直接解决方案是增加以煤炭和天然气为主导的火力发电能力。政府预计将增加火力发电厂的数量,并全力运行燃气发电厂。 与此同时,矛盾的是,印度电力行业的核心是电网的绿色化。 煤炭在发电中仍占据重要地位,并将继续如此,但其在印度总装机容量中的占比在上一个财年首次降至50%以下,而可再生能源在2024财年占印度新增发电容量的71%。 转向低碳发电的目标是明确的:印度希望到2070年实现净零碳排放,并在未来六年内建立500吉瓦的非化石燃料能源容量。目前印度已建成约200吉瓦的容量,实现这一目标意味着每年需新增近50吉瓦的容量。 JSW Energy 联席董事总经理兼首席执行官 Sharad...

Veerabhadran Ramanathan:气候变化的探索者与守护者

当谈论到气候变化及其对地球环境的影响时,Veerabhadran Ramanathan的名字不容忽视。他在气候科学领域的杰出贡献,尤其是关于大气中的温室效应,使他成为了这一领域的佼佼者。 Ramanathan先生出生在印度的马德拉斯,从小就对大自然产生了浓厚的兴趣。在完成他的本科学业后,他决定继续研究气候学,以揭示气候变化背后的科学奥秘。他的研究涉及到许多复杂的大气物理过程,其中最为著名的是他对大气中气溶胶粒子对气候的影响的研究。 在20世纪70年代,Ramanathan博士首次提出了大气中的气溶胶粒子不仅可以反射太阳辐射,还可以吸收太阳能,从而对地球的能量平衡产生重要影响。这一发现挑战了当时的传统观点,为我们深入了解气候变化提供了新的视角。 除此之外,Ramanathan博士还深入研究了温室效应的机制,特别是二氧化碳和甲烷等温室气体对气候的影响。他的研究成果为我们揭示了人类活动是如何影响全球气候的,为应对气候变化提供了科学依据。 Ramanathan博士不仅是一个卓越的科学家,他还是一个承担社会责任的公民。他认识到气候变化对于全球社会、经济和环境的重大威胁,因此他一直积极倡导减少温室气体排放,并寻求可持续的能源解决方案。为此,他还与多个国家和国际组织合作,推广低碳技术和清洁能源,以减缓气候变化的速度。 作为一位气候科学家,Ramanathan博士深知人类面临的挑战有多大。但他仍然充满希望,相信只要我们采取行动,就可以避免最糟糕的气候变化后果。他的研究和倡导为全球的可持续未来铺设了道路,为我们留下了宝贵的科学遗产。 今天,当我们面临着气候危机,更需要听取像Ramanathan博士这样的科学家的声音,采纳他们的建议,共同努力,为地球的未来打造一个更加美好、绿色的家园。