GPT-3：是富人的游戏，还是未来的电力？

素颜马尾好姑娘i 2023-01-23 06:57 14阅读 0赞

> 我们从没像今天这样，离AGI如此之近，又如此之远，就差临门一脚得距离，但问题是我们的脚要多坚硬多有力，而大门又有多坚固多厚实？  
> ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0phaWxtYW4_size_16_color_FFFFFF_t_70]

# GPT-3：是富人的游戏，还是未来的电力？ #

![641][]

人工智能将是未来核心生产力，这一观点在科技届几乎无人会反对。

因此创造一个类人甚至超人的AI产品迷人且充满了想象力，吸引着各个行业都在尝试使用AI来帮助产业向智能化转型，资本和创业者也在其中沉浮向前。

2020年6月，在训练约2000亿个单词、烧掉几千万美元后，史上最强大AI模型GPT-3一炮而红。写小说、编剧本、敲代码……GPT-3的无所不能吸引了全球数以万计的开发人员正在基于该平台开发，目前300多种应用程序在使用 GPT-3，每天生产 45 亿个字符。

随着其应用场景的不断扩大，GPT-3 真的能取代人类吗？

01、GPT-3到底有多厉害？

之所以笔者今天想聊聊这个看似遥不可及的底层技术，是因为最近看了一部电视剧《你好，安怡》。在剧中，安怡是一位来自2035年的AI机器人，与当前生活中不一样的是，目前技术下的智能机器人虽然能帮忙做一些任务，但似乎只能干一件事。医院里的智能导诊机器人不会写代码，送餐的机器人也写不了小说，它们更像是一个个工具而非智能体。

![641 1][]

一个真正的AI机器人应该什么样呢？电视剧里的安怡似乎给出了方向，她拥有自己的独立意识，不仅能搞定家务、带孩子，还能通过修改程序帮助主人解决工作危机，甚至还想做这个家庭的女主人。

想让AI机器人能够像人一样交流，就要用优异的NLP（自然语言处理）能力。**而今天探讨的主角GPT-3就是NLP领域的佼佼者，达到了万能选手一般的能力，也因此被人为是AI领域一个出人意料的进步。**

本质上GPT-3 是一个语言模型，而语言是智慧的工具，人能成为万物之灵是能够借助语言去获得知识。如果AI掌握了语言，并且理解还能预测人类语言，那么拥有GPT-3语言的AI机器人就很有可能成为安怡这样的通才。

![0][]

这里就不得不提一下GPT-3的背景，GPT-3是由人工智能组织OpenAI开发的语言。该组织成立于2015年成立，其联合创始人包括特斯拉CEO马斯克、著名孵化器 Y Combinator 前 CEO 山姆·奥特曼以及著名投资人彼得·蒂尔等。

**值得一提的是，此前NLP（自然语言处理）并不是Open AI最为关注的领域，但自然语言处理方面成果是业内一直关注的重点。**

2020年，美国查普曼大学的学生利用基于Transformer的GPT-3模型，创作了影片剧本《律师》，走红社交网络。

2021年，OpenAI又基于GPT-3发布了DALL·E这个连接文本与图像的神经网络，能通过自然语言操纵视觉概念，比如，你输入“一把牛油果造型的扶手椅”，它们就能通过图像合成出一系列的目标图像。

![641 2][]

**人们所惊叹的创造力，让GPT-3产生了巨大的商业价值。**

越多越多的企业家、科研人员甚至艺术家都开始探索这个领域，对他们来说，GPT -3意味着一种新的工具的诞生。

ZeroCrater的创始人甚至在一篇博客文章中表示，GPT -3比他尝试过的任何AI语言系统都更加连贯。确实GPT-3 可扩展性非常强大，甚至可以用在无代码开发领域，只要对它输入你想要什么样的网页或者 app，它就能帮你直接生成。因此，之前业内也传出过基层码农将会被 AI干掉的言论。

**从技术的角度，GPT-3是有史以来功能最强大的语言模型。**从初代 GPT 到 GPT-3，算法模型基本没有变化，但通过堆人、堆算力来进行训练后的结果就是GPT-3有希望去胜任所有智力任务。

![641 3][]

数据显示，GPT训练数据量从1代到目前的3代一直在高速增长，GPT-3的参数量已经达到1750亿，而算力费也已经是千万级别。

可见，GPT-3靠的是通过规模化现有算法模型，来实现算力的增长。回顾GPT-3 的技术思路，可以发现AI 领域的一个明显趋势是：**要训练一个有颠覆性进步的模型，最终比拼的是算力规模。**

02、算力，一场富人的游戏？

神经网络之父Geoffrey Hinton在GPT-3出现后，曾这样感慨：“生命、宇宙和万物的答案，其实只是4.398万亿个参数而已。”

**算力是AI发展始终绕不开的问题。**

罗氏、辉瑞、诺华、默沙东等等著名药企，都瞄准AI完成药物筛选，加速新药研发进程；谷歌的AI程序AlphaFold 2，去年成功解决了蛋白质折叠的问题，相当于突破了生物学50年的重大难题……这些科技成果背后离不开计算机的发展，计算机算力已经成为基础科研、前沿研究的重要工具。GPT-3的参数量已经达到千亿级别，规模接近人类神经元的总量，就是最好的例子。

**但强大的算力往往靠的是财力的支持。**其实GPT-3不仅训练成本高，此前微软还为训练它特地建设了一个5亿美元的超算中心。微软这个超算中心装载了一万张英伟达GPU，训练GPT-3消耗了它355个GPU年的算力。

**因此算力带来的经济成本也成为了国内AI研发的壁垒。**一方面，国内AI大厂拥有的软硬件虽然多，但是不够开放，闲置的算力资源被散落在各个平台。

![641 4][]

中国拥有全球超算Top500中的226台

另一方面，中国很少有企业能够像微软一般财大气粗组件算力中心。因为即使是比GPT-3规模更小的AI模型，动辄耗费几十乃至上百张AI加速卡，对很多企业来说也是“不能承受之重”。

03、谁能打造国内的AI发电厂？

那么在中国，如果打造出一个比GPT-3更强，甚至像安怡一般超出想象力的人工智能呢？

目前看来市面上有两种路径可以走，一种是开发出更加强大的算法，更高效地利用算力，节省费用；另一种是就是在现有算法基础上进行规模化训练，让更多AI模型获得丰富的训练参数，从而达到优质模型的开放。但当下，走通两条路的前提都是拥有强大的算力。据估计，未来人工智能将占据80%以上的计算需求，需要有开放的AI算力中心承载这种需求。

![Image 1][]

还记得去年国家发改委明确划定“新基建”的概念范围时，指出“人工智能作为信息基础设施板块中的新技术基础设施，因其对传统产业的创新和重塑能力，更被誉为是数字经济时代的‘新电能’”。

**因此当AI被誉为数字经济时代的“新电能”时，谁先搭建开放的算力中心，谁将成为国内的AI发电厂。**

开源这件事，在过去的手机行业取得了巨大的成功，凭借软件开放、硬件整合的能力，普通消费者短短十年内享受到了智能手机普及的福利。

因此AI产业若能完成算力的软件与硬件的开源，就能让AI行业迅速发展。

**因为开源可以高效统筹散落的闲置算力资源，达到提高算力的结果，从而低成本实现整个产业的共赢。**

2011年，Facebook牵头发起了OCP开放计算项目，4年时间内OCP就为Facebook节省了20亿美元的成本，数据中心电费降低了20%。

还有英特尔、微软、谷歌都在以开放的姿态融合更多新的AI硬件，把更强大的算力贡献给产业。

反观国内，阿里拥有突出的云计算能力，为超过一半的A股上市公司、80％中国科技创新企业提供服务；商汤做为中国知名的AI算法提供商，已公开的全球专利资产近2000件，覆盖20个国家和地区；浪潮智算中心与5G结合，提供了云端训练、边缘推理的新应用场景……这些前言AI企业都能把算力供给全行业使用，就能推动AI的产业化，以国内庞大市场，也一定能催生更强大AI模型的诞生。

![Image 1][]

04、未来价值

知名风投机构 A16Z合伙人Frank Chen关于CPT-3的观点是，GPT-3让使用者避开了培训数据以及建立AI业务的部分经济成本，这使得NLP（自然语言处理）成为AI研发最有前途的领域之一。因为有了GPT-3，很多AI初创公司的软件都内置了最新的NLP技术。

这意味着，开放API的GPT-3已经对AI创业公司产生正向的影响。随着算力的开放，AI时代拥有更多低廉的算力资源，更多像GPT-3一样的AI模型就会低成本出现，从而推动AI的产业化。

但新兴的技术往往面临高速发展与低速商业化的困局，因此新旧技术之间的交替也非常考验资本与企业的耐心。但不能偏于一隅的仅仅讨论商业应用价值，因为它代表着未来的竞争力。

几十年前，柯达说，你负责按快门，剩下的交给我们。

在未来，AI 或许也会表明心态，人类什么都不用干，剩下的交给它。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0phaWxtYW4_size_16_color_FFFFFF_t_70]: /images/20221004/4ad89755dc89418c86344ee0ac72c88d.png
[641]: /images/20221004/cbcd282ff0a749dfa21c4fcaf9df3794.png
[641 1]: /images/20221004/057b76f3939c417a800125585cc25df1.png
[0]: /images/20221004/c91596e3c8014ad391f5a3f15b307440.png
[641 2]: /images/20221004/b30b0c95c24040d8a024ca78923ac511.png
[641 3]: /images/20221004/1c631b37716f40ea916ed7b7439d111b.png
[641 4]: /images/20221004/f34e1e70fe9d4134a2ee80fbd50f1fe1.png
[Image 1]:

发表评论取消回复

表情：

评论列表（有 0 条评论，14人围观）

还没有评论，来说两句吧...

相关阅读

相关你用的gpt是什么版本的，3.5版还是之前的版本？

我用的是 OpenAI 的 GPT(Generative Pre-training Transformer)语言模型。不过，我是一个虚拟助手，并不是 GPT 程序本身。因此我无

港控/mmm°/ 2024年03月25日 15:47/ 0 赞/ 38 阅读

相关什么是电力系统，以及电力系统的相关概念

电力网：按电压等级的高低、供电范围的大小的分类地方电力网：电压等级在35kV及以下，供电半径在20~50km以内区域电力网：电压等级在35kV以

谁借莪１个温暖的怀抱￠/ 2024年03月22日 10:28/ 0 赞/ 131 阅读

相关现实还是虚拟？VR和AR谁才是未来

目录一、引言二、VR的简要介绍三、AR的简要介绍四、VR vs AR：对比分析应用场景

柔情只为你懂/ 2024年03月16日 12:30/ 0 赞/ 116 阅读

相关这是测试魔咒还是人为疏忽的借口

这几天遇到一个线上问题，关于开发修改代码以后提交影响点测试，其中有一点是关于版本的兼容性测试，场景：有AB两个版本，A新版，B为旧版，然后这个影响范围需要分为四种情况进行测试

淩亂°似流年/ 2023年10月13日 16:02/ 0 赞/ 74 阅读

相关 GPT-3：是富人的游戏，还是未来的电力？

> 我们从没像今天这样，离AGI如此之近，又如此之远，就差临门一脚得距离，但问题是我们的脚要多坚硬多有力，而大门又有多坚固多厚实？ > ![在这里插入图片描述][water

素颜马尾好姑娘i/ 2023年01月23日 06:57/ 0 赞/ 15 阅读

相关人还是机器？指明航行方向的永远是人类！

![format_png][] 全文共1632字，预计学习时长5分钟 ![format_png 1][] Adobe Stock 科幻电影中暗示机器人

深藏阁楼爱情的钟/ 2022年12月23日 07:23/ 0 赞/ 197 阅读

相关是骗局太高深还是人的欲望太强烈

前言相信每个人自己或者身边的人都或多或少被骗过吧，本人自己也是有亲身的经历，身边的朋友也有过现实的例子，新闻上也看到过很多的报道，总体来说就是骗术无处不在，防不胜防呀。

我就是我/ 2022年11月17日 14:47/ 0 赞/ 218 阅读

相关怎么查看电脑磁盘的分区是GPT还是MBR

打开CMD，键入如下命令 > diskpart ![在这里插入图片描述][20210130224109527.png] 键入如下命令 > list disk

﹏ヽ暗。殇╰゛Y/ 2022年10月25日 04:48/ 0 赞/ 369 阅读

相关虚拟主机还是云服务器玩游戏,虚拟主机还是云服务器玩游戏

虚拟主机还是云服务器玩游戏内容精选换一换 ![c8a5a5028d2cabfeeee0907ef5119e7e.png][] 创建弹性云服务器组。与原生的创建云服务器

超、凢脫俗/ 2022年09月04日 10:46/ 0 赞/ 349 阅读

相关直播未来属于RTMP还是HTTP？

直播未来属于RTMP还是HTTP？ HTTP 传视频比 RTMP 实现起来简单？HTTP 延迟太高？答：直播通讯未来是属于html5的。 1，协议使用份额如今国内9

迈不过友情╰/ 2022年05月25日 11:27/ 0 赞/ 262 阅读