淘优惠

淘优惠

火鸡追上雄鹰,OpenAI 的成功为何难以复制

热门文章 0
火鸡和老鹰的故事,火鸡追人视频,火鸡飞翔视频,火鸡袭击人

OpenAI 的成功不仅属于一家公司,也属于一个生态;这个生态对一个离奇点子的包容,让灵活商业探索成为可能

图/视觉中国

文? | 《财经》记者 贺乾明

编辑 | 黄俊杰

2011 年 2 月,微软和诺基亚宣布全面合作,合力挑战 Android 系统。Google 高级副总裁维克・冈多特拉(Vic Gundotra)在社交媒体上评论这件事:“两只火鸡加一起,也变不成一只鹰。”

冈多特拉自然是说对了,微软和诺基亚没几年就败走手机市场。弱弱联手挑战强者,一般都是这样的结局。

ChatGPT 大热后,它的缔造者 OpenAI 被贴上 “PayPal 黑帮”“乌托邦式创业” 之类的标签。但在 2015 年,这个团队成立之初看起来也是一个妄图挑战雄鹰的 “火鸡大联盟”。

OpenAI 的第一批投资者虽然都是硅谷响亮的名字:埃隆・马斯克(Elon Musk)、彼得・蒂尔(Peter Thiel)、山姆・阿尔特曼(Sam Altman)、里德・霍夫曼(Reid Hoffman)、杰西卡・利文斯顿(Jessica Livingston),但他们所执掌的公司和机构都不是各自领域里最专精于人工智能的那些。

海量数据和顶级人工智能科学家一般被认为是发展人工智能的必备资源。而美国最有资源的正是四大科技巨头――Google(手机、地图、搜索、邮件)、Facebook(社交)、苹果(手机)、亚马逊(购物)。这四家公司都在几年内达到万亿美元市值,并将人工智能用在自己的产品上。它们当中,只有亚马逊参与了 OpenAI,但只是捐了一些云计算资源。

霍夫曼掌管的 LinkedIn 在数据量层面无法和 Facebook 相提并论。阿尔特曼 接手的 Y-Combinator 虽然有名,但孵化的公司最大的也只是 Airbnb。特斯拉是其中唯一一家人工智能巨头,今天有上百万辆车每天在全世界搜集数据――但在 2015 年,它只是一个年产 5 万辆,前途未卜的创业公司。三年后,特斯拉销量激增、加大人工智能研究投入,马斯克便退出 OpenAI 董事会,说双方有 “利益冲突”。

就是这样一个开局,七年后的 OpenAI 成为全球最受关注的人工智能公司,让 Google、Facebook 等科技巨头措手不及。

创办 OpenAI 之前,阿尔特曼在斯坦福大学的课堂提出了公式:创业成功=想法 * 产品 * 执行 * 团队 * 运气。

OpenAI,他唯一成功的创业项目,完美证明了这个公式。

共同的恐惧,帮 OpenAI 招揽到一批顶级 AI 科学家

OpenAI 故事的起点是 2015 年 7 月在加州门罗帕克的一场晚宴。召集者是刚接任硅谷著名孵化器 Y Combinator 总裁一年多的阿尔特曼。晚宴出席者们相识已久,不少在创业时代有过交集。他们还都熟悉瑞典哲学家尼克・博斯特伦(Nick Bostrom)的观点,都对人工智能的未来充满恐惧。

那时,AlphaGo 还不是全球围棋冠军,但计算机识别人脸的准确度已超过人眼,Google 的自动驾驶汽车也早在路上行驶多年,数千万人使唤苹果、亚马逊的语音助手。机器越来越聪明,虽然还不到人的水平。

但根据博斯特伦 2014 年出版的《超级智能》(Super Intelligence):以计算机发展规律,如果人工智能的聪明程度达到接近人类,它的智力用不了多久就会远远甩开人类――差距就像人类与老鼠那样大,但这一次,人类扮演老鼠的角色。

马斯克和阿尔特曼多次公开引用这个观点,认为人类必须提前做好准备。阿尔特曼和马斯克没想着限制它,而是想积极推动开发造福全人类的人工智能,让每个人都用上,去对抗坏的人工智能。正是这个宏大的愿景帮他们聚拢了顶级人才。

晚宴上,负责 Google Brain 项目的人工智能科学家伊尔亚?苏茨克维(Ilya Sutskever)当场表示有意加入。他在 2012 年参与提出 AlexNet 模型,证实了深度学习潜力。这被认为今天新一轮人工智能浪潮,包括无人驾驶技术的起点。

另一位加入的技术天才是今天的 OpenAI 董事长、CTO 格雷格・布罗克曼 (Greg Brockman)。布罗克曼是硅谷新兴独角兽 Stripe 的第 4 位成员,任首席技术官,推动 Stripe 的估值涨到 35 亿美元,并重新塑造了美国电商的支付体验。如果他继续陪着 Stripe 长大,可以在接下来七年获得数亿美元回报――现在 Stripe 的估值已经涨到 630 亿美元。但在当时,布罗克曼认为,投身人工智能研究更重要。

左侧是格雷格・布罗克曼,右侧是伊尔亚?苏茨克维。来自布罗克曼的博客。

晚宴结束后,布罗克曼就开始四处挖人组建团队。他找的第一个人是约书亚・本吉奥 (Yoshua Bengio)。2019 年,因为对深度学习的贡献,本吉奥和杰弗里・辛顿(Geoff Hinton)、杨立昆 (Yann LeCun) 一起获得图灵奖,唯独他不在为大公司效力。

本吉奥给布罗克曼列了深度学习领域最好的研究人员名单。接下来的几周,布罗克曼挨个联系名单上的人,尽管没有 Google 、Facebook 等公司的天价薪水,他还是靠着宏大的愿景说动了其中 9 位加入。

2015 年底,世界顶级的人工智能学术会议 NeurIPS(当时还叫 NIPS)举办期间,OpenAI 带着 10 亿美元的投资承诺宣告成立,目标是开发 “通用人工智能” 技术,专利和研究成果全部开放。

人们惊讶于 OpenAI 的愿景,但没多少人对这个缺少数据的联盟有信心。那一年担任 NeurIPS 大会主席的计算机科学家尼尔 ・ 劳伦斯(Neil Lawrence)说,OpenAI 的愿景令人钦佩,但 “没有数据共享,OpenAI 将无法造福人类”。

沿着 Google 打下的基础,找到可行的技术方向

2016 年,主流的人工智能技术路线是 “监督式的深度学习”,需要用精心标注的数据教会计算机自动完成任务。比如你想让计算机识别照片中的猫,你需要用上万张有猫的照片训练模型,而且要人去标清楚每张图片中什么是猫,然后计算机才能在新的照片里认出这种毛绒绒的动物。如果之后要识别狗,还得再来一次。

但 OpenAI 没有大规模的数据,也没足够多的钱雇佣人手去标注数据。它选的技术路线是 “非监督的强化学习”。强化学习是指让机器不断试错学习如何做某件事。非监督代表着让机器自己学,不要人引导它。这是 DeepMind 重点研究的技术,他们用它做出了 AlphaGO。

曾在 OpenAI 负责技术路线图的人工智能科学家达里奥・阿莫代 (Dario Amodei) 评价说,OpenAI 早期开展研究的方式类似风险投资,在一个领域设定 “投资组合”,不同的团队往不同的方向下注,最终选出最有可能做出通用人工智能的项目。

OpenAI 早期选了三个方向:一是做机器人,他们认为 “机器智力的发展需要物理实体”,于是开发出了可以单手玩魔方机器手系统 Dactyl;另一个是最游戏人工智能,借助打游戏提升机器智力水平,一开始在雅达利复古游戏中实验,后来做了打 Dota 的人工智能;第三个是开发语言模型,让人工智能用文本语言学习理解世界,也就是 GPT 系列。

前三年,OpenAI 的研究成果没什么特别的。“我们所做的一切都只是简单的想法,但正确吗?我们还没有搞清楚,有点茫然”,OpenAI 联合创始人布罗克曼 2018 年接受采访说。这时 Google 已经遥遥领先,它的语音机器人在发布会上伪装成人打电话给餐厅预订位置――这很快引发了商业公司滥用人工智能的讨论。

OpenAI 的转折时刻是 2019 年 2 月 14 日发布 GPT-2 模型,主要功能是根据用户输入的内容,生成续写文本。比如输入《指环王》中的句子,它会在几次尝试当中的某一次,生成让人无法分辨真假、剧情和原著不同,但看上去符合逻辑的续文。

GPT-2 是一个主要用 800 万篇 Reddit 论坛帖子、总计 40GB 文本训练出来的语言模型,从数据中提炼出来的规律和特征――也就是参数有 15 亿,是上一代语言模型 GPT 的十倍。

阿尔特曼当时参加一档播客录制时说:“自然语言模型变得越来越好,是人工智能领域最令人兴奋的发展之一。” 一向言简意赅的他,把这句话说了两遍。

大型语言模型也是许多大公司投入的方向。Google 发布了 BERT 系列模型,在阅读理解、对话等多个文本任务的表现超过人类,并刷新世界纪录。微软在 2020 年初训练出 Turing-NLG 的大模型,有 170 亿参数,是当时最大的模型。

不过在大公司,训练大语言模型只是人工智能研究院的一个项目。而在 OpenAI,这是优先级最高的事项,研究员投入 30 多位,它招揽的顶级科学家几乎都参与其中。

除了之前训练 GPT-2 时用到的 Reddit 上的数据(后来大幅扩充),OpenAI 的科学家还把此前 12 年从 6000 万个域名中收集的新闻报道、帖子、书籍全文以及各种网页等数千亿个单词的英文资料喂进模型,英文维基百科全部只占数据量的 3%,然后消耗数千万美元的计算资源开发出了 GPT-3。

GPT-3 的参数是 Turing-NLG 的 10 倍,不需要针对训练就能写诗歌 / 报道、回答问题、编写代码,大多数情况下结果让人难辨真假。《纽约时报》随后发布的一篇专栏文章称,GPT-3 写散文、诗歌、代码的能力 “令人惊奇”“令人羞愧” 又 “令人毛骨悚然”。

但这类大语言模型仍然存在一些问题,当时调用一次就需要消耗不少资源,等待几分钟甚至十几分钟才能出一个结果,想要在商业中应用基本不可能。

GPT-3 发布后,OpenAI 朝着两个方向继续前进,一是开发 GPT-4,大概率会在今年发布。另一个是从 GPT-3 拆出参数更少、聚焦特定任务的模型,用更新的数据训练它,配合人类反馈数据强化能力,降低成本、提高能力,使其在商业应用上可行。

ChatGPT 就是 GPT-3 大幅度强化对话能力、并用数十万人类反馈数据训练后的结果,它的基础模型被命名为 GPT-3.5。据报道,ChatGPT 是 OpenAI 在 2022 年 11 月中旬临时开发出来的,只用了 13 天时间。起因是 OpenAI 的高管担心对手先发布同类产品 “抢它风头”。结果超出预期,ChatGPT 在全球掀起风暴。

在 Meta(Facebook 母公司)首席人工智能科学家、图灵奖得主杨立昆看来,ChatGPT“不特别具有创新性”“没有什么革命性”。

ChatGPT 和它的基础大模型 GPT-3 的确建立在多年技术积累上,不少都出自 Google。它最核心的技术是 Google 在 2017 年提出的 Transformer 模型架构,让大规模并行处理海量数据成为可能。

因为 ChatGPT 而备受关注的 “人类反馈强化学习”(RLHF)训练方式,也是出自 DeepMind,它能让模型从人类对机器不同的结果反馈(赞扬或批评)中,不断学习、改进输出结果。

就像 iPhone 发布前,多点触控的技术也已诞生多年,历史上任何一个产生巨大影响力的产品出现前,它背后技术要素大都齐全。

相比在单个方向上实现技术从 0 到 1 的拓荒创新,OpenAI 做到的不只是把各种技术融在一起,还在持续的反馈中迭代 5 年,找到一个适合给大众使用的产品形态。

对 OpenAI 来说,2018 年以来一直坚持训练大语言模型,还需要勇气。GPT-2 发布前,OpenAI 钱已经不太够用了。根据 OpenAI 提交给美国国税局的文件,2017 年它光花在云计算上的钱都有 790 万美元。布罗克曼等人测算,训练大模型消耗的计算量,每 3、4 个月会翻一倍。这个趋势得到了验证。据多位业内人士估算,OpenAI 训练 GPT-3 一年,仅算力成本就有 2000 万美元。

而那时,OpenAI 的投资人在 2015 年底承诺的超 10 亿美元资金,只到账了一小部分。

与微软结盟,巧妙的利益平衡

布罗克曼等人推动 OpenAI 完成从 0 到 1 的发展过程。之后 OpenAI 从花费巨额费用支持 GPT-3 上线到 ChatGPT 震动世界,主要靠阿尔特曼。

阿尔特曼去年初在社交媒体上发的一个帖子,恰如其分地体现了他的世界观:“我非常感兴趣的一种大学替代方案是:找出全球最聪明、最有进取心的 18 岁年轻人,给他们 10 年以上的薪水和资源,让他们做自己想做的任何项目,配上聪明的同龄人――换他们未来收入里的几个百分点。”

这差不多就是他曾在 YC 做的事:选拔聪明、渴望成功的年轻人,为他们提供培训,帮他们成功――用一小笔钱(1.2 万美元)换走创业项目 7% 股份。硅谷创业教父保罗・格雷厄姆(Paul Graham)创办 YC 后,孵化出了 Airbnb、Stripe、Cruise、Dropbox 等超级独角兽,今天这些公司的总价值已有数千亿美元,超过阿里巴巴或者腾讯。

2014 年,格雷厄姆把 YC 交给阿尔特曼时,阿尔特曼除了早年有一次不太成功的创业,职业经历主要在 YC 孵化器当导师、提供融资建议。但 YC 和大部分投资机构不同,它的合伙人不雇投资经理,坚持自己理解技术。投资核聚变项目,也是阿尔特曼自己做的功课。

阿尔特曼是阿伦・索金(Aaron Sorkin)电影里典型的聪明人形象,语速很快、回答简练。他有比师傅更大的野心、更激进的时间表。2015 年,阿尔特曼被问及 YC 在五年后会怎样,他回答 “一年投资一千家公司”。这个数字是他接手前,YC 十年孵化的公司总数。

山姆・阿尔特曼,来自 YC。

不过他没有待到那个时候。2019 年初,阿尔特曼辞去 YC 总裁的职务,接管 OpenAI。他在 OpenAI 做的第一件事,就是组建盈利公司 OpenAI LP,然后自己担任首席执行官(CEO),找融资。

“最引人注目的人工智能系统,除了需要算法创新,还消耗最多的计算资源,”OpenAI 同期发布的一篇博文中写道,“接下来几年,我们要投资数十亿美元采购云计算资源,吸引并留住有才能的人。”

当时硅谷有这等资源的公司基本都在投资自己的人工智能技术。阿尔特曼多次飞去西雅图,为微软 CEO 萨蒂亚・纳德拉(Satya Nadella)现场展示 OpenAI 的模型。

微软早年为了 Windows 全力打击竞争对手,是硅谷创新者们眼中的 “恶人”。但纳德拉接手微软后不再追逐操作系统的占有率,改去资本市场讲云计算的故事。双方有了合作空间。

2019 年 7 月,经过一个多月的谈判后,OpenAI 拿到微软的 10 亿美元投资,双方的利益也达成了微妙的平衡。

对纳德拉来说,投资 OpenAI 是一笔划算的生意。签约后,微软成了 OpenAI 的唯一云计算供应商――投出去的钱,相当一部分变成了微软的云计算收入。

微软还成了 OpenAI 技术商业化的 “首要合作伙伴”。这意味着其他公司想使用 Open


治疗牛皮癣的药膏


牛皮鲜蕞佳治疗方法?牛皮癣的治疗方法是很多的,牛皮癣患者要注意牛皮鲜的预防保健工作,这种疾病的出现是很多的,生活中要注意牛皮鲜常识问题,要注意牛皮癣预防工作,我们看看专家的介绍。

1.一般情况下,治疗牛皮癣的方法是要以清除症状为主,但是要注意用药的时候要注意,不要盲目的使用。有的患者不知道牛皮癣是什么,就随便的用一些外用药物,蕞后导致病情加重,给自己造成更大的困扰。牛皮癣患者较好在专业医师的指导下用药,千万不要盲目的乱用药物以免引起其他不良反应。

2.一般情况下,对于患者来说,较好是在医师的正确指导下用药,千万不可乱吃乱用药物以免药物的副 作用。而一些不当的外用药物也是可引发和加重牛皮癣的。患者一 定要注意,在治疗的过程中一 定要积极的配合医生的治疗,这样才能有效的控制住病情,避免牛皮癣的复发。

3.在治疗牛皮癣的过程中,一 定要注意饮食,要多吃一些清淡的食物。不要吃一些辛辣的食物,避免吃一些发物,以免对病情造成负面伤害。牛皮癣患者一 定要忌口,千万不要吃一些发的食物,以免加重病情,导致治疗的难度增加。

专家提醒,牛皮癣的治疗方法是有很多的,但是牛皮癣不是绝症,只要是能在牛皮癣的初期就发现,就及时的去正规的专业医院治疗,是可以达到治 愈的效果的,如果不及时治疗的话,牛皮癣是很容易扩散至全身的,所以一 定及时治疗,以防牛皮癣的扩散。

牛皮癣炎症重怎么办?牛皮癣是一种很常见的炎症皮肤病,发病的原因多而且复杂而且易复发,给患者的身体造成很大的影响。牛皮癣是一种炎症皮肤病,其特征是在红斑上反复出现多层银白色干燥鳞屑。下面请专家为我们介绍一下!

牛皮癣的临床症状:

牛皮癣在临床上分为寻常型银屑病、病脓疱病和关节炎型银屑病四种。寻常型牛皮癣的临床表现具有典型的牛皮癣的临床特征和病情变化轻重。急期皮损多呈点滴状,鲜红色,瘙痒较著。静止期皮损常为斑块状或地图状等。消退朔皮损常呈环状、半环状。少数皮疹上的鳞屑较厚,有时堆积如壳蛎状。牛皮癣患者继发红皮病者称红皮病型银屑病牛皮癣;皮疹有少量渗液,附有湿鳞屑.或初起为小脓疱,伴有发热等症状者称为脓疱型银屑病;合并关节病变者称为关节型银屑病。

牛皮癣的临床表现有以下几个特点。

1、寻常型银屑病是临床上蕞为常见的类型,一般初期症状不明显,容易忽视。

2、寻常型银屑病的皮损特征,初期皮损呈点滴状或上履云母状银白色鳞屑,去除鳞屑有淡红色透明发亮薄膜,轻刮薄膜有出血点,云母状银白色鳞屑,薄膜现和点状出血是本类型病的临床特征,它根据病情发展阶段的不同分为进行期、静止期和消退期。

3、脓疱型银屑病在临床上比较常见,大多急发病,迅速扩延全身。

4、红皮病型银屑病,又称剥脱牛皮癣,由于病变组织中的白细胞、血小板等严重缺陷,导致其代谢失调、电解质紊乱、全身损害及继发感染等。

温馨提示:以上就是专家介绍的牛皮癣疾病的症状表现,大家要多加的认识这种疾病,这样才能在患病之后及早发现,及时的到院进行相关的治疗。在治疗的过程中,要积极的配合医生,这样疾病才能很快的康停

牛皮鲜蕞佳治疗方法?牛皮癣的治疗方法是很多的,牛皮癣患者要注意牛皮鲜的预防保健工作,这种疾病的出现是很多的,生活中要注意牛皮鲜常识问题,要注意牛皮癣预防工作,我们看看专家的介绍。

1.一般情况下,治疗牛皮癣的方法是要以清除症状为主,但是要注意用药的时候要注意,不要盲目的使用。有的患者不知道牛皮癣是什么,就随便的用一些外用药物,蕞后导致病情加重,给自己造成更大的困扰。牛皮癣患者较好在专业医师的指导下用药,千万不要盲目的乱用药物以免引起其他不良反应。

2.一般情况下,对于患者来说,较好是在医师的正确指导下用药,千万不可乱吃乱用药物以免药物的副 作用。而一些不当的外用药物也是可引发和加重牛皮癣的。患者一 定要注意,在治疗的过程中一 定要积极的配合医生的治疗,这样才能有效的控制住病情,避免牛皮癣的复发。

3.在治疗牛皮癣的过程中,一 定要注意饮食,要多吃一些清淡的食物。不要吃一些辛辣的食物,避免吃一些发物,以免对病情造成负面伤害。牛皮癣患者一 定要忌口,千万不要吃一些发的食物,以免加重病情,导致治疗的难度增加。

专家提醒,牛皮癣的治疗方法是有很多的,但是牛皮癣不是绝症,只要是能在牛皮癣的初期就发现,就及时的去正规的专业医院治疗,是可以达到治 愈的效果的,如果不及时治疗的话,牛皮癣是很容易扩散至全身的,所以一 定及时治疗,以防牛皮癣的扩散。

牛皮癣炎症重怎么办?牛皮癣是一种很常见的炎症皮肤病,发病的原因多而且复杂而且易复发,给患者的身体造成很大的影响。牛皮癣是一种炎症皮肤病,其特征是在红斑上反复出现多层银白色干燥鳞屑。下面请专家为我们介绍一下!

牛皮癣的临床症状:

牛皮癣在临床上分为寻常型银屑病、病脓疱病和关节炎型银屑病四种。寻常型牛皮癣的临床表现具有典型的牛皮癣的临床特征和病情变化轻重。急期皮损多呈点滴状,鲜红色,瘙痒较著。静止期皮损常为斑块状或地图状等。消退朔皮损常呈环状、半环状。少数皮疹上的鳞屑较厚,有时堆积如壳蛎状。牛皮癣患者继发红皮病者称红皮病型银屑病牛皮癣;皮疹有少量渗液,附有湿鳞屑.或初起为小脓疱,伴有发热等症状者称为脓疱型银屑病;合并关节病变者称为关节型银屑病。

牛皮癣的临床表现有以下几个特点。

1、寻常型银屑病是临床上蕞为常见的类型,一般初期症状不明显,容易忽视。

2、寻常型银屑病的皮损特征,初期皮损呈点滴状或上履云母状银白色鳞屑,去除鳞屑有淡红色透明发亮薄膜,轻刮薄膜有出血点,云母状银白色鳞屑,薄膜现和点状出血是本类型病的临床特征,它根据病情发展阶段的不同分为进行期、静止期和消退期。

3、脓疱型银屑病在临床上比较常见,大多急发病,迅速扩延全身。

4、红皮病型银屑病,又称剥脱牛皮癣,由于病变组织中的白细胞、血小板等严重缺陷,导致其代谢失调、电解质紊乱、全身损害及继发感染等。

温馨提示:以上就是专家介绍的牛皮癣疾病的症状表现,大家要多加的认识这种疾病,这样才能在患病之后及早发现,及时的到院进行相关的治疗。在治疗的过程中,要积极的配合医生,这样疾病才能很快的康停


特斯拉债券


特斯拉Model Y长续航版和高性能版国内售价上涨2000元,标准续航版售价暂未变化。Model Y长续航版售价上涨至31.19万元,高性能版售价上涨至36.19万元标准续航版售价仍为26.19万元。值得一提的是,2月10日Model Y标准续航版本已经涨价2000元至目前的26.19万元,所以本轮涨价未被涉及。...

特别声明:本页面标签名称与页面内容,系网站系统为资讯内容分类自动生成,仅提供资讯内容索引使用,旨在方便用户索引相关资讯报道。如标签名称涉及商标信息,请访问商标品牌官方了解详情,请勿以本站标签页面内容为参考信息,本站与可能出现的商标名称信息不存在任何关联关系,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述反馈文件后,将会依法依规核实信息,第一时间沟通删除相关内容或断开相关链接。