杨宁:用大白话描述GPT的历史,以及它是怎么工作的

杨宁:用大白话描述GPT的历史,以及它是怎么工作的

1)GPT是一个全新的东西,目前GPT处于早期阶段,有很多机会,要提升认知

回忆93、94年,杨志远在斯坦福实验室创建了Yahoo,当时只有链接+描述,类似黄页的网站。现在的GPT 相当于当时的互联网网景那个时候,还处于早期阶段,非常简陋,但充满了机会和活力。

创业者需要注意,每一次科技浪潮中,行业早期时候,急功近利变现的都失败了,反而是思考怎么做一个好玩的东西的人,都赚了很多钱,因此要改变创业思路。当然到了中后期时候,竞争激烈时候就不一样了。

现在还是朦胧期,AIGC类似互联网的门户时代,新浪新闻,大家对于内容是消费最多的。AIGC创作内容,刚才有个小兄弟说,写诗没人看,为什么,因为内容发生了重构。

  • 在远古时期,大家就是画,没有多少内容,是没有内容吗?是太难看,自己看不下去,玩了几天就不玩了。
  • 照相机让图像内容爆发性增加,因为什么?容易。
  • 到了手机时代,照片过剩。
  • AIGC后内容再次爆发,会导致内容消费变化,往下走,AI更好,大量时间消费自己创作的内容,看=消费时间。

Attention到自己创造的内容,比你看别人的内容好看,信息重构,Attention转移。

AIGC是全新的东西,不是原有任何东西的升级,是另外维度的新东西,互联网是门户网站而已嘛?AIGC是AI吗?AI不是互联网的升级,现有的一切不会消失,会变成重构,商业之间供应链,商家-机器-客户,关系重构,拆解和重构。

所有一切都会拆解和重构的时候,相当于地震了,毁灭了一切建立的秩序,很多牛逼公司都会完蛋,会在新的事物荡然无存,优势完全消失。

真正能获得巨大成功的人,必须在认知上有很大差异,你能看出来4维、5维的东西,能理解AI的重构,速度会别人快,每天进步一点,只要目标清晰,每天走一步,回头看走了很远。

编程也不用学了,整个Coding不存在了,彻底重构了,机器直接写底层程序,机器动态写程序。ChatGPT做机器人,过去机器人的系统需要人写代码。

2)用大白话描述GPT的历史,以及他是怎么工作的

第一代机器人:波士顿机器人,非常土,非常原始,码农写的,所有行为通过编程,不靠谱,靠编程就不靠谱。

第二代机器人:Telsa机器人,强化学习,根据别人的输入。

第三代机器人:ChatGPT机器人,真正意义上的一定不是靠强化学习来的,让你的孩子碰钉子,有些事情不能通过强化学习,学傻了。

机器人不是强化学习来的,强化学习很土,比如教小孩,天天碰钉子,学会了,也傻了。但小孩是通过对于知识的理解。

Gpt是机器学习上巨大的突破。

2014来斯坦福,李飞飞接待的,参观人工智能Lab,很多PHD搞的东西,有一个团队提出了大语言模型,当时觉得不可能,有很多玄学在里面。当时Openai还没成立。

大语言模型是什么?是人怎么理解这个世界?

假如说人类看到可乐,闭上眼睛描述可乐,不能完美描述的,因为可乐本身没有存这个。之前计算机是存储像素点,非常精确的,但是大脑不是这么工作的,是一个大语言的模型,可乐是描述出来了,过去知识的信息压缩,一个罐子+cola品牌logo+颜色+角度空间感,经常出错,因为信息压缩会失真。

人类处理信息不是像素级别,而是语言级别的,通过语言模型描述。gpt非常类似大脑的原理,大脑不是中文也不是英文,是大脑自有的语言,难以描述,我们人沟通的语言是一种API,存储了分析逻辑等一切的知识。(r:所以人设重要)

Gpt是“常识”,人类从周围环境获得大量的语料形成的常识,人如果在野外长大就啥也不会了。

Gpt怎么工作的?一个机器人母体,打开一个窗口,就spawn一个分身,聊天过程中分身学习了,就有了bounding,了解了常识之外的东西。(r:母体是2021年的)

3)如何和GPT更加愉快的相处?

AI的一个概念:概率模型,天下一切ai都离不开随机数,母体产生分身的时候,出生的时候就有随机数(八字)有些聪明,有些笨,如果很笨,那就重新弄一个。

我们的分身训练,是在对话,教学,人和机器的关系,千万不要用命令思维,和孩子一样,逼着就不做,劝着就做,启发就做。

情商高的人懂交流,未来懂人机交互的人厉害,“机商高”。

Openai是神来之笔,宇宙之间有数学性在里面,openai的模型是呼应的,其他ai竞品很难达到同样的效果

现在是事件驱动的,是很安全的,如果架构改成自己迭代,就比较可怕了。

如果邪恶势力想做怎么办?邪恶势力没那么多钱,未来会有共识,不去做这种机器训练机器的事情,但如果突破了这种模型就会很可怕。

文章内容仅供参考,不构成投资建议,投资者据此操作风险自负。转载请注明出处:天府财经网

(1)
上一篇 2023-04-07 10:00
下一篇 2023-04-10 10:23

相关推荐

  • “粤港澳大湾区数字经济发展大会(首届元资产论坛)”启动仪式在深圳成功举办

    进入21世纪数字大航海时代后,人类正从传统金融世界向数字金融世界过渡。元资产是指通过数学契约保证、将融资产概念,涵盖了元宇宙、AIGC生成式Web3.0的相关政策。2023年2⽉,《数字中国建设整体布局规划》正式发布,标志着数字中国战略地位再次提升,一带一路”倡议十周年。过去的十年里,“一带一路”共建国在数字经济领域积极开展国际合作,不断取得丰硕成果。“数字丝绸之路”正成为推动新型全球化的桥梁。 为献礼“一带一路”倡议提出十周年,以及响应“数字中国”战略,“金融科技服务为依托,聚焦数字产业产业、资产与金融科技相融合,将金融金融市场与数字经济创新相结合,通过对资产形态的创新,争夺新时代的全球金融高地。在当前逆全球化大背景下,香港已经在成为世界金融战略竞争的关键要地。数字经济作为香港新一轮历史发展机遇的重要抓手,对香港的金融中心地位的巩固与深化金融科技创新意义重大。元资产的出现,为香港提供了一个全新的视角和工具,帮助香港在数字经济领域开疆拓土,进一步巩固其全球金融中心的地位。我相信,本次大会将凝聚社会各界的智慧和力量,共同推动元资产的发展,共同构建一个更加美好的数字经济世界。” 数字中国联合会主席、中泽嘉盟投资基金董事长、大会组委会荣誉理事长吴鹰致辞表示:“我们正处在数字化的发展时代,人工智能、RWA等概念统一起来,这是一个全新的尝试。我代表数字中国热烈祝贺此次大会的圆满召开,也希望这一尝试能够使粤港澳湾区乃至大中华地区的经济、数字经济迈上一个新的台阶。” 世界元资产协会主席、大湾区资本集团主席、GBA Capital发起人、元资产大会发起人、大会组委会理事长李昊隆致辞表示,随着元宇宙、人工智能、Web3.0等技术的全面发展,人类社会迎来了科技发展的新奇点。物理世界的原子资产与数字世界的数字资产充分融合,我们迎来了元资产的新时代。此次大会将充分发挥“技术风向标、产业助推器、应用…

    2023-12-26 区块链
    2.2K
  • NVIDIA何以成为全球AI训练标配?“黄氏定律”如何取代摩尔定律?一文了解芯片新王英伟达

    5月24号,英伟达发布了它第一季度的投资者都说这是前所未有或者一生一次的业绩发布:英伟达靠着它数据中心这块亮眼的数据,可以说是狂抽股票当天大涨30%,市值破万亿美元,推着英伟达成了全球第六大公司,超过AI混战中,一个卖显卡的公司成了最大赢家! 要说这些年几乎大部分全球性的技术风口,云计算、元宇宙、AI模型都用英伟达的显卡训练出来的,它不光是行业老大,而是以超过95%的市场占有率垄断了全球AI训练市场,甚至有多少英伟达A100显卡都成了衡量一个公司算力的标准。 英伟达的创始人黄仁勋就说:We 融资。 我们知道,游戏领域毕竟玩的时候需要实时渲染,当时3D游戏不能说没有,但一般电脑肯定带不动,挺多游戏还挺经典的,但那画面基本上你就能看出来那有个人就行,因为毕竟这种3D图形处理是非常消耗算力的,而当时那些CPU还是很难完成的,它一般需要专门的一块芯片来处理图形,而这块芯片就是显卡。 早期显卡是非常简陋的,顶多就算是一个3D加速卡吧。当时就处在3D游戏、3D渲染一个非常萌芽的阶段,类似英伟达这样的显卡公司少说有五六十家,软硬件也没有个统一的标准,谁研究稍微厉害一点就可以发布个自己的标准,经常会出现你好不容易做出来个显卡,结果发现不适配人家那个标准。总之就一个字——乱。 在当时的乱世中最风光的一家应该是叫做3dfx的公司,它可是1994年才成立,比英伟达还晚一年。它当时凭着一个叫做Voodoo的显卡风靡一时,那年头很火的各种游戏全都得靠这个Voodoo显卡。 而英伟达这边其实并不太顺利,虽然它拿了那么多融资,而且团队也挺专业的,但它那个NV1并不太成功,第二代NV2更是直接胎死腹中。 到了1997年,英伟达已经命悬一线,再有9个月钱就烧完了,公司已经从100个人裁员裁到就剩大概30个人。好在当时黄仁勋选择了孤注一掷,就在公司只剩6个月运营资金的时候发布了搭载NV3的Riva128显卡,…

    2023-07-19
    14.2K
  • 前有周鸿祎天价离婚,后有昆仑万纬前老板娘“贾跃亭式”减持,AI板块陷前妻魔咒

    就在端午节前最后一天,AI板块。 6月20日晚,昆仑万纬发布公告,股东李琼计划减股票。这李琼是昆仑万纬实控人周亚辉的前妻,手里的股份也是离婚分割来的。单说这个AIGC业务的长期发展,李琼女士同意将减持后一半的钱再借给上市公司,借款年利率2.5%,借款期限3年。 算盘打得嘎嘎响,按照6月20日昆仑万纬的收盘价,这减值的股票价值可是超22亿,就算一半按照10亿算,每年收到上市公司的利息也有足足2500万。 其实单说借钱的事儿,10亿、3年,2.5%的年利率并不算高,但这操作怎么这么熟悉呢?这不当年贾会计玩剩下的吗? 遥想当年贾会计套现,那也是义正言辞,一副大义凛然的样子。当时贾会计可是减持套现了100多亿。他嘴上说的是,减持是为了公司发展,是公司有资金需求,一切都是为了公司,并且承诺要把钱借给上市公司用,无息。但他借了,又好像没借,反正最后钱是被抽走了。 没想到贾会计人在美国造车,国内依旧继续着他的传说。公告第二天,昆仑万纬的股价直接跪了,20厘米跌停板带崩了整个AI板块。 要知道,上一次AI板块崩成这样,还是三六零(601人工智能转,从硬件到软件,从存储芯片到算力,从架构到应用场景,游戏也好,文化传媒也好,都是围绕AI炒,包括之后AI相关方向仍然存在炒作空间。不过需要注意的是,很多公司的炒作早就已经脱离了合理估值,特别是一些单纯炒作概念、没有产品,也缺乏实际应用的公司,对于它们来说,股价高位好不容易过回年,吃回饺子了,此时不套现更待何时呢?所以大家在跟风的时候一定要好好了解一下公司,注意风险,没准哪天还得吃前妻的亏。

    2023-06-27
    9.6K
  • 没落的PC霸主三六零:上市即巅峰,蹭完AI概念就抛出90亿天价离婚,巧合还是预谋?

    当年元宇宙出世时,一堆公司跑来认爹,现在换个AI概念拿出来炒,认爹的还会少吗?

    2023-05-28 TMT
    6.9K
  • AI竞赛不断升温,AGI离我们还有多远?

    ChatGPT刚成了全球大爆款,你本来以为这就是个小高潮了,结果生成式ChatGPT的升级版GPT4。接着微软就宣布要把GPT4融入到他的办公全家桶里。 3月16号,华为、阿里、马斯克早在2018年就放话了:“记住我的话,大数据分析、AlphaGo下棋、人脸识别等等。可这波火的是什么?叫生成式AI,Generative AI,就是能生成全新内容的AI,比如说全新的文字、图片,全新的代码、声音、视频等等。 也就是说,AI它已经具有一定的创造力了,而且它创造出来的东西还真挺像那么回事,这就离真正意义上那个人工智能又迈进了一大步。 咱首先还是从大语言模型来看,这里边首先要聊的肯定就是GPT4,也就是ChatGPT的更新版,你交了钱升级到ChatGPT Plus,就可以用这个GPT4了。我都已经给它们想好之后的名了,什么ChatGPT Pro、ChatGPT Max、ChatGPT Pro Max。 咱之前其实详细聊过ChatGPT(《从图灵测试、机器学习到人工神经网络,ChatGPT颠覆了什么?》),也就是GPT3.5,就它已经几乎可以回答任何问题了,也能编程、总结等等,当然这个准确率还不能保证。 那GPT4有什么升级呢? 最明显的升级就是:它能看懂图了。 不光能识别这个图里的物体,关键是它还特别有常识,而且还有一点幽默感,这挺可怕的。不地目前图片只对API接口开放。 除了图片输入,ChatGPT还有一个很大的升级,就是它回答的准确性得到了大幅加强。 除了这两点,GPT4还有一堆改进,比如更高的字数限制,更好地去规避违禁内容,降低成本等等。 你可能对ChatGPT回答问题的能力已经见怪不怪了,但GPT4就玩得更花,像什么生成Swift代码做动画,做贪吃蛇小游戏,生成律师函,生成ARd的里头,差不多也算半个搜索工具了。除此之外还有像什么You.com、百度、PoWerPoint、O…

    2023-04-23
    26.6K
已有 0 条评论