乐火资讯百科网欢迎您!
搜索
当前所在位置: 首页>财经要闻

5天用户破百万,ChatGPT背后有何玄机?

发布时间:2023-02-13 来源:java面试教材 点击:(30125) 【 字体:

OpenAI又火了!近期许多人的朋友圈里都混进了一个让人既爱又怕的狠角色,以至于StackOverflow不得不急忙下架。

近日,OpenAI发布了聊天AI ChatGPT,短短几天,其用户量直冲百万级,甚至服务器一度被注册用户挤爆了。

这种被网友惊叹“超越谷歌搜索”的神器究竟怎么做到的?到底靠谱吗?


事件回顾

OpenAI公司日前发布了ChatGPT,这是另一个基于旗舰GPT系列的大型语言模型(LLM),是一个专门用于对话交互的模型。用户可以下载该公司的免费演示版本。

与发布的大多数大型语言模型(LLM)一样,ChatGPT的发布也引发了一些争议。在发布之后的短短几个小时内,这个新的语言模型就在Twitter上引起了轰动,用户纷纷上传ChatGPT令人印象深刻的成就或者遭遇灾难性失败的截图。

然而,从大型语言模型的广泛角度来看,ChatGPT反映了该领域短暂而丰富的历史,代表了在短短几年内取得了多大的进展,以及还有哪些基本问题有待解决。


无监督学习的梦想

无监督学习仍然是人工智能社区追求的目标之一,而互联网上有大量宝贵的知识和信息。但直到最近,其中大部分的信息都无法用于机器学习系统。大多数机器学习和深度学习应用程序都是被监督的,这意味着人类必须采集大量数据样本并对每个样本进行注释,以训练机器学习系统。


随着Transformer架构(大型语言模型的关键组件)的出现,这种情况发生了变化。可以使用大量的无标记文本语料库来训练Transformer模型。它们随机屏蔽文本的部分,并试图预测缺失的部分。通过反复执行这一操作,Transformer调整其参数,以表示大序列中不同单词之间的关系。


这已被证明是一种非常有效和可扩展的策略。不需要人工标记,就可以收集非常大的训练语料库,从而允许创建和训练越来越大的Transformer模型。研究和实验表明,随着Transformer模型和大型语言模型(LLM)的规模增大,它们可以生成更长的连贯文本序列。大型语言模型(LLM)还展示了大规模的应急能力。


回归监督学习?

大型语言模型(LLM)通常只有文本,这意味着它们缺乏试图模仿的人类丰富的多感官体验。尽管GPT-3等大型语言模型(LLM)取得了令人印象深刻的成果,但它们存在一些基本缺陷,使得它们在需要常识、逻辑、规划、推理和其他知识的任务中无法预测,而这些知识通常在文本中被省略。大型语言模型(LLM)以产生幻觉反应、生成连贯但事实上虚假的文本以及经常误解用户提示的明显意图而闻名。


通过加大模型及其训练语料库的规模,科学家们已经能够减少大型语言模型中明显错误的频率。但根本的问题并没有消失,即使是最大的大型语言模型(LLM)也会在很小的推动下犯愚蠢的错误。


如果大型语言模型(LLM)只在科学研究实验室中用于跟踪基准测试的表现,这可能不会是一个大问题。然而,随着人们对在现实应用中使用大型语言模型(LLM)越来越感兴趣,解决这些问题和其他问题变得更加重要。工程师必须确保他们的机器学习模型在不同的条件下保持健壮,并满足用户的需求和要求。


为了解决这一问题,OpenAI使用了来自人类反馈强化学习(RLHF)技术,该技术此前开发用于优化强化学习模型。人类反馈强化学习(RLHF)不是让强化学习模型随机探索其环境和行为,而是使用来自人类主管的偶尔反馈来引导代理朝正确的方向前进。人类反馈的强化学习(RLHF)的好处是,它能够以极小的人为反馈改善强化学习代理的训练。


OpenAI后来将人类反馈强化学习(RLHF)应用于InstructGPT,这是一个大型语言模型(LLM)系列,旨在更好地理解和响应用户提示中的指令。InstructGPT是一个GPT-3模型,它根据人类反馈进行了微调。


这显然是一种权衡。人工注释可能成为可扩展训练过程中的瓶颈。但通过在无监督学习和有监督学习之间找到正确的平衡,OpenAI能够获得重要的好处,包括更好地响应指令、减少有害输出和资源优化。根据OpenAI的研究结果,13亿个参数的InstructionGPT在指令跟随方面通常优于1750亿个参数GPT-3模型。


ChatGPT的训练过程

ChatGPT建立在从InstructGPT模型中获得的经验之上。人工注释器创建一组示例对话,其中包括用户提示和模型响应。这些数据用于微调构建ChatGPT所基于的GPT-3.5模型。在下一步中,将为经过微调的模型提供新的提示,并为其提供若干响应。标注人员对这些反应进行排名。然后,从这些交互中生成的数据被用于训练奖励模型,这有助于在强化学习管道中进一步微调大型语言模型(LLM)。


OpenAI尚未披露强化学习过程的全部细节,但人们很想知道这个过程的“不可扩展的成本”,也就是需要多少人力。


能在多大程度上信任ChatGPT?


ChatGPT的结果令人印象深刻。该模型已经完成了各种各样的任务,包括提供代码反馈、写诗、用不同的音调解释技术概念、为生成人工智能模型生成提示。


然而,该模型也容易出现类似大型语言模型(LLM)所犯的那种错误,例如引用不存在的论文和书籍,误解直观的物理学,以及在组合性方面失败。


人们对这些失败并不感到惊讶。ChatGPT并没有发挥什么神奇的作用,它应该遇到与它的前一代同样的问题。然而,在现实世界的应用中,可以在哪里以及在多大程度上信任它?显然,这里有一些有价值的内容,正如人们在Codex和GitHubCopilot中所看到的,大型语言模型(LLM)可以被非常有效地使用。


在这里,决定ChatGPT是否有用的是与它一起实现的工具和保护的种类。例如,ChatGPT可能成为企业创建聊天机器人的一个非常好的平台,例如编码和图形设计的数字伴侣。首先,如果它遵循InstructGPT的示例,那么应该能够以更少的参数获得复杂模型的性能,这将使它具有成本效益。此外,如果OpenAI提供了工具,使企业能够实现自己的人类反馈强化学习(RLHF)的微调,那么它可以进一步针对特定应用程序进行优化,在大多数情况下,这比聊天机器人更有用,聊天机器人可以随意谈论任何事情。最后,如果为应用程序开发人员提供了将ChatGPT与应用程序场景集成,并将其输入和输出映射到特定应用程序事件和操作的工具,他们将能够设置正确的护栏,以防止模型采取不稳定的操作。


基本上,OpenAI创造了一个强大的人工智能工具,但具有明显的缺陷。它现在需要创建正确的开发工具生态系统,以确保产品团队能够利用ChatGPT的力量。GPT-3为许多不可预测的应用开辟了道路,因此了解ChatGPT的库存会很有趣。


猜你喜欢

相关推荐

《摸心第六感》结局《我的助理不简单》姜甜和周业闻是什么关系

《摸心第六感》结局《我的助理不简单》姜甜和周业闻是什么关系
《我的助理不简单》姜甜和周业闻是前任关系,两人是彼此的初恋。 回家路上,姜甜偶然得知了关于巷子口解压馆老板小周的消息,他们说小周长得帅性格好,人人都认识他,倒是让姜甜这个从小在巷子里长大的有些尴尬。姜甜去了解压馆,却发现被粘在墙上的老板周业闻在求救,二人一阵沉默...

汽车掉头时轮胎咯噔响是什么原因?

汽车掉头时轮胎咯噔响是什么原因?
汽车掉头时轮胎咯噔响的原因是:一、驱动轮的齿轮牙齿断裂或者表面损伤,此时应该靠边停车检查,若是齿轮损坏,应该及时更换新齿轮;二、轮子的链接部件松动而导致的异响,轮子的传动有许多的齿轮,若是其中太松动,在过弯的时候会发出响声;三、部件冰冷坚硬,润滑度不够。轮胎是在各种车辆或机械上装配的接地滚动的圆环形...

乐火影视推荐《破墓》

乐火影视推荐《破墓》
<<<<<点击观看全网热门影视在线免费观看完整版电影电视剧(乐火团队整理)...

地铁发生火灾如何逃生 地铁火灾如何逃生自救

地铁发生火灾如何逃生 地铁火灾如何逃生自救
地铁发生火灾如何逃生 地铁火灾如何逃生自救导语:地铁作为现代都市中不可或缺的交通工具,其封闭性和性使得火灾一旦发生,便可能迅速蔓延,威胁到乘客的生命安全,因此,掌握正确的逃生方法至关重要,首先,当发现地铁车厢内出现火情或烟雾时,保持冷静是第一步,恐慌只会加剧混乱,降低逃生的效率,乘客应立即观察周围情况...

初中生成绩差怎么办 如何提高成绩

初中生成绩差怎么办 如何提高成绩
初中生成绩差怎么办 如何提高成绩面对初中生成绩差的问题,应该帮助孩子端正学习态度,通过引导和鼓励,让孩子明白成绩差并不可怕,关键在于不放弃和持续努力。同时,家长应该与老师合作,共同培养孩子良好的学习习惯,如克服拖延症、认真练字等,以帮助孩子专注于学习。初中生成绩差怎么办初中生成绩差不可怕。可怕的是自暴...

高端医疗装备国产化提速

高端医疗装备国产化提速
  近年来,我国科技创新能力大幅提升,正式迈入创新型国家行列。其中,医疗技术尤其是高端医疗装备的发展是创新能力提升的重要表现。先进的医疗设备提升了医疗效率,提高了医疗质量。当前,我国高端医疗设备市场规模不断扩大,相关技术和产业发展迅速。  从进口到出口  前不久举办的深圳国际高性能医疗器械展上,世界...

鹿客发布全球旗舰新品掌心锁V5 大师设计刷掌秒开

鹿客发布全球旗舰新品掌心锁V5 大师设计刷掌秒开
  3月21日,国内智能门锁企业鹿客科技在杭州运河文化发布中心举办鹿客2023全球旗舰新品发布会,正式发布其高端旗舰新品掌心锁V5 系列——V5 Max和V5 Pro,官方售价分别为3999元和3499元。据悉,鹿客掌心锁V5已于3月10日在京东、天猫、抖音渠道开启预售,预售仅7天销售额就突破1000万元。  作为鹿客全球高端旗舰产品,掌...

暑假教育部推荐中小学阅读书单

暑假教育部推荐中小学阅读书单
1. 《活了100万次的猫》:描写了生与死、以及爱2. 《帕西爷爷有办法》:影响英国三代人成长的爱心绘本3. 《丢饭团的笑婆子》:1973美国凯迪克金奖的获奖作品4. 《獾的礼物》:如何接受亲人离开你5. 《魔奇魔奇树》:愛与勇气6. 《市场街最后一站》:从日常的生活中,获得幸福滋养的能力7. 《打架的艺术》:推荐给喜欢打架的男孩爆笑...

首批皮革化学品检测方法团体标准发布

首批皮革化学品检测方法团体标准发布
  记者日前从中国皮革协会获悉,经过大量的基础性研究、征求行业意见以及多次专家研讨审定,标准内容不断完善。8月2日,中国皮革协会正式批准发布《制革用聚(甲基)丙烯酸树脂复鞣剂测试方法》(T/CLIAS008-2023)、《制革用氨基树脂复鞣剂测试方法》(T/CLIAS009-2023)、《制革用中和剂测试方法》(T/CLIAS010-2023)、...

车速是不是越慢越好 开慢车对汽车有损伤吗

车速是不是越慢越好 开慢车对汽车有损伤吗
快慢是相对的,不是绝对的。快也许会危险,慢一样会出大事。不要用快慢来决定是否安全,按照规矩来,遵守交规才最安全。记住这句话,以后开车保你安全。千万别用快慢来决定,会害了你的。下面具体来了解一下吧!车速是不是越慢越好开慢车并不安全,尤其在高速公路上,过低的车速会导致车辆之间过大的速度差,这样往往比超速...
返回顶部