周鸿祎谈大模型:企业和行业专用GPT是未来方向。

频道:快讯 日期: 浏览:154

  


  在新书《超越好奇》发布会上,周鸿祎分享了他对ChatGPT的看法:


  一、中国企业要先赶上,不能掉队。在训练自己的大语言模型的过程中,肯定会踩到很多坑,遇到很多问题。在解决它的过程中,我们会积累对这件事的真正理解。


  2、软件到了一定的程度,数据为王。通过各种开源模型的训练,我们发现最终的效果越来越和算法无关,和你用什么数据进行预训练和强化监督学习有关系。


  3. 背景很重要。只要互联网公司把自己的场景和微软“全家桶”这样的大语言模型充分结合起来,我们在商业化、产品化、场景化、各种应用等方面应该不弱于美国。


  4、未来行业向纵深发展,垂直模式会更多。现在的GPT知识广度广,但是深度不够,经常说一些正确的废话。企业、行业乃至个人GPT是未来的发展趋势。比如彭博社训练了一个金融投资的GPT。