大型语言模型是怎么炼成的
引言:在一个多月前的Microsoft Build 微软开发者大会上,OpenAI的科学家Andrej Karpathy做了个关于LLM(大型语言模型)是怎么训练的,有什么特点,以及如何从中获得更好结果的演讲" State of GPT" 。
做过的事,走过的路,都写在这里。
选一个手上的问题,从一篇实践开始。
AI工具、独立开发、内容创作,边读边动手。
引言:在一个多月前的Microsoft Build 微软开发者大会上,OpenAI的科学家Andrej Karpathy做了个关于LLM(大型语言模型)是怎么训练的,有什么特点,以及如何从中获得更好结果的演讲" State of GPT" 。
之前在即刻上有人问了我个问题,说如果不考虑钱的话,我会选择做什么?这个问题的答案在我的内心其实有过变化,最开始是「思想者」,后面变成了「创作者」。一个是纯动脑子就好,不用为结果负责;另一个则是要把手弄脏,你需要去真正地创造。
ChatGPT最擅长的能力之一便是写作了,但是现在大众还是普遍认为用AI写作论文、作文等规范化文章的能力还可以,但如果是诗歌、散文、小说,那AI可生成的文本还是太公式化,太平淡无味缺乏「人味」了。这种批评不无道理,但我始终认为写不好跟我们提供的prompt不够好有关。
前情提要,查看这个章节的时候,你应该已经知道ChatGPT是什么,只是想知道该怎么用了。省流版结论是:
粗略估算,我与ChatGPT已经累计对话超过200万字了,有写文章/论文/小说/诗歌、写游戏/网站代码、定营销方案、翻译、制定旅行计划、生成MidJourney prompt关键词等数十种不同的使用场景。
中文互联网最新最深度ChatGPT一手使用心得,发现ChatGPT成熟了,会自己改代码的人..
前段时间,字节跳动做搜索的新闻出来后,免不了会被拿去同百度比较,许多人对头条搜索业务的关注重心放在了能不能击败百度上。
1、别做那个只手拿铁锤的人巴菲特的合伙人查理·芒格最爱说的一句话是“在手里拿着铁锤的人看来,这世界就是钉子。
拼多多、趣头条、Luckin coffee在最近一年多来先后刷新国内企业最快上市记录,他们的共同秘密是什么?
拼多多在2018年的活跃买家数达到4.19亿,不及淘宝,但已超过京东,在用户规模上已坐稳国内电商平台的第二把交椅。
在2018年12月12日的腾讯年会上,张小龙在他的发言中提到“互联网的本质是消除信息不对称”,但互联网世界上并未实质上消除信息不对称,甚至带来了更多的信息不对称问题。