前言

今天给大家分享斯坦福大学最近的一项研究,探讨了如何利用LLMs从头开始撰写基础、结构良好的长篇文章,达到与维基百科页面相当的广度和深度。(后文有代码结果示例!)

Assisting in Writing Wikipedia-like Articles From Scratch with Large Language Models

我们研究如何应用大型语言模型从头开始编写扎根且有组织的长篇文章,其广度和深度与维基百科页面相当。这个尚未充分探讨的问题在写作前阶段提出了新的挑战,包括如何在写作前研究主题并准备大纲。我们提出了STORM ,一种通过检索和多视角提问来合成主题大纲的写作系统。STORM 通过以下方式对预写作阶段进行建模:(1) 在研究给定主题时发现不同的观点,(2) 模拟对话,持不同观点的作者向基于可信互联网来源的主题专家提出问题,(3) 整理收集到的信息创建一个轮廓。为了进行评估,我们构造了 FreshWiki(最新高质量维基百科文章的数据集),并制定了大纲评估来评估预写作阶段。我们进一步收集经验丰富的维基百科编辑的反馈。与由大纲驱动的检索增强基线生成的文章相比,STORM 的更多文章被认为是有组织的(绝对增加了 25%)并且覆盖范围广泛(增加了 10%)。专家反馈还有助于识别生成接地气的长文章的新挑战,例如来源偏见转移和不相关事实的过度关联。

先整出来一个大纲,然后再写作。但是,这事儿说起来容易做起来难,因为你得先了解一大堆信息,然后才能写出大纲来。

当给定一个主题之后,它先去网上搜一堆类似主题的维基百科文章,然后琢磨出不同的视角。这样,它就能从多个角度提出问题,而不是只停留在表面。

接下来,STORM会模拟一场对话,就像两个人聊天一样。一边是“作家”,其实就是STORM自己,另一边是“专家”,这个专家是一个基于RAG的回答过程。

在对话中,STORM会根据话题、自己的视角和之前的对话内容,提出问题。然后,它会把这些问题变成搜索关键词,去找答案。找到的答案还得过一遍筛子,确保来源靠谱。

找到答案后,STORM会整理一下,形成一个答案。这个答案不仅会用来回应问题,还会存起来,以后写文章的时候用得上。

聊了一大堆后,STORM就对话题了解得差不多了。这时候,它会开始写大纲。先根据自己的理解,弄一个初步的版本,然后再结合之前的对话,把大纲做得更完整。

最后,在预写阶段创建的大纲和收集的参考资料的基础上,逐段撰写全文。每段都会根据语义相似性从参考资料中检索相关信息,并生成带有引用的文本。

在langgraph的tutorial中,已经有了这个算法的教程(虽然论文是上个月出的~,这也是上周推文中提到的agent是否要用框架一方面把。)

代码地址见后文,具体内容不复制了,可以看看例子,

输入:“百万级上下文窗口语言模型对检索增强生成(RAG)的影响” 初始大纲:

扩展后很复杂:

最后写的有那味道了:

最后的最后

感谢你们的阅读和喜欢,作为一位在一线互联网行业奋斗多年的老兵,我深知在这个瞬息万变的技术领域中,持续学习和进步的重要性。

为了帮助更多热爱技术、渴望成长的朋友,我特别整理了一份涵盖大模型领域的宝贵资料集。

这些资料不仅是我多年积累的心血结晶,也是我在行业一线实战经验的总结。

这些学习资料不仅深入浅出,而且非常实用,让大家系统而高效地掌握AI大模型的各个知识点。如果你愿意花时间沉下心来学习,相信它们一定能为你提供实质性的帮助。

这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

大模型知识脑图

为了成为更好的 AI大模型 开发者,这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
在这里插入图片描述

经典书籍阅读

阅读AI大模型经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验。对于想要深入学习AI大模型开发的读者来说,阅读经典书籍是非常有必要的。

在这里插入图片描述

实战案例

光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

在这里插入图片描述

面试资料

我们学习AI大模型必然是想找到高薪的工作,下面这些面试题都是总结当前最新、最热、最高频的面试题,并且每道题都有详细的答案,面试前刷完这套面试题资料,小小offer,不在话下

在这里插入图片描述

640套AI大模型报告合集

这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。

在这里插入图片描述

这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

Logo

Agent 垂直技术社区,欢迎活跃、内容共建,欢迎商务合作。wx: diudiu5555

更多推荐