在这篇文章中,我们将以实战为导向,详细探讨如何实现一个Agent。我们选用的是LangChain框架,并将带领你从零到一地构建一个完整的Agent。然而,在深入了解如何利用LangChain实现Agent之前,我们需要先了解一些基本概念。

概念

在LangChain系统中,Agent扮演着关键的角色。它是一个决策链,由语言模型和提示驱动,决定下一步的行动。Agent接收三种主要输入:可用调用的函数(Tools)、高级目标(User input)以及为实现目标先前执行的操作与工具输出对(intermediate_steps)。基于这些信息,Agent产生下一步的行动或者最终响应。

为了表达行动,我们使用AgentAction数据类,其中包括应调用的工具名称(tool)和该工具的输入(tool_input)。当任务完成时,Agent会生成AgentFinish数据类,包含一个需要返回给用户的字典(return_values)。

LangChain提供了许多内置的Agent和工具以便使用。不同的Agent具有不同的prompting styles,不同的输入编码方式以及不同的输出解析方式。

AgentExecutor则负责运行Agent,执行所选操作,并将操作结果反馈给Agent。如果遇到复杂情况,如选择不存在的工具、工具错误、无法解析的输出等,AgentExecutor也会进行处理。

以下是其工作流程的伪代码, 可以看到内部是个循环:

next_action = agent.get_action(...)         while next_action != AgentFinish:		        observation = run(next_action)                next_action = agent.get_action(..., next_action, observation)     return next_action   

总结来说,代理的工作原理是:使用语言模型来决定接下来的操作(AgentAction),当完成任务时产生结束信号(AgentFinish),并通过记录先前的操作和输出(intermediate_steps)来进行未来的迭代决策。

AgentExecutor 类是LangChain中主要的agent runtime,除此之外,也支持其它实验中的runtimes,比如Plan-and-execute Agent、Baby AGI、Auto GPT。

浅尝辄止

from langchain.agents.output_parsers import OpenAIFunctionsAgentOutputParser   from langchain.agents.format_scratchpad import format_to_openai_function_messages   from langchain.prompts import ChatPromptTemplate, MessagesPlaceholder   from langchain.tools.render import format_tool_to_openai_function   from langchain.chat_models import ChatOpenAI         from langchain_core.tools import tool            llm = ChatOpenAI(model="gpt-3.5-turbo", temperature=0)      prompt = ChatPromptTemplate.from_messages(       [           ("system",            "You are very powerful assistant, but bad at calculating lengths of words.",            ),           ("user",            "{input}"),           MessagesPlaceholder(               variable_name="agent_scratchpad"),       ])      # 定义tool   @tool   def get_weather(city: str) -> str:       """Returns the weather of a city."""       return "hot"         tools = [get_weather]   # tool 集成, 使用format_tool_to_openai_function将工具函数格式化为OpenAI函数格式   llm_with_tools = llm.bind(       functions=[           format_tool_to_openai_function(t) for t in tools])         agent = (       {           "input": lambda x: x["input"],           "agent_scratchpad": lambda x: format_to_openai_function_messages(               x["intermediate_steps"]           ),       }       | prompt       | llm_with_tools       | OpenAIFunctionsAgentOutputParser()   )      agent.invoke({"input": "What's the weather like in Shanghai?", "intermediate_steps": []})   

执行之后最终的输出是一个包含有关调用的工具(get_weather)以及相应消息记录的AgentActionMessageLog:

`{     "tool": "get_weather",     "tool_input": {       "city": "Shanghai"     },     "log": "\nInvoking: `get_weather` with `{'city': 'Shanghai'}`\n\n\n",     "message_log": [       {         "AIMessage": {           "content": "",           "additional_kwargs": {             "function_call": {               "arguments": "{\"city\":\"Shanghai\"}",               "name": "get_weather"             }           },           "response_metadata": {             "token_usage": {               "completion_tokens": 15,               "prompt_tokens": 59,               "total_tokens": 74             },             "model_name": "gpt-3.5-turbo",             "system_fingerprint": null,             "finish_reason": "function_call",             "logprobs": null           },           "id": "run-9f4a819c-178b-4294-95d7-9988555526a0-0"         }       }     ]   }      `

我们接下来解释一下这段代码中的关键部分:

  • format_to_openai_function_messages函数用于将中间步骤的信息转化为适合发送给模型的格式。

  • OpenAIFunctionsAgentOutputParser负责将模型输出的消息解析为AgentAction/AgentFinish

  • 虽然我们构建的提示看起来非常简单,其实这得益于OpenAI的Function Calling的优秀性能。在创建提示时,我们只需依赖用户的输入(input)和先前工具调用的结果(agent_scratchpad),无需提供复杂的指令给LLM

  • 每次模型的输入都是一个字典,有两个键inputintermediate_steps,分别代表用户输入和中间步骤结果。这两个键的值通过lambda函数,传入agent 组件第一步的 "input""agent_scratchpad"中(字典表示并行执行)

自定义粗糙的runtime

上面返回的结果只是调用工具的信息,我们可以拿到调用信息后在本地进行函数调用,将结果再给llm让llm进行回答。

from langchain_core.agents import AgentFinish      user_input = "What's the weather like in Shanghai?"   intermediate_steps = []   while True:       output = agent.invoke(           {               "input": user_input,               "intermediate_steps": intermediate_steps,           }       )       if isinstance(output, AgentFinish):           final_result = output.return_values["output"]           break       else:           print(f"TOOL NAME: {output.tool}")           print(f"TOOL INPUT: {output.tool_input}")           tool = {"get_word_length": get_word_length}[output.tool]           observation = tool.run(output.tool_input)           intermediate_steps.append((output, observation))   print(final_result)   

输出结果如下:

TOOL NAME: get_weather   TOOL INPUT: {'city': 'Shanghai'}   The weather in Shanghai is hot.   

其中intermediate_steps被format更OpenAI的数据格式如下:

[     {       "AIMessage": {         "content": "",         "additional_kwargs": {           "function_call": {             "arguments": "{\"city\":\"Shanghai\"}",             "name": "get_weather"           }         },         "response_metadata": {           "token_usage": {             "completion_tokens": 16,             "prompt_tokens": 69,             "total_tokens": 85           },           "model_name": "gpt-3.5-turbo",           "system_fingerprint": None,           "finish_reason": "function_call",           "logprobs": None         },         "id": "run-f7cd175e-9a04-45b8-b028-dda48e91b108-0"       }     },     {       "FunctionMessage": {         "content": "hot",         "name": "get_weather"       }       }   ]      

使用AgentExecutor

使用AgentExecutor可以简化这一过程,并且它提供了一些改进的功能,比如帮忙管理intermediate_steps等。使用也很简单,只需要在创建AgentExecutor对象时捆绑agent和tools就行。

from langchain.agents import AgentExecutor      agent_executor = AgentExecutor(agent=agent, tools=tools, verbose=True)   agent_executor.invoke({"input": "What's the weather like in Shanghai"})      

执行结果如下:

`> Entering new AgentExecutor chain...      Invoking: `get_weather` with `{'city': 'Shanghai'}`         hotThe weather in Shanghai is hot.      > Finished chain.   {'input': "What's the weather like in Shanghai", 'output': 'The weather in Shanghai is hot.'}   `

Adding memory

虽然我们现在的agent能够正常运行,但是它无法记住先前的交互信息,这是因为它是“无状态”的。为了解决这个问题,我们可以添加一个内存(memory)机制。具体步骤如下:

  1. 在构建提示(prompt)时,添加一个名为memory的变量,这个变量将保存agent之前的交互信息。

  2. 设计一种方法来跟踪和更新聊天历史记录(chat history)。

from langchain.prompts import MessagesPlaceholder      MEMORY_KEY = "chat_history"   prompt = ChatPromptTemplate.from_messages(       [           (               "system",               "You are very powerful assistant.",           ),           MessagesPlaceholder(variable_name=MEMORY_KEY),           ("user", "{input}"),           MessagesPlaceholder(variable_name="agent_scratchpad"),       ]   )      from langchain_core.messages import AIMessage, HumanMessage      chat_history = []      agent = (       # 第一个组件的输入字典,多了一个"chat_history"键, 用于传给prompt           {               "input": lambda x: x["input"],               "agent_scratchpad": lambda x: format_to_openai_function_messages(                   x["intermediate_steps"]               ),               "chat_history": lambda x: x["chat_history"],           }           | prompt           | llm_with_tools           | OpenAIFunctionsAgentOutputParser()   )   agent_executor = AgentExecutor(agent=agent, tools=tools, verbose=True)      input1 = "What's the weather like in Dangtu"   result = agent_executor.invoke({"input": input1, "chat_history": chat_history})   chat_history.extend(       [           HumanMessage(content=input1),           AIMessage(content=result["output"]),       ]   )   print(agent_executor.invoke({"input": "is that a real city?", "chat_history": chat_history}))   

输出结果如下:

`> Entering new AgentExecutor chain...      Invoking: `get_weather` with `{'city': 'Dangtu'}`         hotThe weather in Dangtu is currently hot.      > Finished chain.         > Entering new AgentExecutor chain...   Yes, Dangtu is a real city. It is located in Anhui Province, China. If you would like, I can provide the current weather information for Dangtu.      > Finished chain.   {'input': 'is that a real city?', 'chat_history': [HumanMessage(content="What's the weather like in Dangtu"), AIMessage(content='The weather in Dangtu is currently hot.')], 'output': 'Yes, Dangtu is a real city. It is located in Anhui Province, China. If you would like, I can provide the current weather information for Dangtu.'}      `

如果希望每次对话时自动将chat_history添加到memory中,可以在创建AgentExecutor对象时,启用memory:

from langchain.memory import ConversationBufferMemory      memory = ConversationBufferMemory()   agent_executor = AgentExecutor(agent=agent, tools=tools, memory=memory, verbose=True)   

ReAct实战

from langchain import hub   from langchain.agents.format_scratchpad import format_log_to_str   from langchain.tools.render import render_text_description   from langchain.agents.output_parsers import JSONAgentOutputParser   from langchain.agents import initialize_agent, AgentType   from langchain.chat_models import ChatOpenAI      llm = ChatOpenAI(model="gpt-4o", temperature=0)      prompt = hub.pull("hwchase17/react-chat-json")   prompt = prompt.partial(       tools=render_text_description(tools),       tool_names=", ".join([t.name for t in tools]),   )      # 我们需要额外的指导,否则模型有时会忘记如何回应TEMPLATE_TOOL_RESPONSE = """TOOL RESPONSE:    ---------------------   {observation}      USER'S INPUT   --------------------      Okay, so what is the response to my last comment? If using information obtained from the tools you must mention it explicitly without mentioning the tool names - I have forgotten all TOOL RESPONSES! Remember to respond with a markdown code snippet of a json blob with a single action, and NOTHING else - even if you just want to respond to the user. Do NOT respond with anything except a JSON snippet no matter what!"""         llm_with_stop = llm.bind(stop=["\nObservation"])      # 创建了一个代理的管道,其中包含了输入处理、prompt、LLM和输出解析器   agent = (           {               "input": lambda x: x["input"],               "agent_scratchpad": lambda x: format_log_to_messages(               x["intermediate_steps"], template_tool_response=TEMPLATE_TOOL_RESPONSE           ),           }           | prompt           | llm_with_stop           | JSONAgentOutputParser()   )         agent_executor = initialize_agent(       tools, llm, agent=AgentType.ZERO_SHOT_REACT_DESCRIPTION, verbose=True   )   print(agent_executor.invoke("What's the weather like in Shanghai?"))   

输出结果如下:

> Entering new AgentExecutor chain...   Shanghai is a large city in China, and its weather can vary. To provide an accurate answer, I need to check the current weather conditions.      Action: get_weather   Action Input: Shanghai   Observation: hot   Thought:I now know the final answer.      Final Answer: The weather in Shanghai is currently hot.      > Finished chain.   {'input': "What's the weather like in Shanghai?", 'output': 'The weather in Shanghai is currently hot.'}   

上面的代码使用的模型是chat models,也可以换成LLMs,只是prompt和解析器不一样而已。

我们可以加上debug来看看具体的调用流程:

from langchain.globals import set_debug      set_debug(True)   

为了防止我们的代理陷入无限循环,我们可以设置一个max_iterations参数来限制代理的迭代次数。默认情况下,代理将返回一个预设的字符串作为其输出。然而,如果您希望代理在达到最大迭代次数后能生成更具意义的响应,您可以选择使用generate方法。此时,代理将在完成所有迭代后,利用语言模型(LLM)生成一个与用户输入相关且自然的回复。

initialize_agent(       tools,       llm,       agent=AgentType.OPENAI_FUNCTIONS,       verbose=True,       max_iterations=3,       early_stopping_method="generate",   )   

那么,如何系统的去学习大模型LLM?

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

作为一名热心肠的互联网老兵,我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在大模型的学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。

但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

所有资料 ⚡️ ,朋友们如果有需要全套 《AI大模型入门+进阶学习资源包**》,扫码获取~

篇幅有限,部分资料如下:

👉LLM大模型学习指南+路线汇总👈

💥大模型入门要点,扫盲必看!
在这里插入图片描述
💥既然要系统的学习大模型,那么学习路线是必不可少的,这份路线能帮助你快速梳理知识,形成自己的体系。

路线图很大就不一一展示了 (文末领取)
在这里插入图片描述

👉大模型入门实战训练👈

💥光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

👉国内企业大模型落地应用案例👈

💥两本《中国大模型落地应用案例集》 收录了近两年151个优秀的大模型落地应用案例,这些案例覆盖了金融、医疗、教育、交通、制造等众多领域,无论是对于大模型技术的研究者,还是对于希望了解大模型技术在实际业务中如何应用的业内人士,都具有很高的参考价值。 (文末领取)
在这里插入图片描述

👉GitHub海量高星开源项目👈

💥收集整理了海量的开源项目,地址、代码、文档等等全都下载共享给大家一起学习!
在这里插入图片描述

👉LLM大模型学习视频👈

💥观看零基础学习书籍和视频,看书籍和视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。 (文末领取)
在这里插入图片描述

👉640份大模型行业报告(持续更新)👈

💥包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。
在这里插入图片描述

👉获取方式:

这份完整版的大模型 LLM 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

😝有需要的小伙伴,可以Vx扫描下方二维码免费领取🆓

Logo

Agent 垂直技术社区,欢迎活跃、内容共建。

更多推荐