Posts tagged with #Agent

6 posts found

基于 Vercel AI SDK 设计 Agent2OpenCode 协议

> 最近实现了一个使用 Opencode 作为 TUI 前端的 CLI 应用,之后会记录一下这期间的一些设计思路和实现细节。 和 Langchain、LlamaIndex 等框架不同,Vercel AI SDK 是一个**面向前端/UI的框架**,它解决了如何将大模型的输出优雅地在前端/UI中渲染出来的问题。 在 Vercel AI SDK 中,所有的模型...

ONNX 模型推理

在给一个 Chat Agent 做内容过滤的时候使用了 ONNX 做小模型推理,这里记录一下。 ONNX 是一个适合做静态任务推理的模型。比如内容过滤场景,模型只需要 forward 一次就出结果,对这种任务,ONNX 可以生成优化后的静态计算图。由于图是静态的, ONNX 可以在加载模型时就做好一系列的优化、加载模型和推理速度都快很多。 使用如下命令导入模型: ```bash pip...

Resouce Context 管理

之前的 Drive MCP 设计中提到了 Resource,这里记录一下在实际使用 Resource 过程中遇到的问题:在用户 Attach File 后,我们使用前面说的 MCP Client 获取 Resource,然后把上下文 attach 到 system prompt 中: ```ts private async resolveResourceUris( uris:...

Drive MCP 设计

在封装 Drive Agent 的 Tool 调用时想到了使用 MCP,因为 MCP 是统一的协议、可以让我们的 Tool 被内置 Agent 外的东西通过 MCP Client 访问。比如实现完成后在 Copilot 访问 Drive 内文件: <Image src={image_2026_03_05_09_11_42} alt="alt text" /> <Image...

Agent 任务队列与消息发送设计

在前面搭建了最基本的 Agent 架构后,我们使用任务队列和 Redis Pub/Sub 来处理 Agent 的执行流程与消息发送。 使用任务队列和 Redis Pub/Sub 的具体方式如下: 1. 用户发送一个消息后,API 将任务入队然后返回 taskId,具体的完成交给 Worker。 2...

Drive Agent 设计

> 这是第一次设计这种比较完整的 Agent 系统并集成到实际应用中,因此记录一下实现 Google Drive Clone 的 Agent 部分的设计。 > LLM 调用直接使用 URL fetch 访问 Deepseek API,并且全部未使用 Agent 框架、直接手搓实现,之后可能会用框架重构一下。 Agent 包含的模块和交互流程如下: ```mermaid graph TD...