知
AI 应用与 Agent从能力边界到可评估的 Agent266 分钟14 节5 个模块

AI 应用与 Agent 从 0 到 1

从跑通第一次调用讲起:能力边界与成本、上下文工程与 RAG、工具调用、规划与记忆,再到评估、可观测、安全与上线。不绑定具体框架,讲判断与代价。

读完之后你能

  • 说清模型能力边界、token 成本与降级策略
  • 搭出可评估的 RAG 与工具调用链路
  • 用评估集与 trace 定位效果问题而不是盲目调 prompt
  • 识别 prompt injection、工具越权与数据泄露风险

适合谁

  • 有前后端基础、想转 AI 应用开发的开发者
  • 在做 LLM 产品、需要补齐工程与评估能力的人

读前准备

  • 至少熟悉一门语言,会写 HTTP 接口与 JSON
  • 了解基本的数据库与缓存概念
已读 0 / 140%

目录

建议按顺序阅读,每节末尾可跳转到对应题目自测

模块一 · 能力边界与成本

0 / 3
  1. 01

    起步:先跑通一次调用,再做第一个 RAG

    不亲手跑一遍,"上下文""工具调用""评估"都只是名词。这一节从拿到 key 开始,把一次请求、一次带资料的请求、一次结构化输出全部跑通。

    19 分钟
  2. 02

    模型在做什么,以及它一定会在哪里错

    不理解模型的"补全"本质,就会把可靠性问题当成提示词问题。这一节把四类必错场景说清,并给出把它们移出模型的兜底方案。

    19 分钟
  3. 03

    模型选型、token 账与降级策略

    选型不看榜单,看你自己那 100 条样本。这一节给出成本与延迟的拆解方法、一份能算清的账,以及大小模型的分工与降级链。

    19 分钟

模块二 · 上下文工程

0 / 3
  1. 04

    RAG 全链路:解析、切分、召回、拼装

    RAG 不是"接个向量库",而是四个环节各有一半的失败率。这一节按链路拆开讲,并给出一条能跑起来的最小实现路径。

    19 分钟
  2. 05

    检索质量:为什么接上向量库还是不好用

    向量检索擅长语义,不擅长精确;同类文档还会互相挤占。这一节把失效模式、混合检索、重排与元数据过滤讲成一套可验证的做法。

    19 分钟
  3. 06

    上下文预算:压缩、缓存与结构化状态

    把上下文窗口当成"预算"而不是"容量",是长会话系统能跑住的前提。这一节给出优先级顺序、四种压缩手段,以及不能压缩的部分。

    19 分钟

模块三 · Agent 内核

0 / 3
  1. 07

    工具调用:别把模型当成可信执行者

    工具调用的本质是"模型提请求、系统做决定"。这一节把 schema 设计、服务端校验、结构化错误与权限边界讲成一条能落地的链路。

    19 分钟
  2. 08

    规划与重试:让 Agent 能收敛

    Agent 真正的难点不是"会调工具",而是"知道什么时候停"。这一节讲两种规划范式、重试的边界、死循环的根治,以及中断后的恢复。

    19 分钟
  3. 09

    状态与记忆:三种记忆别混成一个向量库

    对话记忆、工作流状态、长期记忆,生命周期完全不同。混着存的结果是又贵又乱,还查不出问题。

    19 分钟

模块四 · 质量与生产

0 / 3
  1. 10

    评估:没有回归集,改 prompt 就是在赌

    模型输出有随机性,"试一下感觉不错"不是评估。这一节给出三层评估、评估集怎么建、judge 的偏差与缓解,以及灰度该看什么。

    19 分钟
  2. 11

    可观测:一次请求五步,怎么定位到哪一步坏了

    传统日志是散的,Agent 的链路是多步的。这一节给出 trace/span 的记录方式、三个高频故障的定位路径,以及把线上问题转成评估样本的闭环。

    19 分钟
  3. 12

    安全与权限:注入挡不住,所以要把边界画在外面

    提示词层面的防御只能降低概率。真正的安全来自权限设计——即使注入成功,模型也做不了坏事。这一节讲清四类攻击面与三层防线。

    19 分钟

模块五 · AI 协作与表达

0 / 2
  1. 13

    AI 协作与代码评审:Agent 代码怎么审

    Agent 的失败模式不是报错,而是"静默做错事"。这一节给出上下文里必须多写的两样东西,以及五个必须在代码里检查的点。

    19 分钟
  2. 14

    面试表达:把 Agent 项目讲成判断与代价

    AI 应用的面试最怕"讲了一堆技术名词,说不清效果怎么来的"。这一节给出四步骨架、五个高频题的答法,以及转行叙事的写法。

    19 分钟