Datawhale all-in-rag 实战:芥末罗氏虾食谱的 RAG 结构化知识库构建与智能问答
教程人工智能大模型RAG【免费下载链接】all-in-rag大模型应用开发实战一RAG 技术全栈指南在线阅读地址https://datawhalechina.github.io/all-in-rag/项目地址https://gitcode.com/datawhalechina/all-in-rag点击查看免费下载芥末罗氏虾是一道以罗氏虾为主料、以青芥末与黄油为核心调味灵魂的家常菜鲜香入味、芥末风味十足、吃完吮指且操作十分简单。在本仓库的 Datawhale「尝尝咸淡」食谱 RAG 系统C8 项目中这道菜谱以 Markdown 文档形式存放于 data/C8/cook/dishes/meat_dish/芥末罗氏虾/芥末罗氏虾.md是知识库中荤菜分类、难度中等的一篇典型结构化菜谱。读完本文你将掌握这道菜从食材配比到出锅的全部操作细节同时理解该菜谱在 RAG 流水线中如何被加载、抽取元数据、按 Markdown 标题分块并最终通过查询路由、混合检索与分步生成被 LLM 以结构化菜谱答案的形式回答给用户。本文以芥末罗氏虾菜谱为实例结合 code/C8 的源码实现讲解菜谱文档 → 元数据增强 → 结构化分块 → 向量索引 → 混合检索 → 生成的完整链路。一、菜品概述与难度定位芥末罗氏虾本菜品可替换成任意虾种类包括但不限于基围虾、花虾、黑虎虾等替换后风味依然成立。预估烹饪难度为★★★三星属于中等难度。在 RAG 系统中难度星级不是摆设。从 data_preparation.py 的源码可以看到系统使用正则表达式re.search(r★, content)精确匹配文档中的连续星号数量并建立映射关系星级数量难度标签★★★★★5 个非常困难★★★★4 个困难★★★3 个中等★★2 个简单★1 个非常简单因此芥末罗氏虾★★★在知识库中被自动标记为中等难度DIFFICULTY_LABELS即[非常简单, 简单, 中等, 困难, 非常困难]见 data_preparation.py。当用户提问有哪些中等难度的荤菜时系统会据此做元数据过滤检索。二、必备原料与工具罗氏虾可替换为基围虾、花虾、黑虎虾等任意虾类蒜青芥末生抽生粉胡椒粉白糖蚝油盐小米辣不吃辣可不放或替换成红菜椒黄油食用油三、用量计算每份约 2 人份原料用量用途说明罗氏虾250g主料蒜1-2 个蒜蓉爆香青芥末20g用于碗汁提供灵魂风味生粉10g用于碗汁起芡增稠生抽30g用于碗汁咸鲜打底胡椒粉5g用于碗汁去腥提香白糖3g用于碗汁提鲜平衡辣味蚝油15g用于碗汁增鲜挂汁盐3g用于碗汁基础调味小米辣1-2 个增辣配色可选黄油20g赋予奶香与焦香食用油80ml煎虾用油量化配比是这份菜谱最实用的部分所有调料芥末、生抽、生粉、胡椒粉、白糖、蚝油、盐统一收进碗汁一次兑好、一次下锅既保证味道均衡也让新手操作更从容。四、详细操作步骤1. 处理虾将虾从背部切开去除虾线和沙袋。也可从腹部切开——炸出来会胀开成菜比较漂亮。用清水洗干净控干水分后可拍上生粉也可不拍。拍粉的目的是煎炸时表面更酥脆、汁水更易挂上。2. 蒜蓉及碗汁处理将 2 颗大蒜切成蒜末。准备碗汁放入生抽、蚝油、白糖、胡椒粉、盐依据个人口味挤入芥末加清水稀释后加入生粉化开。芥末的用量可按个人耐受度调整青芥末的辛辣会在加热后柔和许多。3. 炒制过程锅热倒入食用油大概能覆盖锅底。放入控干水分的罗氏虾慢慢煎制。虾油煎出来后判断标准锅中出现大量气泡加入准备好的蒜蓉及小米辣。闻到蒜蓉的香味后加入黄油。黄油融化后翻拌均匀加入准备好的碗汁。盖锅盖焖煮2 分钟待汤汁浓稠后出锅。4. 注意事项黄油入锅后不宜炸制太久融化翻拌均匀即可烹入碗汁。黄油含有乳固体长时间高温会焦化发苦破坏芥末风味的清爽感。五、从菜谱文档到 RAG 知识库源码级链路解析这份 Markdown 菜谱不只是给人看的它是 code/C8 食谱 RAG 系统主入口 main.py知识库中的一份父文档。整体链路如下5.1 文档加载与元数据增强DataPreparationModule.load_documents 会递归扫描data_path默认../../data/C8/cook见 config.py下所有*.md文件按 UTF-8 读取原始 Markdown 内容并用文件相对路径的 MD5 生成确定性parent_id。随后 _enhance_metadata 对每篇文档自动补充三类元数据分类category通过路径目录名匹配CATEGORY_MAPPING芥末罗氏虾位于dishes/meat_dish/目录下因此被标记为荤菜菜名dish_name取文件名主干即芥末罗氏虾难度difficulty按上文星级映射解析为中等。5.2 Markdown 结构感知分块_markdown_header_split 使用MarkdownHeaderTextSplitter按#、##、###三级标题分割strip_headersFalse保留标题便于 LLM 理解上下文并建立子块 → 父文档的parent_child_map映射。芥末罗氏虾这篇文档会被切分为必备原料和工具计算操作附加内容等结构块每个子块携带chunk_id、parent_id、chunk_index等元数据供后续子块检索后回取完整父文档get_parent_documents会按命中块数去重排序见 data_preparation.py。5.3 向量索引与混合检索分块后的子文档由 IndexConstructionModule 使用BAAI/bge-small-zh-v1.5嵌入模型normalize_embeddingsTrue构建 FAISS 向量索引。回答问题时RetrievalOptimizationModule.hybrid_search 会同时执行向量检索与 BM25 检索并用RRFReciprocal Rank Fusionk60融合重排最终取top_k3默认配置见 config.py个子块。若用户提问中包含荤菜中等等关键词main.py 的 _extract_filters_from_query 还会自动附加元数据过滤条件走metadata_filtered_search精确圈定菜谱范围。5.4 查询路由与分步生成GenerationIntegrationModule 通过query_router将问题分为三类list推荐菜品、detail具体做法、general一般问题。当你问芥末罗氏虾怎么做时系统判定为detail类型检索命中本菜谱后会调用generate_step_by_step_answer使用菜品介绍 / 所需食材 / 制作步骤 / 制作技巧的分步模板生成答案——这个模板结构见 generation_integration.py与本菜谱必备原料 → 计算 → 操作 → 附加内容的文档骨架天然对应LLM 会优先采用原文中的实用技巧如黄油不宜久炸。六、动手运行与提问示例在设置好MOONSHOT_API_KEY环境变量后从code/C8目录运行python main.py即可启动交互式问答参考 main.py。针对芥末罗氏虾可以尝试以下问题芥末罗氏虾怎么做 →detail路由分步指导有哪些中等难度的荤菜 → 元数据过滤 列表推荐推荐几个简单的水产菜 → 分类与难度双重过滤。系统会依次打印查询路由类型、检索到的文档块如芥末罗氏虾(操作)、匹配文档名称再以流式或整段方式输出 LLM 生成的菜谱回答。七、总结芥末罗氏虾是一份结构规范、量化清晰、步骤可复现的中等难度荤菜菜谱。它在 Datawhale all-in-rag 的 C8 食谱 RAG 系统中不仅是一份烹饪文档更是一个可被自动标注分类与难度、按 Markdown 标题结构化分块、经混合检索与查询路由后由 LLM 精准作答的知识库单元。理解了这篇菜谱从文件到答案的全链路你就掌握了该项目数据准备 → 索引构建 → 检索优化 → 生成集成四模块的核心用法可以继续用同一套流程探索仓库中其余数百份菜谱如 干煸仔鸡、蒜蓉虾 等或参考 chapter8 文档 了解该系统的完整架构设计。赞分享教程人工智能大模型RAG【免费下载链接】all-in-rag大模型应用开发实战一RAG 技术全栈指南在线阅读地址https://datawhalechina.github.io/all-in-rag/项目地址https://gitcode.com/datawhalechina/all-in-rag点击查看免费下载相关推荐芥末黄油罗氏虾全解析从厨房火候细节到 all-in-rag 菜谱知识库的构建与检索实战芥末黄油罗氏虾全解析从厨房火候细节到 all in rag 菜谱知识库的构建与检索实战 本篇文章以 all in rag 仓库 code/C8 https:/教程人工智能大模型RAGDatawhale all-in-rag 食谱知识库实战从「美式炒蛋」看结构化食谱的 RAG 检索与生成Datawhale all in rag 食谱知识库实战从「美式炒蛋」看结构化食谱的 RAG 检索与生成 导读 本文以 all in rag 项目 C8 章食教程人工智能大模型RAG小龙虾菜谱的结构化数据与 RAG 智能问答all-in-rag 菜品知识库实战剖析小龙虾菜谱的结构化数据与 RAG 智能问答all in rag 菜品知识库实战剖析 本篇技术指南以 小龙虾菜谱 https://link.gitcode.co教程人工智能大模型RAG创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

相关新闻

convex-backend 自托管版本演进全解:从初版发布到 MySQL、S3 与 MCP 支持的迭代路线图

convex-backend 自托管版本演进全解:从初版发布到 MySQL、S3 与 MCP 支持的迭代路线图

数据库后端 【免费下载链接】convex-backend The open-source reactive database for app developers 项目地址: https://gitcode.com/gh_mirrors/co/convex-backend 点击查看 免费下载 导读 convex-backend 是 Convex 开源响应式数据库的官方自托管实现&#xff…

2026/9/24 9:07:17 阅读更多 →
Visual Studio Installer Projects实战:从零构建MSI安装包

Visual Studio Installer Projects实战:从零构建MSI安装包

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/24 9:07:17 阅读更多 →
飞控四巨头:Pixhawk、PX4、APM与ArduPilot关系详解

飞控四巨头:Pixhawk、PX4、APM与ArduPilot关系详解

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/24 9:07:17 阅读更多 →

最新新闻

G6 Fishbone Layout 实战指南:在 @antv/g6 中用鱼骨图布局呈现因果与层次数据

G6 Fishbone Layout 实战指南:在 @antv/g6 中用鱼骨图布局呈现因果与层次数据

数据可视化前端图表库 【免费下载链接】G6 ♾ A Graph Visualization Framework in JavaScript. 项目地址: https://gitcode.com/gh_mirrors/g6/G6 点击查看 免费下载 Fishbone Layout(鱼骨图布局)是 antv/g6 内置的一种层次化图布局&#x…

2026/9/24 9:46:54 阅读更多 →
PaddleSpeech SpeechFeaturizer 源码级解析:统一语音特征与文本特征提取前端

PaddleSpeech SpeechFeaturizer 源码级解析:统一语音特征与文本特征提取前端

人工智能语音音频NLP媒体生成 【免费下载链接】PaddleSpeech Easy-to-use Speech Toolkit including Self-Supervised Learning model, SOTA/Streaming ASR with punctuation, Streaming TTS with text frontend, Speaker Verification System, End-to-End Speech Translation …

2026/9/24 9:46:53 阅读更多 →
ESP32 应用平台:基于 WebAssembly 实现固件动态加载应用

ESP32 应用平台:基于 WebAssembly 实现固件动态加载应用

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/24 9:45:53 阅读更多 →
Photogimp for Windows:让GIMP秒变Photoshop的免费配置方案

Photogimp for Windows:让GIMP秒变Photoshop的免费配置方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/24 9:45:53 阅读更多 →
洛谷-入门-B2059

洛谷-入门-B2059

这是我在洛谷刷的第59道题。#include<stdio.h> int main() { int m,n,i,num0; scanf("%d %d",&m,&n); for(im;i<n;i) {if(i%2!0){numi; } } printf("%d",num);return 0; }反思&#xff1a; 余2做为判断。

2026/9/24 9:45:53 阅读更多 →
DeepSeek医疗私有化部署实战:从病历NLP到vLLM结构化流水线

DeepSeek医疗私有化部署实战:从病历NLP到vLLM结构化流水线

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/24 9:45:53 阅读更多 →

日新闻

基于YOLOv8的渔船作业监控系统:从环境搭建到边缘部署全流程

基于YOLOv8的渔船作业监控系统:从环境搭建到边缘部署全流程

简介&#xff1a;这是一套面向计算机、人工智能、自动化等专业学生与教师的毕业设计级项目资源&#xff0c;围绕YOLOv8实现渔船作业监控系统&#xff0c;可用于毕设、课程设计、大作业或项目立项演示。压缩包共97个文件&#xff0c;约24.21MB&#xff0c;以70个Python源码文件为…

2026/9/24 0:00:19 阅读更多 →
单细胞注释实战:基于Scanpy的标记基因与参考映射流程解析

单细胞注释实战:基于Scanpy的标记基因与参考映射流程解析

简介&#xff1a;一份基于单细胞RNA测序数据的细胞类型注释算法研究Python毕业设计源码&#xff0c;针对计算机相关专业正在做毕设或需要项目实战的学习者&#xff0c;可用于课程设计与期末大作业。项目代码完整、经导师指导评审通过&#xff0c;可直接运行&#xff0c;覆盖数据…

2026/9/24 0:00:19 阅读更多 →
C#源生成器实战:用增量生成器替代反射,告别AOT崩溃

C#源生成器实战:用增量生成器替代反射,告别AOT崩溃

第一次在项目里被反射卡住&#xff0c;是在一个老旧的WinForms模块里&#xff1a;几十个类依赖PropertyChanged通知&#xff0c;运行时反射读属性、发通知&#xff0c;每次启动慢半拍不说&#xff0c;一上.NET Native/AOT裁剪模式几乎全面崩盘。后来我把这段逻辑全部改成C#源生…

2026/9/24 0:00:19 阅读更多 →

周新闻

Flutter for OpenHarmony游戏卡片渐变背景实战:从原理到性能优化

Flutter for OpenHarmony游戏卡片渐变背景实战:从原理到性能优化

直接铺开项目本身吧。这几个月我一直在折腾一件事&#xff1a;用Flutter给OpenHarmony做一款游戏集合类的App&#xff0c;说白了就是把若干小游戏塞进一个壳里&#xff0c;用统一入口分发。这个方向本身不算新鲜&#xff0c;真正让我花了不少心思的&#xff0c;是首页那堆游戏卡…

2026/9/23 4:55:02 阅读更多 →
Word表格编号全攻略:从列表编号到题注交叉引用

Word表格编号全攻略:从列表编号到题注交叉引用

写Word文档&#xff0c;最让人头疼的往往是那些“看起来不起眼”的小问题。比如表格编号这事&#xff1a;今天在表后面多加了两个空白行&#xff0c;明天给客户交稿前发现整个章节的编号全部错位&#xff0c;光是挨个改序号就能耗掉大半个下午。我前阵子帮人整理一份上百页的技…

2026/9/24 9:10:42 阅读更多 →
从第一个站到第二个站:独立开发者的静态网站选型与落地实践

从第一个站到第二个站:独立开发者的静态网站选型与落地实践

1. 项目概述1.1 核心需求解析做独立开发者这几年&#xff0c;说实话&#xff0c;第一个网站上线的那天晚上我兴奋得没睡着。但等它跑了半年&#xff0c;流量惨淡、功能臃肿、代码自己都懒得看第二遍之后&#xff0c;我才慢慢琢磨明白一个道理&#xff1a;第一个网站是练手&…

2026/9/23 9:53:41 阅读更多 →

月新闻

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践&#xff1a;原型怎样变成可用功能分类&#xff1a;[AI/大模型]细分主题&#xff1a;AI 增强型 CI/CD 流水线自动化与 GitOps 实践&#xff1a;Agent 工作流、工具调用与任务拆解&#xff1a;从原型到生产的验收清单很多团队在尝试用大…

2026/9/23 9:53:40 阅读更多 →
容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战&#xff1a;复盘记录怎样真正派上用场分类&#xff1a;[工程技术]细分主题&#xff1a;Kubernetes 生产环境运维与排障实战&#xff1a;可复制的项目复盘模板与决策记录大部分团队的事故复盘报告&#xff0c;最后都变成了躺在 Confluence 或钉…

2026/9/23 9:53:40 阅读更多 →
容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步

容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步

容器 容器化技术与镜像安全管理&#xff1a;核心链路应该先拆哪一步分类&#xff1a;[工程技术]细分主题&#xff1a;Docker 容器化技术与镜像安全管理&#xff1a;核心链路的逐步实现与关键代码取舍面对一个积累了五六年历史包袱的单体架构应用&#xff08;包含 Web 接口、后台…

2026/9/23 9:53:40 阅读更多 →