大模型+知识库学习

参考:基于知识库和 LLM 的问答系统经验分享 - 知乎 (zhihu.com)

一、基于LLM的问答系统架构

比较常见的开源 LLM 的问答系统都会遵循下图这种结构去进行设计:

加载文件 -> 读取文本 -> 文本分割 -> 文本向量化 -> 问句向量化 -> 在文本向量中匹配出与问句向量最相似的 top k个 -> 匹配出的文本作为上下文和问题一起添加到 prompt中 -> 提交给 LLM生成回答。

相关推荐

  1. 模型+知识库学习

    2024-04-12 08:54:03       39 阅读
  2. AGI = 模型 + 知识图谱 + 强化学习

    2024-04-12 08:54:03       66 阅读
  3. 模型提示学习、Prompting微调知识

    2024-04-12 08:54:03       44 阅读
  4. 模型Tokenizer知识

    2024-04-12 08:54:03       57 阅读
  5. AI模型学习

    2024-04-12 08:54:03       40 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-04-12 08:54:03       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-04-12 08:54:03       100 阅读
  3. 在Django里面运行非项目文件

    2024-04-12 08:54:03       82 阅读
  4. Python语言-面向对象

    2024-04-12 08:54:03       91 阅读

热门阅读

  1. .Net Core/.Net 6/.Net 8,一个简易的消息队列

    2024-04-12 08:54:03       41 阅读
  2. SQL注入sqli_labs靶场第九、十题

    2024-04-12 08:54:03       45 阅读
  3. Node.js模块的导出

    2024-04-12 08:54:03       174 阅读
  4. 机器人规划算法——A*算法

    2024-04-12 08:54:03       160 阅读
  5. GitHub 与 Git 的区别

    2024-04-12 08:54:03       45 阅读
  6. STM32 文档整理

    2024-04-12 08:54:03       30 阅读