news 2026/7/8 12:20:52

0707——RAG实现demo功能拓展

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
0707——RAG实现demo功能拓展

1,扩展后rag整体

语义分块模型 gemma【添加】:2b:PDF 原始长文本 → 完整语义 Chunk(预处理一次性调用)

嵌入模型 mxbai-embed-large:Chunk → 语义向量(入库、检索提问时调用)

生成大模型 deepseek-r1:1.5b:检索上下文 + 问题 → 自然语言回答(对话阶段调用) 三者各司其职,互不替代、互不兼任核心任务。

2,需要准确分块(chunk)的原因:向量嵌入模型存在最大输入长度限制,一段上万字完整文本无法一次性送入模型生成向量,必须切割;同时:单个 Chunk 必须承载完整独立知识点,避免一个知识点被拆分到两个块,导致检索丢失上下文;块不能过小:单句碎片化,丢失上下文语义;块不能过大:包含多个无关知识点,向量语义混杂,检索匹配准确率下降。

3,流程串行顺序: PDF 原文 → 独立分块小模型(识别语义断点、切割完整知识块) → 干净语义 Chunk → mxbai-embed-large 向量模型生成向量入库

实现后全链路理解:程序先把 PDF 英语课本交给 Gemma 按课文知识点自动拆成一小段一小段,再把 txt 文档按固定重叠长度切开;所有片段全部转成数字向量存好;你提问时,程序先把问题也转成向量,找出课本 + txt 里最贴合你问题的 2 段原文,再把原文和问题一起发给 DeepSeek 大模型,让它只能照着原文给答案,不知道就如实说无法回答,全程不会乱编内容。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/7/8 12:19:06

6DOF IMU运动数据采集系统设计与优化

1. 项目背景与硬件选型解析在运动数据采集领域,6自由度惯性测量单元(6DOF IMU)因其能够同时检测线性加速度和角速度的特性,成为姿态识别、运动追踪等应用的核心器件。本次项目采用Bosch BMI160传感器与Microchip PIC32MX695F512L微控制器的组合方案&…

作者头像 李华
网站建设 2026/7/8 12:18:34

IIM-20670运动传感器与STM32F303ZE硬件适配方案

1. IIM-20670运动传感器深度解析 IIM-20670是TDK InvenSense推出的一款高性能6轴运动跟踪传感器,集成了三轴陀螺仪和三轴加速度计。这款传感器采用专利的CMOS-MEMS制造工艺,在4x4x0.9mm的紧凑封装内实现了工业级性能指标。 1.1 核心性能参数 陀螺仪部分…

作者头像 李华
网站建设 2026/7/8 12:17:51

PostgreSQL 18 主从架构实战:3步配置流复制,实现读写分离与高可用

PostgreSQL 18 主从架构实战:3步配置流复制,实现读写分离与高可用在当今数据驱动的业务环境中,数据库的高可用性和读写分离能力已成为企业级应用的标配。PostgreSQL 18 作为最新版本的开源关系型数据库,其流复制功能为企业提供了稳…

作者头像 李华
网站建设 2026/7/8 12:12:38

开服装店三年,我总结了同城引流的6个核心经验

同城流量,是所有实体服装店老板这两年最焦虑的事。以前靠地段、靠发传单,现在顾客都在短视频平台上刷到别人家的新款,再跑到店里试穿,试完又去网上搜同款。如果店里没有持续的线上曝光,连进店的人都会越来越少。我自己…

作者头像 李华
网站建设 2026/7/8 12:12:08

TDA7468与PIC18F2525音频控制系统设计与优化

1. 音频控制芯片组合方案概述在音频处理领域,TDA7468和PIC18F2525的组合堪称经典搭配。TDA7468是意法半导体(ST)推出的一款专业级音频处理器芯片,具有输入选择、音量控制、音调调节等完整功能;而PIC18F2525则是Microchip公司生产的高性能8位微…

作者头像 李华