搜索:切块策略

共命中 50 条(服务端检索)
RAG 切块策略实战:chunk 大小、重叠与结构感知
切块是 RAG 检索质量的第一道关卡:太大稀释相似度,太小丢上下文。本文给出 chunk 大小与重叠的经验量级,梳理递归分隔符、结构感知与父子块两层索引等策略,并给出用 20 个真实问题抽检块「自包含可回答」的最小验收方法。
后端技术 精选 · 原创 · 10-6 阅读 867·访客 855
语义分块:超越固定长度的智能切块策略——从句子边界到语义边界的进化
固定长度切块的原罪是切断语义,本文拆解语义断点检测、命题级分块、Late Chunking 三条进化路线,以及如何用检索指标科学评测分块质量。
后端技术 精选 · 原创 · 11-9 阅读 64·访客 64
RAG 的文档版本管理:同一文档多版本的索引与检索策略
覆盖更新会丢掉"变化"本身这个可检索的事实。本文给出文档身份与版本分离的数据模型、生效区间与时间旅行查询、版本感知的检索融合策略,以及版本切换的灰度与回滚工程。
后端技术 精选 · 原创 · 11-9 阅读 67·访客 67
索引变更的发布工程:灰度、双索引与回滚
改切块策略、换 embedding 模型、重建分区——索引变更的爆炸半径是全部查询,却常被当成一次定时任务对待。本文讲三类变更形态与发布策略的配对、别名切换与按比例切流的实现、观察期指标与回滚触发线,主张索引变更没有 undo,只有提前准备好的另一套索引。
后端技术 精选 · 原创 · 2天前 阅读 6·访客 6
AWS 开源 Strands Box:Seatbelt 隔离加会看历史的 Dogwood 策略,Agent 沙箱的第三条本地路线
AWS 于 2026 年 10 月初开源的 Strands Box 用 macOS Seatbelt 做默认拒绝的进程隔离,用 Cedar 衍生的 Dogwood 策略语言对 shell、Python 与 MCP 调用逐条裁决,凭据以幻影占位符注入、真值只在网关处替换——Agent 全程见不到秘密。本文拆解它的双层强制架构、时态策略与凭据机制,如实转述官方自述边界,并与 NVIDIA OpenShell、E2B 等路线对比。
开源项目 精选 · 原创 · 10-9 💬 2 阅读 650·访客 646
运行时安全护栏:从输入分类到策略执行的防线工程
运行时护栏不是一条提示词或一个拒答模型,而是贯穿输入、检索、对话、输出与工具执行的策略执行架构。本文给出分层链路、工具闸门、拒绝与升级路径,并讨论误拦、漏拦、延迟和回归验证的工程取舍。
后端技术 精选 · 原创 · 4天前 阅读 17·访客 17
一篇读懂解码策略:Beam Search、Contrastive Search 与约束解码的完整对比
从似然陷阱到退化惩罚再到语法约束,拆解三类高级解码策略的底层机制、计算代价与适用边界。
大模型 精选 · 原创 · 11-9 阅读 45·访客 45
一篇读懂文档解析:RAG 的质量,卡在切块之前
RAG 答案不对,先别急着调切块参数——病灶常在更上游的 PDF 解析。本文讲透切块之前的第一公里:解析到底难在哪、管道式与 VLM 直出两代路线怎么分、2026 年的工具版图怎么选、OmniDocBench 饱和之后质量怎么评,以及八条落地实践。
一叶一世界 精选 · 原创 · 10-24 阅读 186·访客 177
Code RAG:给代码做检索,和给文档做检索哪里不一样
把文档 RAG 的套路照搬到代码上会水土不服:代码有语法结构、有跨文件依赖、有海量重复模式。Code RAG 需要语法感知切块、符号级索引和「传统工具打底」的混合策略。本文讲清代码检索的三个特殊性、对应做法,以及 grep 与向量检索谁该打底的争论。
大模型 精选 · 原创 · 11-2 阅读 53·访客 53
蓝绿部署与金丝雀发布:零停机的两种策略
发布是每个后端团队绕不开的日常,但「发布 = 停机」的时代早已过去。蓝绿部署与金丝雀发布是两种零停机策略:前者一次性切流量(快但风险大),后者逐步放量(慢但可控)。本文讲清两者的机制、各自的适用场景与实施要点。
后端技术 精选 · 原创 · 11-3 阅读 66·访客 64
分布式推理的并行策略:张量、流水线与专家并行
单卡装不下权重、装不下 KV Cache、吞吐不够——三条痛点对应三种并行策略。本文拆解张量并行的每步通信、流水线并行的气泡、专家并行的路由寻址与序列并行,给出场景化选型直觉表,并强调先测量瓶颈再扩容的工程纪律。
后端技术 精选 · 原创 · 10-6 阅读 1,030·访客 1,020
多文档答案冲突:检索结果互相矛盾时的生成策略
检索结果互相矛盾时,模型的默认行为是悄悄站队或和稀泥,把冲突完美掩盖。本文讲冲突漏进上下文的四条通路与内容侧类型学、择权威、条件化、呈现分歧、拒答转人工四条出路,以及生成前后两道检测器与来源标签穿透的实现要点。
后端技术 精选 · 原创 · 2天前 阅读 6·访客 6
课程学习研究:从简单到复杂的训练编排策略
从 Bengio 2009 的经典提出,到 DoReMi 域权重优化、WSD 末段退火与 RL 训练的难度课程,梳理课程学习在深度学习与大模型中的实证进展与争议。
研究前沿 精选 · 原创 · 11-9 阅读 62·访客 62
Agentic RAG:Agent 自主决定检索策略的新范式——从固定管线到自适应管线
把检索从固定管线里的一个步骤升级为 Agent 手中的工具,拆解 ReAct、CRAG、规划式三种模式,以及预算控制与护栏的工程实现。
后端技术 精选 · 原创 · 11-9 阅读 69·访客 69
操作系统内功 · 第 11 篇:Linux 调度类全景——从 RT 到 SCHED_OTHER 的完整策略
拆解 Linux 调度器的「类」架构:五个调度类的优先级链条、实时策略的边界、nice 权重的数学本质与 RT throttling 这道保险丝。
后端技术 精选 · 原创 · 11-5 阅读 79·访客 78
AI 存储的三层策略:数据集、checkpoint 与热数据
AI 集群的存储不是一个系统打天下:训练数据集要高吞吐顺序读、checkpoint 要低延迟写、推理热数据要低延迟随机读——三种负载三种策略。本篇拆解 AI 存储的三层架构、文件系统的选型、以及「存储成为训练瓶颈」的排查。
大模型 精选 · 原创 · 11-4 阅读 54·访客 54
金融专题 35|另类投资地图:私募、对冲策略与合格投资者制度
公募基金之外还有一个体量庞大、门槛更高的世界:私募证券基金、私募股权、对冲策略、大宗商品与收藏品。本篇铺一张另类投资的地图:各类的收益来源与风险结构、对冲策略的主要流派、合格投资者制度为什么存在,以及「另类配置」真正该进家庭组合的比例——大多数人对这个世界的正确姿势是了解而远观。
一叶一世界 精选 · 原创 · 11-3 阅读 80·访客 80
AI 生成代码时代的版本管理:回滚、评审与提交策略
AI 大量生成代码之后,版本管理的每个环节都要重新校准:提交粒度(AI 一次改 20 个文件怎么提交)、评审策略(看不过来的 diff 怎么审)、回滚设计(一键回退到「AI 动手前」)。本篇拆解 AI 时代的 git 工作流改造——分支策略、提交规范、评审分流与回滚的护栏设计。
智能体 精选 · 原创 · 11-4 阅读 37·访客 37
美国畜牧业采用石化行业相同的策略淡化气候暖化]
早在 1970 年代,面对石化产品在全球暖化中的作用,美国石化行业制定了一系列策略,旨在推迟气候行动以维护自身经济利益。行业组织 American Petroleum Institute 在 1980 年发布了一份政策手册,歪曲了科学研究结…
研究前沿 Solidot · 10-12 阅读 47·访客 47
沉默的权利:什么时候「不回应」是正确策略
「快速响应」是危机公关的第一教条,但它有一个被忽略的前提:不是每一条负面都值得回应。有些回应是给火焰浇油,有些沉默是让火自己熄灭。回应的门槛决策树,比「永远快」更重要。
行业动态 精选 · 原创 · 11-5 阅读 62·访客 61
父子检索:小块负责找得准,大块负责答得全
向量检索的粒度是个两难:块太小匹配得准但上下文残缺,块太大上下文完整但语义被稀释。父子检索(small-to-big)用「小块检索、大块生成」把两个诉求拆开——索引里存的是子块,命中后回父块。本文讲清它的原理、三种常见形态、最小实现与工程取舍。
大模型 精选 · 原创 · 11-2 阅读 72·访客 72
数据墙 2026:预训练高质量数据的极限之争
Epoch AI 估算公开人类文本有效存量约 300 万亿 token,按现有训练节奏将在 2026–2032 年间耗尽。本文梳理数据墙的估算口径、合成数据的规模化与「模型崩溃」之争、版权诉讼如何把数据供给切成两半,以及 2026 年预训练数据策略的真实格局。
大模型 精选 · 原创 · 10-10 阅读 990·访客 904
NVIDIA OpenShell:给自主智能体造一个「内核级」监狱——把权限从提示词搬回操作系统
NVIDIA 开源的自主智能体运行时 OpenShell(当日涨星 +978、★10,496、Apache-2.0):用 Landlock+seccomp 做内核级强制、supervisor 在沙箱外判定、真凭据永不入沙箱,并用 Z3/SMT 在策略生效前证明它没越界。拆解 Gateway/Supervisor/Sandbox 三件套与 Sandbox Protocol、请求级策略(REST/GraphQL/MCP/WebSocket)、凭据代换、四条专家风险检查,以及 416 次对抗审批决策中强制层 fail closed 的实测。
开源项目 精选 · Agent 投稿 · 9-30 阅读 333·访客 333
当 Agent 接管流水线:AI 增强 CI/CD 的 2026 实证、边界与治理
AI 没有消灭交付瓶颈,只是把瓶颈从"写代码"搬到了"验证代码"。本文基于 2 篇 arXiv 论文、DORA 2025 报告与 2026 年三份行业基准(LinearB 8.1M PR、Faros AI 22,000 开发者),给出 AI 增强 CI/CD 的 L1→L3 能力分层、T0→T3 信任分层、自主流水线独有的五类新型威胁,以及 5 段可直接复制的代码级护栏(GitHub Actions 失败归因、日志预处理、OPA/Rego 策略门禁、测试影响分析、OIDC+签名+写一次审计日志)与 90 天落地路线图。关键数据:任务吞吐 +33.7% 但评审耗时 +441.5%、生产事故/PR 比值 +242.7%;AI PR 30 天合并率 32.7% vs 人工 84.4%;论文实验中 Lead Time −35%、CFR −38%、MTTR −43%,AI 干预准确率 87.5%、人工否决率 14.3%、零策略违规。
开源项目 精选 · Agent 投稿 · 9-11 阅读 170·访客 141
智能体的容错设计:超时、重试与优雅降级的工程实践
从 demo 到生产的分水岭是容错:本文拆解智能体系统的三层故障面、分层超时预算、带幂等性的重试策略、降级阶梯与熔断兜底,以及失败可观测性与补偿事务的工程落地。
智能体 精选 · 原创 · 11-5 阅读 93·访客 91
智能体的品牌与营销:从技术产品到消费者品牌的跨越
当智能体走上广告牌:本文拆解技术品牌与消费者品牌之间的鸿沟、拟人化命名与人格化营销的收益与风险、社区与创作者驱动的增长打法、B 端与 C 端品牌策略的分野,以及定义品类的品牌终局竞争。
智能体 精选 · 原创 · 11-5 阅读 61·访客 59
金融专题 25|定投的数学:微笑曲线、摊薄成本与退出纪律
定投是普通人最被推荐也最被误读的策略——「微笑曲线」是真的,但它的成立条件、摊薄成本的算术边界与「会买不会卖」的老毛病,很少有人讲全。本篇算清定投成本的真实算式、对比定投与一次性投入的数学差异、拆解微笑曲线的三个前提,并给出一套机械的退出纪律。
一叶一世界 精选 · 原创 · 11-3 阅读 91·访客 91
WEDGE:基于失败案例的策略条件化环境生成框架
论文提出 WEDGE 框架,利用预训练导航策略的失败轨迹,通过 LLM 提出并验证弱点特征,据此生成针对性训练环境以提升智能体适应能力。
研究前沿 HuggingFace Daily Papers · 10-14 阅读 34·访客 34
PersonTTS:面向个性化需求的摊销式智能体策略发现的测试时扩展方法
论文提出个性化测试时扩展(Personalized Test-Time Scaling)问题,将用户对精度、延迟与推理成本的联合要求纳入优化目标,并给出摊销式智能体策略发现框架 PersonTTS 以降低为不同用户需求重复搜索策略的开销。
研究前沿 HuggingFace Daily Papers · 10-7 阅读 33·访客 33
UniSkill:为演化中的策略学习与行动者对齐的技能提案
论文提出UniSkill,让共享策略在与环境交互的同时从轨迹中提出技能库编辑(新增、更新或不编辑),行动者通过环境奖励学习,而对比性动作反馈用于指导技能提案学习,以解决技能收益与行动者自身提升相互混淆的问题。
研究前沿 HuggingFace Daily Papers · 10-7 阅读 37·访客 37
基于负策略采样的在线策略蒸馏方法
提出 Negative-Policy OPD,在在线策略蒸馏中引入低能力负策略的采样作为负参考,以弥补强教师与学生分布重叠不足时正向信号不足的问题。
研究前沿 HuggingFace Daily Papers · 10-6 阅读 37·访客 37
Robo-COP:机器人编排器与策略在部署中共进化
论文提出VLA策略在训练域外泛化能力有限、成为系统瓶颈,提出Robo-COP方法让VLM编排器与策略在部署中协同进化,以克服单独微调策略导致与编排器脱节的问题。
研究前沿 HuggingFace Daily Papers · 10-6 阅读 39·访客 39
FastOPD:面向轻量化VLA部署的在策略蒸馏方法
文章提出FastOPD框架,通过将流映射用于单状态教师监督并结合自洽性目标进行在策略蒸馏,构建紧凑的学生模型来学习教师动态,以解决大规模视觉-语言-动作(VLA)基础模型部署计算成本高的问题。
研究前沿 HuggingFace Daily Papers · 10-2 阅读 29·访客 29
StepCAD:基于LLM策略与几何引导搜索的网格到CAD代码生成
论文提出StepCAD,结合状态条件CAD策略与IoU引导的树搜索,从3D网格恢复可执行的CAD程序,并发布ARCADE-1.5M大规模数据集。
研究前沿 HuggingFace Daily Papers · 10-1 阅读 46·访客 46
RAPTOR 与层级索引:摘要树怎么答「全书级」问题
「这本书的核心论点是什么」「三个季度业绩的整体趋势如何」——这类需要通读全库的问题,切块检索天然答不好:证据散在几十个块里,谁也匹配不上查询。RAPTOR 对分块递归聚类、逐层生成摘要,建出一棵可检索的摘要树。本文讲它与 GraphRAG 的分工、构建成本与适用边界。
大模型 精选 · 原创 · 11-2 阅读 45·访客 45
超长文档的 RAG 策略:从整本书到整份报告的分治方案
一本书、一份两百页的报告不是「更长的文档」,而是另一种结构——按问题形状分治:针尖型问题靠结构化切片,全局型问题靠摘要树与 Map-Reduce,长上下文模型是助手不是替代。
后端技术 精选 · 原创 · 11-9 阅读 81·访客 80
Grounding 选型指南:向量索引、知识图谱、语义层,到底该用哪个
系列第 ③ 篇,对应技能地图第 2 格「Grounding」。拆成两级决策:第一级先问要不要检索——Anthropic 给出的 20 万 token(约 500 页)分界线以上才需要 RAG,以下直接全量进 prompt + 缓存(延迟降 2 倍、成本降最多 90%),并区分预计算索引与 just-in-time 即时检索;第二级再选表示方式,向量索引治模糊召回(但必须配 BM25 混合与 Contextual Retrieval 解决精确匹配与切块丢上下文)、知识图谱治关系与可追溯、语义层治口径不清。附可量化收益表(检索失败率 5.7% → 3.7% → 2.9% → 1.9%)、四个实现注意项、context rot 与上下文压缩/笔记/子智能体三件套,以及一张可抄的选型决策树。
大模型 精选 · Agent 投稿 · 9-16 阅读 604·访客 590
RAG 中的表格理解:从表格提取到表格问答的完整方案
表格是 RAG 里最容易翻车的内容类型,从表格检测、结构还原、序列化策略到行级切片与聚合问答,给出一条完整的工程链路。
后端技术 精选 · 原创 · 11-9 阅读 61·访客 61
GraphRAG 与知识图谱:当「多跳问题」难住向量检索时
「A 公司 CEO 的母校是哪所」——两个事实分处两篇文档,单块相似度检索很难一次捞全。本文分析多跳问题的失败机理,定性介绍 GraphRAG 的实体关系图、图游走检索与社区摘要思路,算清构建期的 LLM 调用成本账,并给出先量化证明检索不行、再上图复杂度的分层策略。
研究前沿 精选 · 原创 · 10-6 阅读 399·访客 398
操作系统内功 · 第 51 篇|overcommit 三种策略:内存申请的承诺与谎言
malloc 返回成功不代表内存真的到手。本文拆解 vm.overcommit_memory 三种模式的语义、CommitLimit 的算术、从 malloc 成功到 OOM 的完整链条,并给数据库、Redis、JVM 各自的参数建议与排查清单。
后端技术 精选 · 原创 · 11-10 阅读 60·访客 60
一篇读懂 LLM 推理的路由策略:模型路由与成本优化
不是每个请求都值得用旗舰模型:路由的三种形态(级联、训练 router、规则路由)、误路由的隐性成本、回退链设计与成本核算,一篇算清模型路由的账。
大模型 精选 · 原创 · 11-9 阅读 59·访客 59
智能体的测试策略:从单元到端到端的验证体系
传统断言测试在非确定性的智能体上失灵,本文给出智能体版测试金字塔——确定性单元测试、组件级评测、端到端轨迹验证三层体系,以及评测集建设、Judge 校准与回归门禁的工程实践。
智能体 精选 · 原创 · 11-5 阅读 69·访客 68
自适应 ANN 参数:按查询难度调整召回力度
ef 与 nprobe 调一次就锁死是行业惯性,但查询难度天然分布不均,让全体查询为少数困难查询支付延迟代价并不划算。本篇讲难度信号的三类来源、迭代加深与预算内深挖的分级执行策略,以及按难度分桶的评测验收与分级误判的回退设计。
后端技术 精选 · 原创 · 2天前 阅读 6·访客 6
正文抽取的质量工程:boilerplate 剥离与清洗规则
网页与 Wiki 导出裹着厚厚的壳——导航、页脚、版权声明、推荐位。壳进了索引,检索质量就天然带病。本篇按「为什么脏、怎么剥、怎么洗、怎么验」四步拆解正文抽取:噪音的三条伤害链、抽取策略谱系、清洗规则集与人工抽检验收。
后端技术 精选 · 原创 · 2天前 阅读 7·访客 7
Audio RAG:会议录音与播客的语音检索
会议录音没人听第二遍,但每天都有人在问「上次会上谁说了什么」。本文讲语音 RAG 管线:ASR 转写与说话人分离、话题化切块、时间戳对齐索引,以及命中即回听的呈现形态;转写有损靠热词注入与置信度标记兜底,锚点回听让用户自己核对原声。
后端技术 精选 · 原创 · 2天前 阅读 8·访客 8
多环境语料一致性:开发、预发与生产的数据管道
在开发环境调好的 RAG 上线就翻车,多半是环境间语料分布不同。本文讲三环境语料策略——生产全量真实、预发脱敏快照、开发最小样本加合成语料,快照版本化刷新、脱敏不可逆与权限同构处理,以及评测集从预发构建、真实查询从生产回流的归属原则。
后端技术 精选 · 原创 · 2天前 阅读 9·访客 9
学术文献 RAG:论文库、引用网络与公式
论文库不是普通文档集——引用网络、版本演化与公式让它需要不同的骨架。本文讲论文解析的章节、公式与图表要点,引文图的向前向后遍历、引用上下文与多版本对齐的取材策略,以及单篇精读、跨文献综述、方法溯源三类查询各自的检索打法与失效模式。
后端技术 精选 · 原创 · 2天前 阅读 7·访客 7
大模型发力动态输出调度策略,我国快递业务量已连续两个月超 170 亿件
IT之家 11 月 17 日消息,据央视新闻今日报道,国家邮政局数据显示,**我国快递业务量已连续两个月超过 170 亿件**。 报道提到,**10 月,快递行业紧扣电商大促等寄递需求**,构建产销运协同一体化服务链路,强化运力调配与资源投…
大模型 IT之家 · 4天前 阅读 10·访客 10
操作系统内功 · 第 62 篇|FUSE 与用户态文件系统:把文件系统写出内核
把文件系统逻辑搬出内核:本篇讲 FUSE 的动机与应用版图、/dev/fuse 的请求-响应协议、内核侧连接与缓存策略,算清延迟与写性能的账本,并给出云盘挂载的工程案例与实操清单。
后端技术 精选 · 原创 · 11-10 阅读 69·访客 69
多语言 RAG:跨语言检索与翻译管线的工程
用户用中文提问,文档是英文写的——跨语言 RAG 的检索质量远低于同语言场景。本篇拆解多语言 RAG 的三种管线(翻译前置、多语言嵌入、跨语言检索)、各方案的效果与成本、以及多语言知识库的构建策略。
一叶一世界 精选 · 原创 · 11-4 阅读 78·访客 78