AI Search 索引时顺手生成文件摘要:主题写进分块上下文头,LLM 费用另计
核心概要
Cloudflare 的 AI Search 现在可以在建立索引的同时为文件生成摘要、主题和关键词,面向每个至少切出三个分块的文本文档。摘要与关键词写入条目的上下文元数据,主题则加入该文件各分块的上下文头以辅助检索。该功能默认关闭,开启或改动设置会触发全量重建索引,且大语言模型调用按 Workers AI 用量单独计费,不计入 AI Search 的摄取额度。
深度剖析
AI Search 的索引流程多了一步:在切分文本的同时调用大语言模型,为每个至少产生三个分块的文本文档生成摘要、主题和关键词。 摘要与关键词写入条目的上下文元数据,主题进入该文件各分块的上下文头,作为检索时可用的附加信息。 这一行为由索引选项 indexing_options.file_summary 控制,默认关闭,在控制台开启或在创建、更新实例时设为 true 即可启用。
生成的主题被放进文件各分块的上下文头,而摘要和关键词留在条目级的上下文元数据里。 条目上已有的 acontext 值不会被覆盖,仍按原样保留。 启用范围限定为每个至少产生三个分块的文本文档,未达到该分块数的文档不进入摘要流程。
摘要调用走实例配置的 AI Gateway,未配置时走默认网关,按 Workers AI 用量计费到账户。 这部分费用不属于 AI Search 的摄取额度,需要单独承担。 每个新增或修改的文件只摘要一次,因此成本随索引内容量增长;改动该设置会触发全量重建索引,且 indexing_options 在每次更新时整体替换,未写出的选项会回到默认值。
启示与展望
该说明针对 AI Search 索引文本文档的场景,只覆盖至少产生三个分块的文档;启用方式、计费归属和重建索引行为均以这一产品设置为限。
摘要质量与检索收益没有给出对照数据;每个文件只摘要一次,内容修改后才会重新生成;indexing_options 整体替换,遗漏的选项会回到默认值。
