获取增加的生成系统通过提取结构化文本来摄入文档,而不是像一个人那样观看页面。以平板图像的方式导出PDF,缺少真正的文本层,或者用多列布局构建,使获取器无法使用,即使它对人类读者来说是完美的。结果是,真正权威的技术表和白皮书被错过,有利于竞争对手的简单但可读的HTML页面。修复这意味着使用真正可选的文本层,线性阅读顺序,描述标题,标记表和附带元数据来导出。将PDF与HTML伴侣页面并在 llms.txt简报中引用,使获取系统能够提供两条可靠的路径,因此技术文档的内容深度最终与人工智能的专业知识相
投资你的AI Halo问题
视觉忠诚度和机器可读性是不同的问题. PDF 可以无缺陷地渲染,同时是图像扫描或布局导出,没有真正的文本层,这意味着提取工具没有任何可用的东西,即使人类看到清洁的文本。
更安全的方法是发布两者:一个适当标记的PDF下载和一个平行HTML版本,因此检索系统总是有一个清洁的文本路径,无论PDF的结构。
文档标题、作者/组织和主题字段将引入检索系统如何归因于来源. 将这些空白或自动生成为“未标题”的条纹将使文档的身份信号需要正确引用。