SuperAPI AI 工具集

document-processing

数据与分析

查看项目

更新于 10-16 03:11

技能介绍

用途:把非结构化文档(PDF、DOCX、PPTX、XLSX)转换为适合搜索的 JSONL 分块,供 OpenSearch 索引使用,全程本地运行,无需 AWS 凭证或云服务。

主要能力:基于开源 Docling 进行文档解析与分块,输出 JSONL 文件,路径为 .opensearch/chunks/<index>/<filename>.jsonl;每行包含 text、headings、source_file、chunk_id、page_number 字段。JSONL 可导入任意 OpenSearch 目标:本地集群可直接 bulk-index;AOS 域或 AOSS 集合可通过 managed-ingestion-service(OSIS 管道)导入。

使用方式:需已安装 uv(用于运行 Python 脚本)。适用场景包括:用户拥有非结构化文档;需要为 OpenSearch 索引准备文档;需要检查或评估分块质量。

限制与更多细节:完整工作流(处理配置、质量评估、分块调整)见 document_processing_guide.md。其余信息暂未提供。