更多AI开源软件:

这是一个由 IBM 开源的 Python 工具,专门用于将各类文档转化为适合生成式 AI 使用的工具。它能够将 PDF、DOCX、PPTX、图片、HTML、Markdown 等多种流行文档格式,导出为 Markdown 和 JSON 格式,支持多种 OCR 引擎(PDF)、统一的文档对象(DoclingDocument),轻松集成检索增强生成(RAG)和问答应用,适用于需要将文档作为生成式 AI 模型输入的场景。

主要功能

  • 多格式支持:Docling能读取和解析多种流行的文档格式,包括PDF、DOCX、PPTX、图像、HTML、AsciiDoc和Markdown,支持将文档导出为Markdown和JSON格式。
  • 高级PDF理解:Docling具备对PDF文档的高级理解能力,包括页面布局、阅读顺序和表格结构的识别。
  • 统一文档表示:基于DoclingDocument格式,Docling提供一个统一且富有表现力的文档表示格式,表达文档中的文本、表格、图片等内容,及文档的层次结构。
  • OCR支持:Docling支持光学字符识别(OCR),能识别扫描PDF中的文字,让Docling能处理扫描或手写的文档。
  • 工具集成:Docling易于与LlamaIndex和LangChain等工具集成,为RAG(Retrieval-Augmented Generation)/QA(Question Answering)应用提供支持。

安装和使用

安装

要使用 Docling,只需从你的包管理器(例如 pip)安装即可:docling​

pip install docling

适用于 macOS、Linux 和 Windows 环境。x86_64 和 arm64 架构。

文档中提供了更详细的安装说明

开始使用

要转换单个文档,请使用 ,例如:convert()​

from docling.document_converter import DocumentConverter

source = "https://arxiv.org/pdf/2408.09869"  # document per local path or URL
converter = DocumentConverter()
result = converter.convert(source)
print(result.document.export_to_markdown())  # output: "## Docling Technical Report[...]"