Apache Tika内容抽取工具集合
Tika 是一个内容抽取的工具集合(a toolkit for text extracting)。它集成了 POI, Pdfbox 并且为文本抽取工作提供了一个统一的界面。其次,Tika 也提供了便利的扩展 API,用来丰富其对第三方文件格式的支持。
在当前的0.2-SNAPSHOT 版本中, Tika 提供了对如下文件格式的支持:
-
PDF - 通过 Pdfbox
-
MS-* - 通过 POI
-
HTML - 使用 nekohtml 将不规范的 html 整理成为 xhtml
-
OpenOffice 格式 - Tika 提供
-
Archive - zip, tar, gzip, bzip 等
-
RTF - Tika 提供
-
Java class - Class 解析由 ASM 完成
-
Image - 只支持图像的元数据抽取
-
XML
Tika 的 API 十分便捷,核心是 Parser interface,其中定义了一个 parse 方法:
public void parse(InputStream stream, ContentHandler handler, Metadata metadata)
用 stream 参数传递需要解析的文件流, 文本内容会被传入 handler,而元数据会更新至 metadata。
可以使用 Tika 的 ParserUtils 工具来根据文件的mime-type
来得到一个适当的 Parser 来进行解析工作。或者 Tika 还提供了一个AutoDetectParser 根据不同的二进制文件的特殊格式 (比如说 Magic Code),来寻找适合的 Parser。
评论
CertWareNASA 工具集合
CertWare是一个工具的集合,旨在支持安全可靠的项目的发展。CertWare采用了几个结构化的参数模型,并且提供了支持书写和验证参数的选择模型。无论是文本编辑还是图形编辑都得到了实现,并且使用了几
CertWareNASA 工具集合
0
Wandora数据抽取工具
Wandora是一个通用的数据提取,管理和发布应用程序,基于主题地图和基于Java的。Wandora有一个图形用户界面,知识层次的介绍,几个数据存储选择,丰富的数据提取,进口和出口能力,以及一个嵌入式
Wandora数据抽取工具
0
Krabber网页抽取工具
Krabber是kVitrail的网页抽取工具。Krabber的设计目标是提供一个可以为Java应用调用的、可以执行网页上的JavaScript代码、并返回JavaScript代码执行后的网页的HTM
Krabber网页抽取工具
0