Pyleus分布式处理框架

联合创作 · 2023-10-01 06:43

Pyleus 是一个来自 Yelp 的开源框架，使得 Yelp 的另外一个开源项目 mrjob 可以运行在 Apache Storm 框架上，就像 Hadoop 一样。开发者可以使用纯 Python 实现大数据的处理，并进行快速迭代。

安装：pip install pyleus

示例代码：word_count

浏览 8

点赞

收藏

分享

举报

评论

图片

表情

Tigon分布式流处理框架

Tigon 是一个开源的、实时的、低延迟、高吞吐量的流处理框架。基于 Apache Hadoop 和

Tigon分布式流处理框架

Tigon是一个开源的、实时的、低延迟、高吞吐量的流处理框架。基于ApacheHadoop和ApacheHBase构建。Tigon严重依赖开源项目Tephra和Apache Twill提供紧密的集成到

Apache Samza分布式流处理框架

Samza是近日由LinkedIn开源的一项技术，它是一个分布式流处理框架，专用于实时数据的处理，非常像Twitter的流处理系统Storm。不同的是Samza基于Hadoop，而且使用了Linked

Apache Samza分布式流处理框架

Samza是近日由LinkedIn开源的一项技术，它是一个分布式流处理框架，专用于实时数据的处理，非

数据库处理框架数据库处理框架

是一个通用数据库处理框架(可以包含MSSQL POSTGRESQL,SQLITE EXCEL MYS

数据库处理框架数据库处理框架

是一个通用数据库处理框架(可以包含MSSQLPOSTGRESQL,SQLITEEXCELMYSQLDB2ORACLE...只要你愿意实现接口就可以).很便捷地进行常用数据库操作(增删改查).其性能是几

zsCat分布式框架

使用技术：Spring、SpringMVC，MyBaits，通用 mapper、beetl、mave

zsCat分布式框架

使用技术：Spring、SpringMVC，MyBaits，通用mapper、beetl、maven、Redis、dubbo、zookeep、bootstreap、ace、jQuery等等。主要是提供

InfovoreRDF处理框架

Infovore是一个map/reduce框架，用来处理大量的RDF数据集，注入Freebase和DBpedia。基于Hadoop构建。

GHoKoWeb-hook 处理框架

GHoKo是一个Web应用，侦听来自Github的Web-hook，使用Lua和Go编写脚本。一般用于CI、自动测试等应用场景。依赖：mikespook/golibaarzilli/goluastev

点赞

收藏

分享

举报