spider-flow爬虫平台认领

0粉丝

spider-flow，新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。特性支持Xpath/JsonPath/css选择器/正则提取

简介

spider-flow，新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。特性支持Xpath/JsonPath/css选择器/正则提取/混搭提取支持JSON/XML/二进制格式支持多数据源、SQL select/selectInt/selectOne/insert/update/... 更多

其它信息

地区

国产

开发语言

Java

开源组织

无

所属分类

应用工具、网络爬虫

授权协议

MIT

操作系统

跨平台

收录时间

2023-09-29

软件类型

开源软件

适用人群

未知

时光轴

里程碑1

LOG0

2023

2023-09

轻识收录

打卡

评价

0.0（满分 10 分）0 个评分

什么是点评分

图片

表情

全部评价( 0)

推荐率 100%

推荐

Crawlab分布式爬虫管理平台

Crawlab是一个使用 Golang开发的分布式爬虫管理平台，支持Python、NodeJS、Go、Java、PHP等多种编程语言以及多种爬虫框架。安装三种方式:Docker（推荐）直接部署（了解内

Crawlab Lite爬虫管理平台

Crawlab 的轻量版本，基于 Golang 的爬虫管理平台，支持任意语言编写的爬虫。相比较 Cr

Crawlab分布式爬虫管理平台

Crawlab 是一个使用 Golang 开发的分布式爬虫管理平台，支持Python、NodeJS、

Crawlab Lite爬虫管理平台

Crawlab 的轻量版本，基于Golang的爬虫管理平台，支持任意语言编写的爬虫。相比较 Crawlab，该版本专注于单机上的爬虫管理，平台运行不依赖任何的外部数据库，去除了大量非必要功能。快速开始

Crawler跨平台不写代码的爬虫

Crawler基于Java开发的一款跨平台爬虫，可以使用Shell脚本和DOS命令进行任务式处理。比如CR命令使用一个Email正则就可以从贴吧中提取所有邮箱使用Ci命令爬取所有新闻 java-jar

Crawler跨平台不写代码的爬虫

Crawler 基于 Java 开发的一款跨平台爬虫，可以使用Shell脚本和DOS命令进行任务式处

Crowbarajax 爬虫

Crowbar: 基于Mozilla浏览器的 ajax 爬虫，还可作为远程浏览器使用，比较有意思。

Heritrixweb爬虫

Heritrix是一个开源，可扩展的web爬虫项目。用户可以使用它来从网上抓取想要的资源。Heritrix设计成严格按照robots.txt文件的排除指示和METArobots标签。其最出色之处在于它

HarvestmanWeb 爬虫

Harvestman 是一个非常简单、轻量级的 Web 爬虫，使用 Ruby 编写，示例代码：req

scrapeWeb 爬虫

scrape是一个简单高级的Web爬虫库，使用Go语言开发。示例代码：package mainimport ( "fmt" "net/http" "github.com/yhat/s