简介
本项目 fork 项目go_spider,github:https://github.com/hu17889/go_spider ,因此项目架构的部分文档可以参考此项目。同时项目架构、部分思路参考了 python 的经典爬虫scrapy。 基本结构:Spider模块(主控)Downloader模... 更多
其它信息
地区
国产
开发语言
Google Go
开源组织
无
所属分类
应用工具、 网络爬虫
授权协议
MPL
操作系统
跨平台
收录时间
2023-09-29
软件类型
开源软件
适用人群
未知
时光轴
里程碑1
LOG0
2023
2023-09
轻识收录
评价
0.0(满分 10 分)0 个评分
什么是点评分
全部评价(
0)
推荐率
100%
推荐
ItSucks网络爬虫
ItSucks是一个javawebspider(web机器人,爬虫)开源项目。支持通过下载模板和正则表达式来定义下载规则。提供一个swingGUI操作界面。
ItSucks网络爬虫
0
kamike.collect网络爬虫
AnotherSimpleCrawler又一个网络爬虫,可以支持代理服务器的翻墙爬取。1.数据存在mysql当中。2.使用时,先修改web-inf/config.ini的数据链接相关信息,主要是数据库
kamike.collect网络爬虫
0
SpidermanJava网络蜘蛛/网络爬虫
Spiderman是一个基于微内核+插件式架构的网络蜘蛛,它的目标是通过简单的方法就能将复杂的目标网页信息抓取并解析为自己所需要的业务数据。最新提示:欢迎来体验最新版本Spiderman2,http:
SpidermanJava网络蜘蛛/网络爬虫
0