微博被我干了(仅供学习参考)

恋习Python

共 1624字,需浏览 4分钟

 ·

2021-11-09 12:10

BuyiXiao,又名月小水长,《野史*码农传》中有如下记载:


月小水长,何许人也?衡州一乡野村夫尔,虽身高八尺不足,但年方二十有余;弱冠之年曾求学于潭州,某一世人所谓世界一流大学 A 类高校,学不成名,为谋生计,背井离乡,远赴京畿;假工程师之名,行农民工之实,满腹经纶,无用书生,善于自黑,贻笑大方。


一个爬取用户所有微博的爬虫,还能断网续爬那种

本号持续挑战全网最佛系运营已达三年,主要涉及爬虫、数据分析可视化,小程序等,三年之期已到,是时候梳理出精华绝技了,罗列如下:

1、爬虫系列

1.1、微博爬虫
1.1.1 一个爬取用户所有微博的爬虫,还能断网续爬那种
1.1.2 超级方便的微博用户信息爬虫
1.1.3 爬取微博用户所有文章的爬虫
1.1.4 微博搜索用户爬虫

1.1.5 2021 新版微博评论及其子评论爬虫发布
1.1.6 2021 微博新版评论爬虫更新
1.1.7 【B 站视频教程】批量抓取微博话题的评论
1.1.8 抓取用户发布的所有微博的评论
1.1.9 我用单机单账号抓取了单条微博的 100w+ 评论

1.1.9 2021 新版微博话题爬虫发布
1.1.10 免 cookie 微博话题爬虫发布
1.1.11 新版微博话题爬虫总是爬一些无关数据的原因
1.1.12 新版话题爬虫新增位置信息
1.1.13 新版微博话题爬虫新增发布手机、超话字段

1.1.14 微博位置爬虫发布
1.1.15 【B站视频教程】微博话题爬虫和微博位置爬虫的使用,区别及联系

1.2、B 站爬虫及其他
1.2.1 顺手写了个 B 站视频下载器
1.2.2 开箱即用的 B 站评论抓取工具
1.2.3  基于百度爬虫的非百度搜索引擎
1.2.4 微信公众号文章爬虫(包括阅读数、点赞数、在看数)
1.2.5 分享两个有趣的爬虫代码
1.2.6 不写一行,自动生成爬虫代码

1.3、新闻系列爬虫
1.3.1 澎湃新闻网站全站新闻爬虫及各大新闻平台聚合爬虫发布
1.3.2 新闻平台聚合之腾讯新闻爬虫发布
1.3.3 新闻平台聚合之新浪新闻爬虫发布
1.3.4 新闻平台聚合之纽约时报爬虫发布
1.3.5 新闻平台聚合之泰晤士报爬虫发布
1.3.6 20 w 新闻文本数据集分享
1.3.7 新闻聚源网站正式上线



2、数据分析及可视化系列

2.1、数据分析(基础向)
2.1.1 数据分析利器 pandas 系列教程(一):从 Series 说起
2.1.2 数据分析利器 pandas 系列教程(二):强大的 DataFrame
2.1.3 数据分析利器 pandas 系列教程(三):读写文件三十六计
2.1.4 数据分析利器 pandas 系列教程(四):对比 sql 学 pandas

2.2、分析可视化(实战向)
2.2.1 Python 数据可视化实战:使用 PyQt5 和 Echarts 打造股票数据看板
2.2.3 可视化分析 S10 SN vs DWG 总决赛视频的 10 w 条弹幕和评论
2.2.4 Matplotlib 实战:写一个任意函数极值可视化脚手架
2.2.5 D3 实现《天龙八部》人物关系可视化
2.2.6 微博特定群体用户关系网络可视化
2.2.7 数说一线城市二手房房价
2.2.8 图说高考录取分数线

3、小程序系列

3.1 从零开始制作一款打卡类小程序
3.2 高考查分小程序开发心得
3.3 扫码考勤小程序正式上线
3.4 开源一个小程序,还教部署那种
3.5 在校生如何独立完成教务系统小程序的开发
3.6 模仿腾讯新闻做了款新闻阅读小程序

其实我主业是开发 app 的,无论是爬虫,数据分析,可视化还是 app,想学习的欢迎来聊 ...关注公众号,我们一起学习成长
浏览 23
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报