新浪微博系列爬虫的一些使用建议
月小水长
共 669字，需浏览 2分钟
· 2021-03-11
点击上方 月小水长 并 设为星标，第一时间接收干货推送
exe 早就不维护了，在 微博话题爬虫更新：突破 50 页限制 一文中，已经说过不再继续维护 exe 版本了，后面自然而然就失效了；一方面 mac 上无效使用 exe，另一方面 gui 维护成本比较高，ui 操作逻辑需要随爬虫逻辑的改变而改变。所以，exe 版本用不了了。
运行报错，KeyError: 'servertime'，这个错误是出现在微博超级评论爬虫里的，原因是因为自动登录的逻辑已经失效了，强制扫码登陆了，可以使用 cookie 版本的微博评论爬虫。
微博用户爬虫，微博话题爬虫依然是可以用的，并且话题爬虫是依然可以支持小时级别的搜索抓取的，至于为什么抓不到，大概率是因为 cookie 复制错了，必须是要 cn 站的 login.cn 这个接口登录后的，以及可能是网络运营商所限，多切换几个热点试试。
为什么微博话题显示有几万条，实际抓到的只有几千甚至更少？我提出两个可能的原因，第一是可能是这几万条有水分，第二是两者的统计口径不一样，话题爬虫其实是按照关键词搜索的，暂无法知道微博的统计口径。
关于这个爬虫，还有哪些疑问，可在下方留言，或点击阅读原文，在 github 上提 issue
评论
多人同时导出 Excel 干崩服务器！新来的阿里大佬给出的解决方案太优雅了！
点击关注公众号，Java 干货及时推送↓推荐阅读：面试辅导，我们出大成果了！来源：juejin.cn/post/7259249904777838629前言 业务诉求：考虑到数据库数据日渐增多，导出会有全量数据的导出，多人同时导出可以会对服务性能造成影响，导出涉及到mysql查询的io操作，
Java技术栈
1
有意思！一个关于 Spring 历史的在线小游戏
发现 Spring One 的官网上有个好玩的彩蛋，分享给大家！进到Spring One的官网，可以看到右下角有个类似马里奥游戏中的金币图标。点击该金币之后，会打开一个新的页面，进入下面这样一个名为：The History Of Spring 的在线小游戏你可以使用上下左右的方向键来控制Spring
公众号程序猿DD
1
了解加密货币到加密货币的互换
1、什么是加密货币互换？加密货币到加密货币的互换是指以现行市场汇率将一种加密货币直接兑换为另一种加密货币。与需要法定货币存款和较长流程的传统交易所不同，加密货币到加密货币的互换可以无缝地促进交换。掉期在提高加密货币的流动性和效率方面发挥着重要作用。该功能使用户能够将他们的加密货币与钱包中的其他代币进
区块链头条
0
李彦宏：开源大模型不如闭源，后者会持续领先；周鸿祎：“开源不如闭源” 的言论是胡说八道
架构师大咖
架构师大咖，打造有价值的架构师交流平台。分享架构师干货、教程、课程、资讯。架构师大咖，每日推送。
公众号该公众号已被封禁0、李彦宏：开源大模型不如闭源，后者会持续领先当今
源码共读
0
【第129期】程序员的新宠：三款终端工具，让你告别Xshell！
概述 WindTerm：跨平台的SSH利器 首先介绍的是WindTerm，这是一款使用C语言开发的跨平台SSH客户端。它不仅完全免费，而且没有商业使用的限制。WindTerm支持SSH v2、Telnet、Raw Tcp等协议，而且性能出色，甚至超过了FinalShell和Electerm。功能
前端微服务
0
字节员工：35岁以后被裁员的，后来都走了哪条路？现在2-2，要不要利用最后一年拼命上个岸。
架构师大咖
架构师大咖，打造有价值的架构师交流平台。分享架构师干货、教程、课程、资讯。架构师大咖，每日推送。
公众号该公众号已被封禁在当今竞争激烈的职场环境中，年龄并不总是一个决定性
源码共读
0
顶级 Javaer 都在用的 20 个类库，真香！
点击关注公众号，Java 干货及时推送↓推荐阅读：投了 100 多份简历后…优秀且经验丰富的Java开发人员的特征之一是对API的广泛了解，包括JDK和第三方库。我花了很多时间来学习API，尤其是在阅读了Effective Java 3rd Edition之后 ，Joshua Bloch建
Java技术栈
1
985学历真好用，一面答的再差也能过？
JavaGuide官方网站：javaguide.cn相对其他行业如律师、金融等，程序员求职面试对学历的包容度还是相对较高的，尤其是在过去几年。通常情况下，如果候选人在其他方面（如实习经历、项目经历、竞赛经历）表现突出，可以在一定程度上弥补学历的不足。不过，由于现在面试越来越卷，一些大厂、国企和研究所
JavaGuide
1