weiboscan
write bot to Crawl weibo
写了第一版,发现我有几个地方没有注意到。 函数里面有多次使用了requests ,没有集中到一个地方去处理。 对后续的维护不是很方便。
没有把微博评论和转发的数据给取出来。
微博好像有限制,只能抓前120页的信息。过多了就去取不到信息了
后面看到可以使用客户端的API 模拟APP发送的请求来获取数据。
| Name | Name | Last commit date | ||
|---|---|---|---|---|
weiboscan
write bot to Crawl weibo
写了第一版,发现我有几个地方没有注意到。 函数里面有多次使用了requests ,没有集中到一个地方去处理。 对后续的维护不是很方便。
没有把微博评论和转发的数据给取出来。
微博好像有限制,只能抓前120页的信息。过多了就去取不到信息了
后面看到可以使用客户端的API 模拟APP发送的请求来获取数据。