Skip to content

issues Search Results · repo:dataabc/weiboSpider language:Python

Filter by

578 results
 (78 ms)

578 results

indataabc/weiboSpider (press backspace or delete to remove)

dataabc/weiboSpider
Failed to obtain weibo.cn cookie from Chrome browser 结果文件没有内容

为了更好的解决问题，请认真回答下面的问题。等到问题解决，请及时关闭本issue。 - 问：请您指明哪个版本运行出错（github版/PyPi版/全部）？ 答：github - 问：您使用的是否是最新的程序（是/否）？ 答：是 - 问：爬取任意用户都会运行出错吗（是/否）？ 答：否 试着爬取白敬亭的，也报了同样的错，但是结果正常（有数据） Failed to obtain weibo.cn ...
failed
  • Fern-Parker
  • 7
  • Opened 
    10 days ago
  • #654

dataabc/weiboSpider
爬取图片视频时报错

为了更好的解决问题，请认真回答下面的问题。等到问题解决，请及时关闭本issue。 - 问：请您指明哪个版本运行出错（github版/PyPi版/全部）？ 答：github - 问：您使用的是否是最新的程序（是/否）？ 答：是 - 问：爬取任意用户都会运行出错吗（是/否）？ 答：是 - 问：若只有爬特定微博时才出错，能否提供出错微博的weibo_id或url（非必填）？ ...
failed
  • Minamototennsai
  • 5
  • Opened 
    14 days ago
  • #653

dataabc/weiboSpider
打包

- 问：请说明需要什么新功能。 答：能不能直接打包成一个小软件，可以直接运行 - 问：请说明添加该功能的意义。（非必填） 答：方便，快捷
feature
  • TomYin486
  • Opened 
    15 days ago
  • #652

dataabc/weiboSpider
能不能解决下版本依赖问题呀，现在lxml，requests==2.32.4，tqdm==4.66.3，absl-py==0.12.0，browser_cookie3==0.20.1，这些在pycharm中安装出现这个问题A new release of pip is available: 25.0.1 -> 25.1.1

  • TomYin486
  • Opened 
    15 days ago
  • #651

dataabc/weiboSpider
有些接口是依赖账号的，怎么解决的啊

- 问：请说明需要什么新功能。 答： - 问：请说明添加该功能的意义。（非必填） 答：
feature
  • tmz123
  • 1
  • Opened 
    18 days ago
  • #650

dataabc/weiboSpider
或许可以用微博的搜索功能实现比较精确的按时间段爬取，以及类型和关键词筛选

- 问：请说明需要什么新功能。 答：配置帮助中说“当end_date值不是 now 时，在爬微博数非常多的账号时，程序可能不稳定”。我看到登录账号后，打开微博用户的主页会出现高级搜索的功能，里面有时间段的设置，确认后会打开只含对应时间段的微博的页面，地址中包含时间戳。高级搜索中还有类型筛选和关键词筛选，也是会在地址中包含相关信息。不知道项目是怎么爬取指定范围的，如果目前没有利用微博的这个功能的话，以后或许可以利用它实现更好的爬取。 ...
feature
  • InMirrors
  • 2
  • Opened 
    on May 24
  • #648

dataabc/weiboSpider
你好请问能打包软件吗

- 问：请说明需要什么新功能。 答：请问能打包软件吗 - 问：请说明添加该功能的意义。（非必填） 答：琢磨了一晚上还是不知道怎么运行软件T T
feature
  • zchujuz1
  • 2
  • Opened 
    on May 21
  • #647

dataabc/weiboSpider
性能优化：复用 Session 以减少 TCP 连接开销。PR请求。

您好。我在使用项目时注意到 Weibo 类中直接调用了 requests.get()，每次请求会新建 TCP 连接，导致url获取速度太慢。 我修改了代码，在初始化时创建 self.session，并替换所有 requests.get 为 self.session.get，以复用连接降低开销。是否符合项目方向，我可以提交一个 PR吗？ 以下是原来的程序和修改后程序速度的对比。2683370593 谢安然。这位用户发布了11547条微博，在测试中连续下载40小数也无法下载完。 ...
  • camellia2077
  • Opened 
    on Apr 3
  • #646

dataabc/weiboSpider
爬取广州地铁微博号有一大部分内容爬取不连续，不知道是啥原因导致

【悠悠报客流：昨日回顾】，我主要爬的是客流量，但是不连续，微博每天都会发一条但是这个爬虫，爬不到是为啥呢
wontfix
  • 787253600
  • 7
  • Opened 
    on Mar 24
  • #645

dataabc/weiboSpider
爬了104条报错

Image
failed
wontfix
  • zljr
  • 3
  • Opened 
    on Mar 12
  • #644
Issue origami icon

Learn how you can use GitHub Issues to plan and track your work.

Save views for sprints, backlogs, teams, or releases. Rank, sort, and filter issues to suit the occasion. The possibilities are endless.Learn more about GitHub Issues
ProTip! 
Restrict your search to the title by using the in:title qualifier.
Issue origami icon

Learn how you can use GitHub Issues to plan and track your work.

Save views for sprints, backlogs, teams, or releases. Rank, sort, and filter issues to suit the occasion. The possibilities are endless.Learn more about GitHub Issues
ProTip! 
Restrict your search to the title by using the in:title qualifier.
Issue search results · GitHub