Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

你好,我在setting.py中设置WEIBO_TYPE = 0,就运行不了,爬取不了数据是为什么。并且设置WEIBO_TYPE=2或者1的时候爬取不到头条url和发布位置和reweet_id是为什么# 要搜索的微博类型,0代表搜索全部微博,1代表搜索全部原创微博,2代表热门微博,3代表关注人微博,4代表认证用户微博,5代表媒体微博,6代表观点微博 #623

Open
sansan303 opened this issue Dec 18, 2024 · 3 comments
Labels
failed 程序运行出错

Comments

@sansan303
Copy link

为了更好的解决问题,请认真回答下面的问题。等到问题解决,请及时关闭本issue。

  • 问:请您指明哪个版本运行出错(github版/PyPi版/全部)?

答:

  • 问:您使用的是否是最新的程序(是/否)?

答:

  • 问:爬取任意用户都会运行出错吗(是/否)?

答:

  • 问:若只有爬特定微博时才出错,能否提供出错微博的weibo_id或url(非必填)?

答:

  • 问:若您已提供出错微博的weibo_id或url,可忽略此内容,否则能否提供出错账号的user_id及您配置的since_date,方便我们定位出错微博(非必填)?

答:

  • 问:如果方便,请您描述出错详情,最好附上错误提示。

答:
屏幕截图 2024-12-18 132350
屏幕截图 2024-12-18 132943
屏幕截图 2024-12-18 133125

@sansan303 sansan303 added the failed 程序运行出错 label Dec 18, 2024
@dataabc
Copy link
Owner

dataabc commented Dec 18, 2024

因为您说的这些很多微博没有,比如发布位置,只有是位置微博才有,其它类似。

@sansan303
Copy link
Author

因为您说的这些很多微博没有,比如发布位置,只有是位置微博才有,其它类似。
但是我爬了三万多条都没有这些数据,这正常吗?还有设置WEIBO_TYPE = 0,就运行不了,出现第一张图的问题是为什么

@dataabc
Copy link
Owner

dataabc commented Dec 18, 2024

第一张可能是因为没有正确保存进度,删除crawls文件夹看看。
我也不确定为什么为0为什么无法运行,可能是接口限制吧。为1是爬原创微博,没有转发,所以reweet_id为空。位置和url数量很少,不出现也有可能。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
failed 程序运行出错
Projects
None yet
Development

No branches or pull requests

2 participants