急！写python采集百度问答遇到反爬怎么解决【付费】

浅生 · 发表于 2024-5-20 19:41:38

IP，cookie都是问题。。。

TyCoding · 发表于 2024-5-20 19:41:53

爬的时候没内容？你用的什么库？你看看是不是没获取到？

Crystαl · 发表于 2024-5-20 19:41:58

帮你顶顶

独家记忆 · 发表于 2024-5-20 19:42:18

是的刚开始爬就没内容用的requests

IT618发布 · 发表于 2024-5-20 19:42:26

你在编辑器里面打个断点看看，是不是获取内容那里没获取到

婷姐 · 发表于 2024-5-20 19:42:53

是的，获取到的搜索结果就被反扒了，返回的都是无用信息

拾光 · 发表于 2024-5-20 19:43:44

不懂不懂

Crystαl · 发表于 2024-5-20 19:43:58

你截图看看

拾光 · 发表于 2024-5-20 19:44:16

本帖最后由北漂少年历险记于 2024-5-9 17:35 编辑

急！写python采集百度问答遇到反爬怎么解决【付费】

Crystαl · 发表于 2024-5-20 19:44:26

你要再headers里面加上cookie，编码再转utf-8

电梯直达
评论19