苏苏网赚论坛

 找回密码
 立即注册
查看: 458|回复: 0

爬虫怎么爬取要登陆的网站

[复制链接]
跳转到指定楼层
楼主
发表于 2019-5-29 13:41:00 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
这些开源爬虫都支持在爬取时指定cookies,模拟登陆主要是靠cookies。至于cookies怎么获取,不是爬虫管的事情。你可以手动获取、用http请求模拟登陆或者用模拟浏览器自动登陆获取cookie。
下一篇:JAVA爬虫
热帖推荐
回复

使用道具 举报

广告合作|最大的网赚客中文交流社区!十年老站!

GMT+8, 2024-4-20 22:18 , Processed in 0.124800 second(s), 23 queries , Gzip On.

Powered by Discuz! X3.1 VIP版

© 2012-2022 苏苏网赚论坛 版权所有 | 10年老品牌

快速回复 返回顶部 返回列表