登陆
注册
登录
提问时间：2016/6/8 10:33:13
webget网络在抓取美团信息时，请求太频繁，提示要验证码，如何解决？如何用代理IP来切换IP呢，或者有更好的采集工具吗？
1楼（未知网友）

泻药
美团的对爬虫的防范策略是根据请求间隔来计算的，如果请求量不大的话可以加个sleep来延迟放慢速度
如果麻烦一些的话就要切换代理IP了
2楼（未知网友）

试试设置代理IP

也可以投机尝试一下协议头的欺骗ip

要是不用代理IP 那就只好sleep了
立即注册站大爷用户，免费试用全部产品
立即注册站大爷用户，免费试用全部产品

快速咨询热线：

024-31823261

  • 国家高新技术企业证书编号：GR202321001563

  • 增值电信经营许可证： 辽B2-20180026

  • 互联网虚拟专用网业务许可证：B1-20181940

  • 公司地址：沈阳市浑南区上深沟村沈阳国际软件园F7座

产品

支持

文档

关于

声明：本站不搜集数据不存储数据，也不买卖数据，所有资源仅用作数据传输通道。禁止利用本平台资源从事任何违反本国（地区）法律法规的活动，用户所有操作行为均有日志存档并保留6个月。
站大爷 - 专业的大数据基础服务平台 Copyright@2025 | 辽B2-20180026