注册
登录
首页
特色IP池
隧道代理
独享IP池
合租IP池
大型IP池
短效优质代理
长效住宅代理
学生特惠代理
Socks5代理
短效Socks5代理
住宅Socks5代理
免费代理
推广返利
支持
文档中心
API接口
博客
登陆
首页
特色IP池 >
隧道代理
独享IP池
合租IP池
大型IP池 >
短效优质代理
长效住宅代理
学生特惠代理
Socks5代理 >
短效Socks5代理
住宅Socks5代理
免费代理
推广返利
支持 >
文档中心
API接口
博客
注册
登录
每月知识问答
2019年4月
5 篇
2019年3月
18 篇
2019年2月
6 篇
2019年1月
5 篇
2018年12月
10 篇
2018年11月
11 篇
2018年10月
7 篇
2018年9月
19 篇
2018年8月
13 篇
2018年7月
14 篇
2018年6月
13 篇
2018年5月
11 篇
2018年4月
8 篇
2018年3月
10 篇
2018年2月
3 篇
2018年1月
12 篇
2017年12月
20 篇
2017年11月
21 篇
2017年10月
12 篇
2017年9月
21 篇
2017年8月
24 篇
2016年11月
16 篇
2016年10月
31 篇
2016年9月
21 篇
2016年8月
31 篇
2016年7月
51 篇
2016年6月
129 篇
利用代理IP来抓取网页还会封IP吗?
提问时间:2016/6/9 13:20:10
近来我自己写了个爬虫,在大量频繁请求后,IP地址会被屏蔽,于是乎我用了代理IP,可还是一样会被屏蔽。我想问一下,使用代理IP后还是会被屏蔽吗,有什么好办法来解决吗?
1楼(站大爷用户)
会的
例如 bing搜索v2ex会被封 提前打过招呼才进了v2ex白名单
大型网站应该都有自己的爬虫白名单吧
推荐阅读
◆
选择代理IP池资源的正确姿势
◆
花生壳6.5工程版无需外网ip和路由端口映射的原理是什么?
◆
那么,Python做爬虫究竟比其他语言好在哪里呢?
◆
你知道什么是socks5代理IP吗
◆
如何获取到大量好用的https代理ip资源
◆
在内网通过代理服务器上网,但是在Terminal ping不通。请问为什么?
◆
如何选择,爬虫代理IP的多个解决方案
◆
爬虫数据矿工的命运?
◆
浅析Python爬虫的多线程并发和gzip压缩
◆
还在为搭建代理IP池烦恼吗,来看看独享IP池吧
立即注册站大爷用户,免费试用全部产品
立即注册站大爷用户,免费试用全部产品
产品导购
免费试用