注册
登录
首页
特色IP池
隧道代理
独享IP池
合租IP池
大型IP池
短效优质代理
长效住宅代理
学生特惠代理
Socks5代理
短效Socks5代理
住宅Socks5代理
免费代理
推广返利
支持
文档中心
API接口
博客
登陆
首页
特色IP池 >
隧道代理
独享IP池
合租IP池
大型IP池 >
短效优质代理
长效住宅代理
学生特惠代理
Socks5代理 >
短效Socks5代理
住宅Socks5代理
免费代理
推广返利
支持 >
文档中心
API接口
博客
注册
登录
每月知识问答
2019年4月
5 篇
2019年3月
18 篇
2019年2月
6 篇
2019年1月
5 篇
2018年12月
10 篇
2018年11月
11 篇
2018年10月
7 篇
2018年9月
19 篇
2018年8月
13 篇
2018年7月
14 篇
2018年6月
13 篇
2018年5月
11 篇
2018年4月
8 篇
2018年3月
10 篇
2018年2月
3 篇
2018年1月
12 篇
2017年12月
20 篇
2017年11月
21 篇
2017年10月
12 篇
2017年9月
21 篇
2017年8月
24 篇
2016年11月
16 篇
2016年10月
31 篇
2016年9月
21 篇
2016年8月
31 篇
2016年7月
51 篇
2016年6月
129 篇
利用代理IP来抓取网页还会封IP吗?
提问时间:2016/6/9 13:20:10
近来我自己写了个爬虫,在大量频繁请求后,IP地址会被屏蔽,于是乎我用了代理IP,可还是一样会被屏蔽。我想问一下,使用代理IP后还是会被屏蔽吗,有什么好办法来解决吗?
1楼(站大爷用户)
会的
例如 bing搜索v2ex会被封 提前打过招呼才进了v2ex白名单
大型网站应该都有自己的爬虫白名单吧
推荐阅读
◆
如何获取高匿代理IP资源
◆
JavaWeb应用如何判断用户真实IP?
◆
独享IP池,爬虫工作者的福音
◆
为什么 IP 有归属地概念,像 8.8.8.8 这样的 IP 是买的吗?
◆
现在的网络爬虫的研究成果和存在的问题有哪些?
◆
java爬虫如何使用http代理IP来提高工作效率
◆
单位IP被12306屏蔽了怎么办?
◆
什么是HTTP代理IP的API接口
◆
C类IP地址的使用量,使用A类IP地址有什么影响?
◆
使用代理IP助力淘宝关键词排名
立即注册站大爷用户,免费试用全部产品
立即注册站大爷用户,免费试用全部产品
产品导购
免费试用