注册
登录
首页
特色IP池
隧道代理
独享IP池
合租IP池
大型IP池
短效优质代理
长效住宅代理
学生特惠代理
Socks5代理
短效Socks5代理
住宅Socks5代理
免费代理
推广返利
支持
文档中心
API接口
博客
登陆
首页
特色IP池 >
隧道代理
独享IP池
合租IP池
大型IP池 >
短效优质代理
长效住宅代理
学生特惠代理
Socks5代理 >
短效Socks5代理
住宅Socks5代理
免费代理
推广返利
支持 >
文档中心
API接口
博客
注册
登录
每月知识问答
2019年4月
5 篇
2019年3月
18 篇
2019年2月
6 篇
2019年1月
5 篇
2018年12月
10 篇
2018年11月
11 篇
2018年10月
7 篇
2018年9月
19 篇
2018年8月
13 篇
2018年7月
14 篇
2018年6月
13 篇
2018年5月
11 篇
2018年4月
8 篇
2018年3月
10 篇
2018年2月
3 篇
2018年1月
12 篇
2017年12月
20 篇
2017年11月
21 篇
2017年10月
12 篇
2017年9月
21 篇
2017年8月
24 篇
2016年11月
16 篇
2016年10月
31 篇
2016年9月
21 篇
2016年8月
31 篇
2016年7月
51 篇
2016年6月
129 篇
利用代理IP来抓取网页还会封IP吗?
提问时间:2016/6/9 13:20:10
近来我自己写了个爬虫,在大量频繁请求后,IP地址会被屏蔽,于是乎我用了代理IP,可还是一样会被屏蔽。我想问一下,使用代理IP后还是会被屏蔽吗,有什么好办法来解决吗?
1楼(站大爷用户)
会的
例如 bing搜索v2ex会被封 提前打过招呼才进了v2ex白名单
大型网站应该都有自己的爬虫白名单吧
推荐阅读
◆
Safari 如何快速切换代理服务器?
◆
谁能提供下《TCP/IP详解》这本书的勘误表?
◆
一手私密代理好还是短效优质代理好
◆
Python如何设置User-Agent和代理IP
◆
如何使用浏览器设置代理IP上网
◆
网页内容被篡改,如何找到是在哪个位置被篡改的,如何找到这个恶意程序?
◆
浅析HTTP协议的工作原理
◆
Nginx反向代理https站點時如何處理配置文件中的證書和proxy_pass?
◆
如何配置多台Nginx代理服务器?如何实现session共享?
◆
别人能查到你的ip并找到你的住址吗?
立即注册站大爷用户,免费试用全部产品
立即注册站大爷用户,免费试用全部产品
产品导购
免费试用