这期内容当中小编将会给大家带来有关锋利的爬虫程序配置代理互联网协议(互联网协议的缩写)的示例分析,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。
//要访问的目标页面
stringtargetrol=' http://httpbin。组织/IP ';
//代理服务器
stringproxyHost=' http://t。16运。cn ';
stringproxyPort=' 6447
//代理隧道验证信息
stringproxyUser=' 16IXNGXO '
stringproxyPass=' 366338
//设置代理服务器
WebProxyproxy=newWebProxy(字符串。格式(“{0}:{1}”、proxyHost、proxyPort),true);
服务点管理器.应为100Continue=false
varrequest=WebRequest .create(TargetURl)Ashttpwebrequest;
请求AllowAutoRedirect=true
请求保持活动=真
请求。方法=' GET '
请求。代理=代理;
//请求。代理。凭据=凭据缓存默认凭据
请求。代理。凭证=新系统净。网络凭证(代理用户、代理通行证);
//设置临近隧道
//Randomran=new random();
//inttunnel=ran .下一个(110000);
//请求。标头。添加('代理-隧道,字符串。值的(隧道));
//请求。超时=20000;
//请求服务点。连接限制=512;
//请求.用户代理=' Mozilla/5.0(window snt 6.3;win 64x 64)applebwebkit/537.36(KHTML,likeGecko)Chrome/48。0 .2564 .82 safari/537.36 ';
//请求。标题。添加('缓存控制','最大期限=0 ');
//请求。标题。添加(“DNT”,“1”);
//字符串编码=系统.转换为base64字符串(系统。编码GetBytes(代理用户“:”代理密码));
//请求。标头。添加('代理授权','基本'编码);
使用(varresponse=request .GetResponse()asHttpWebResponse)
使用(varsr=newStreamReader(响应GetResponseStream(),编码. UTF8))
{
stringmlstr=Sr . ReadToEnd();
}上述就是小编为大家分享的锋利的爬虫程序配置代理互联网协议(互联网协议的缩写)的示例分析了,如果刚好有类似的疑惑,不妨参照上述分析进行理解。如果想知道更多相关知识,欢迎关注行业资讯频道。
内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/54361.html