我们在采集一个目标网站时,为了不让网站管理员发现有人在采集他的网站而封掉我们服务器的IP,这时就需要使用代理IP来间接采集目标网站。但是单一使用某一个代理IP去采集,还是很容易被网站管理员发现而封掉这个代理IP,这就需要使用随机代理IP。我们在使用火车头采集器时,目前在旗舰版以下的所有版本,官方禁止使用【随机代理IP】的功能,其实只要想点办法,就可以实现随机代理IP采集功能。下面做详细介绍:
1、打开火车采集器的一项任务:【文件保存及部分高级设置】,这里有代理IP的设置选项,我们选择“使用IE浏览器代理”
2、设置IE浏览器代理选项: 右键 IE浏览器-属性-连接-局域网设置
在“使用自动配置脚本”前打√,并在地址里输入:file://d:/ipcn.pac(这里的路径可以修改,但要注意格式,也可以用http://绝对路径的格式)
3、编辑ipcn.pac文件
在D盘新建记事本文档,打开并输入如下代码保存,最后将文件名改为:ipcn.pac
function FindProxyForURL(url,host)
{
return randomProxy();
}
function randomProxy()
{
switch(Math.floor( Math.random() * 9 ))//以下9组代理IP地址根据需要可自行修改
{
case 0:
return "PROXY 14.18.16.66:80";
break;
case 1:
return "PROXY 27.24.158.151:80";
break;
case 2:
return "PROXY 61.174.9.96:8080";
break;
case 3:
return "PROXY 61.147.82.87:8000";
break;
case 4:
return "PROXY 14.18.17.166:80";
break;
case 5:
return "PROXY 61.147.107.18:808";
break;
case 6:
return "PROXY 59.172.208.189:8080";
break;
case 7:
return "PROXY 59.172.208.186:8080";
break;
case 8:
return "PROXY 14.18.16.67:80";
break;
}
}
其中有9组IP地址可以更改成你想要IP的代理地址。
这样在采集目标网站时,就会随机使用这里的代理IP访问目标网站,避免暴露了你服务器的真实IP而被禁止。
猜你喜欢
点击排行



-
笔记本电脑连不上WIFI、这些操作教你完美解决问题
使用自己的笔记本电脑连接无线WIFI进行联网办公是职场人员最常见的办公方式,奈何在实际使用中经常有一些人会出现连接不上无线WIFI的情况,小编对连接不上WIFI的情况进行了一笔记本电脑连不上WIFI、这些操作教你完美解决问题...
-
什么是垂直网站有哪些特点
相信很多人都听说过垂直领域,垂直管理,那么你了解什么是垂直网站吗?垂直网站有哪些优势?一、什么是垂直网站?垂直网站就是垂直某一项服务或者某一项领域,注意力集中在某些特定的领域或某种特定的需求,提供有关这个领域或需求的全部深度信息和相关服务。如:教育网、育儿网,这些都更加专注于为特定的人群提供相应的服务。细化下:教育网只为传授有用知识。育儿网更多为了家有孩子的用户群体。安卓手机网这样的网站就为网站相...
-
网站外链对于SEO还有多大帮助
第一,先了解一下外链具体有哪些作用?1、提升营销型网站权重、提升关键词排名;2、吸引搜索引擎蜘蛛爬行网站,抓取营销型网站的内容;3、利用外链推广做长尾关键词排名获取目网站外链对于SEO还有多大帮助...
-
苹果cmsv10模板标签限制输出内容长度的要领
例如:影片简介限制输出长度?{$obj.vod_content} 这个是影片简介标签,限制它输出长度的方法是 {$obj.vod_content|mac_substring=50} 这样就限制长度为50个字符了苹果cmsv10模板标签限制输出内容长度的方法...
-
租用香港服务器的网站如何更换IP
IP 是一个网站的身份证,也可以称为互联网地址,是用来唯一标识互联网上计算机的逻辑地址。通过IP地址,用户可以准确的找到网站。很多用户在进行香港服务器租用或者香港服务器托管过程中,经常会因为业务、客户等问题导致更换IP或者重新增加IP,那么有没有什么需要注意的?香港服务器租用更换IP的操作步骤有哪些?步骤一、首先确认香港服务器新IP是否安全你能从空间商那里得到要更换到的新IP,可以通过一些IP反查...