通过简单的Google搜索可以轻松找到大量的代理服务器列表。每天,甚至每小时,都会弹出新的代理服务器,其中一些服务器仅持续几天。选择一个可信且合法的代理服务器非常重要,该服务器不仅对赚钱和/或窃取您的个人和企业信息感兴趣,还对他们感兴趣。
尽管大多数人认为独享代理优于公共代理——即所有人都可使用的代理,但公共代理也有很多好处。例如:
- 很多公共代理都是免费的。
- 它们对于需要多个代理但仅使用几个小时的代理的罕见用户很有用
- 公共代理对某些需要从互联网获取日期的SEO软件会有所帮助(例如关键字排名或网页排名)。
- 公共代理服务器也可以与Web浏览器和其他支持代理使用的应用程序一起使用。
目录
使用公共代理的警告
无论公共代理的优点是什么,您都希望避免完全通过未知的代理服务器重定向您的浏览。如果你正在使用密码,这一点尤其重要。
如果您确信要使用公共代理,建议您遵循以下简单提示,并采取预防措施以确保自己计算机的安全:
- 检查域的创建时间。
使用Web代理站点浏览之前,请转到whois.domaintools.com,在此处输入域名,然后查看其创建时间。如果它是在不到两年时间内创建的,则可能要谨慎使用它。域和网站越旧越好。
- 隐私权。
确保代理服务器仅对您的IP私有。如果不是唯一的,它将在以后的网上冲浪过程中引起问题。
- 检查免责声明或服务条款。
作为可靠站点的代理URL可以轻松访问免责声明或服务条款。最好的公司也提供他们的隐私政策。
在选择代理服务器之前,需要做很多研究。在选择免费的公共代理服务器之前,请访问著名的博客,阅读评论并探索几种选择。
- 别人的评价。
来自其他用户的评论通常是诚实的,并且有助于确定代理列表的可靠性和诚实性。
- 避免代理“超时”。
免费的公共代理通常“ 超时 ”, 因为代理服务器可能不再存在,或者该服务器花费太长时间来回复来自另一台设备的数据请求。社区博客和评论应该能够帮助您摆脱不信任的公共代理。
尽管大多数技术专家对公共代理服务器的安全性、可靠性保留态度,但仍可以找到可以提供优质服务的公共代理服务器。
很少有网站提供公共代理时,愿意实时测试检查代理,去除死代理有一定的一致性,所以要小心谨慎。
研究代理
代理身份识别是在线欺诈检测应用程序的重要组成部分。如果您对公共代理或免费代理(尤其是来自美国以外的代理)保持警惕,则您是明智的消费者。
免费公共列表上的大多数代理列表通常都指示代理的原籍国。由于您经常需要实际位于特定国家/地区的代理,因此需要理解这些相关(且必要)信息。通常,如果代理位于您工作的国家/地区,则代理会更快。
在开始使用代理并传达您的私人信息和数据之前,还有更多的理由要研究和测试代理。
有可用的软件程序来检查代理的速度。代理服务器的速度可能因以下因素而异:
- 当前使用该代理的用户数量(主要发生在免费的公共代理而非独享代理中)
- 用户和代理服务器的位置。例如,对于美国用户来说快的代理对于欧洲用户而说可能较慢
代理检查器
有一些很好的代理检查器,可以让您每分钟检查数百个代理。但要小心,因为它可能会在你的代理检查期间让不需要的“眼睛”进入。
ZennoProxyChecker有一个内置的程序检查代理对20个参数排序出最危险和选择最好和最快的代理。
Charon是另一个多功能代理程序。它在Google上搜索公开发布的代理服务器列表,并合并了一个检查器以验证代理服务器的匿名性和功能。
另一个是ScrapeBox。ScrapeBox中包括功能强大的代理收割机和测试仪。这个方便的代理检查器使您可以检查代理是否正常工作。
相关: 为什么ScrapeBox上的收割机无法正常工作。
由于代理网站的列表每天都会发布,因此几乎不可能手动访问每个网站并对其进行测试。ScrapeBox的代理管理器提供了一个简单得多的解决方案。它具有22个内置的代理源,并且它允许您通过添加发布代理的任何站点的URL来添加自定义源。
当您在ScrapeBox中运行Proxy Harvester时,它将访问每个网站并从页面中提取所有代理,并自动删除可能在多个网站上发布的重复代理。因此,只需单击一下,您就可以从众多网站中获取数千个代理。
许多网站每天发布代理列表。在理想的情况下,您可以手动访问这些站点,然后将列表复制到另一个工具中进行测试,然后将工作代理列表复制到最终要在其中使用的工具。ScrapeBox代理管理器显然是一种简单得多的解决方案。
接下来,ScrapeBox代理测试器还可以对您抓取的代理进行大量检查。有一些选项可以删除或仅保留特定端口的代理,保留或删除特定国家/地区的代理,您甚至可以测试需要用户名和密码进行身份验证的独享代理。最后,代理测试人员可以通过在Google上执行搜索查询并查看是否返回搜索结果,来测试代理是否与Google合作。这样,您可以过滤代理以便从Google收集URL时使用。
代理测试完成后,ScrapeBox将提供很多选择,例如:
- 能够重新测试失败的代理
- 重新测试任何未检查的代理,以便您可以在任何时候停止并重新开始您离开的地方,或者您可以突出显示并重新测试特定的代理
- 在设定的时间间隔测试代理,然后保存“好的代理”到文件。这是一个巨大的好处,因为您将始终有新的代理可用
- 添加关键字,以过滤掉竞争对手、域名的竞争对手或大公司
- 按所有字段(例如IP地址和端口号)对代理进行排序
- 按速度过滤代理并仅保留最快的代理
- 查看代理并仅保留匿名代理或仅保留Google通过的代理
- 对代理源进行分类,因此在测试代理时,ScrapeBox可以记住哪些代理来自什么源。最重要的是,完成所有收获和分类后,可以将代理保存到文本文件中。
下一步:验证
为了使您的代理与URL Profiler一起使用,它们需要进行身份验证。使用独享代理时,您可以通过IP地址或用户名和密码进行身份验证。如果您的代理未通过身份验证,则ScrapeBox将针对该特定代理URL回复“失败”消息。
ScrapeBox代理收割机的主要好处是具有“可培训代理扫描程序”功能。这意味着您可以完全配置要爬网的位置并满足业务的任何特定需求。
最后,在为浏览器设置匿名代理或高级匿名代理之后,您可以浏览此页面以测试您的真实IP是否被隐藏,或者您使用的代理是否是匿名的。
导出代理列表
大多数代理检查器工具在其网站上或通过YouTube提供教程。
例如,scrapeBox提供了一个名为“ Whois Scraper”的插件。购买ScrapeBox时,此工具是免费提供的,并允许简单的excel数据导出。它允许您将所有“ whois”数据导出到Excel .xlsx文件。导出的信息包含您将需要的所有相关信息,包括:
- 域名
- 注册日期
- 到期日
- 注册人名字
- 注册人电子邮件
- 注册人电话号码
阅读更多内容, 使用代理来擦除Whois域数据。
结论
尽管公共代理服务器可能有一些优势,但风险往往大于收益,更好的选择是独享代理,其他任何人都不能访问它,并且可以提高匿名性和安全性——使用任何类型的服务器时,这是两个重要方面。选择一个不可信的代理站点可能会导致长期的问题,不会有人愿意遇到这些问题。
- 共享代理初学者指南:什么是共享代理?为什么便宜?
- 如何使用旋转代理列表
- 我应该为GSA SER(搜索引擎排名)使用哪些代理?