公共代理

通过简单的Google搜索可以轻松找到大量的代理服务器列表。每天,甚至每小时,都会弹出新的代理服务器,其中一些服务器仅持续几天。选择一个可信且合法的代理服务器非常重要,该服务器不仅对赚钱和/或窃取您的个人和企业信息感兴趣,还对他们感兴趣。

尽管大多数人认为独享代理优于公共代理——即所有人都可使用的代理,但公共代理也有很多好处。例如:

  • 很多公共代理都是免费的
  • 它们对于需要多个代理但仅使用几个小时的代理的罕见用户很有用
  • 公共代理对某些需要从互联网获取日期的SEO软件会有所帮助(例如关键字排名或网页排名)。
  • 公共代理服务器也可以与Web浏览器和其他支持代理使用的应用程序一起使用。

使用公共代理的警告

无论公共代理的优点是什么,您都希望避免完全通过未知的代理服务器重定向您的浏览。如果你正在使用密码,这一点尤其重要。

如果您确信要使用公共代理,建议您遵循以下简单提示,并采取预防措施以确保自己计算机的安全:

  • 检查域的创建时间

使用Web代理站点浏览之前,请转到whois.domaintools.com,在此处输入域名,然后查看其创建时间。如果它是在不到两年时间内创建的,则可能要谨慎使用它。域和网站越旧越好。

  • 隐私权

确保代理服务器仅对您的IP私有。如果不是唯一的,它将在以后的网上冲浪过程中引起问题。

  • 检查免责声明或服务条款。

作为可靠站点的代理URL可以轻松访问免责声明或服务条款。最好的公司也提供他们的隐私政策。

在选择代理服务器之前,需要做很多研究。在选择免费的公共代理服务器之前,请访问著名的博客,阅读评论并探索几种选择。

  • 别人的评价

来自其他用户的评论通常是诚实的,并且有助于确定代理列表的可靠性和诚实性。

  • 避免代理“超时”。

免费的公共代理通常“ 超时 ”, 因为代理服务器可能不再存在,或者该服务器花费太长时间来回复来自另一台设备的数据请求。社区博客和评论应该能够帮助您摆脱不信任的公共代理。

尽管大多数技术专家对公共代理服务器的安全性、可靠性保留态度,但仍可以找到可以提供优质服务的公共代理服务器。

很少有网站提供公共代理时,愿意实时测试检查代理,去除死代理有一定的一致性,所以要小心谨慎。


研究代理

代理身份识别是在线欺诈检测应用程序的重要组成部分。如果您对公共代理或免费代理(尤其是来自美国以外的代理)保持警惕,则您是明智的消费者。

免费公共列表上的大多数代理列表通常都指示代理的原籍国。由于您经常需要实际位于特定国家/地区的代理,因此需要理解这些相关(且必要)信息。通常,如果代理位于您工作的国家/地区,则代理会更快。

在开始使用代理并传达您的私人信息和数据之前,还有更多的理由要研究和测试代理。

有可用的软件程序来检查代理的速度。代理服务器的速度可能因以下因素而异:

  • 当前使用该代理的用户数量(主要发生在免费的公共代理而非独享代理中)
  • 用户和代理服务器的位置。例如,对于美国用户来说快的代理对于欧洲用户而说可能较慢

代理检查器

一些很好的代理检查器,可以让您每分钟检查数百个代理。但要小心,因为它可能会在你的代理检查期间让不需要的“眼睛”进入。

ZennoProxyChecker有一个内置的程序检查代理对20个参数排序出最危险和选择最好和最快的代理。

Charon是另一个多功能代理程序。它在Google上搜索公开发布的代理服务器列表,并合并了一个检查器以验证代理服务器的匿名性和功能。

另一个是ScrapeBox。ScrapeBox中包括功能强大的代理收割机和测试仪。这个方便的代理检查器使您可以检查代理是否正常工作。

相关:  为什么ScrapeBox上的收割机无法正常工作

由于代理网站的列表每天都会发布,因此几乎不可能手动访问每个网站并对其进行测试。ScrapeBox的代理管理器提供了一个简单得多的解决方案。它具有22个内置的代理源,并且它允许您通过添加发布代理的任何站点的URL来添加自定义源。

当您在ScrapeBox中运行Proxy Harvester时,它将访问每个网站并从页面中提取所有代理,并自动删除可能在多个网站上发布的重复代理。因此,只需单击一下,您就可以从众多网站中获取数千个代理。

许多网站每天发布代理列表。在理想的情况下,您可以手动访问这些站点,然后将列表复制到另一个工具中进行测试,然后将工作代理列表复制到最终要在其中使用的工具。ScrapeBox代理管理器显然是一种简单得多的解决方案。

接下来,ScrapeBox代理测试器还可以对您抓取的代理进行大量检查。有一些选项可以删除或仅保留特定端口的代理,保留或删除特定国家/地区的代理,您甚至可以测试需要用户名和密码进行身份验证的独享代理。最后,代理测试人员可以通过在Google上执行搜索查询并查看是否返回搜索结果,来测试代理是否与Google合作。这样,您可以过滤代理以便从Google收集URL时使用。

代理测试完成后,ScrapeBox将提供很多选择,例如:

  • 能够重新测试失败的代理
  • 重新测试任何未检查的代理,以便您可以在任何时候停止并重新开始您离开的地方,或者您可以突出显示并重新测试特定的代理
  • 在设定的时间间隔测试代理,然后保存“好的代理”到文件。这是一个巨大的好处,因为您将始终有新的代理可用
  • 添加关键字,以过滤掉竞争对手、域名的竞争对手或大公司
  • 按所有字段(例如IP地址和端口号)对代理进行排序
  • 按速度过滤代理并仅保留最快的代理
  • 查看代理并仅保留匿名代理或仅保留Google通过的代理
  • 对代理源进行分类,因此在测试代理时,ScrapeBox可以记住哪些代理来自什么源。最重要的是,完成所有收获和分类后,可以将代理保存到文本文件中。

下一步:验证

为了使您的代理与URL Profiler一起使用,它们需要进行身份验证。使用独享代理时,您可以通过IP地址或用户名和密码进行身份验证。如果您的代理未通过身份验证,则ScrapeBox将针对该特定代理URL回复“失败”消息。

ScrapeBox代理收割机的主要好处是具有“可培训代理扫描程序”功能。这意味着您可以完全配置要爬网的位置并满足业务的任何特定需求。

最后,在为浏览器设置匿名代理或高级匿名代理之后,您可以浏览此页面以测试您的真实IP是否被隐藏,或者您使用的代理是否是匿名的。


导出代理列表

大多数代理检查器工具在其网站上或通过YouTube提供教程。

例如,scrapeBox提供了一个名为“ Whois Scraper”的插件。购买ScrapeBox时,此工具是免费提供的,并允许简单的excel数据导出。它允许您将所有“ whois”数据导出到Excel .xlsx文件。导出的信息包含您将需要的所有相关信息,包括:

  • 域名
  • 注册日期
  • 到期日
  • 注册人名字
  • 注册人电子邮件
  • 注册人电话号码

阅读更多内容,  使用代理来擦除Whois域数据


结论

尽管公共代理服务器可能有一些优势,但风险往往大于收益,更好的选择是独享代理,其他任何人都不能访问它,并且可以提高匿名性和安全性——使用任何类型的服务器时,这是两个重要方面。选择一个不可信的代理站点可能会导致长期的问题,不会有人愿意遇到这些问题。


  • 共享代理初学者指南:什么是共享代理?为什么便宜?
  • 如何使用旋转代理列表
  • 我应该为GSA SER(搜索引擎排名)使用哪些代理?