如何验证爬虫IP地址的有效性？

本文共计703个文字，预计阅读时间需要3分钟。

网络爬虫的应用极大地方便了人们，尤其是在多线程多任务工作时，能极大地提高信息采集工作的效率。在使用爬虫IP时，经常会遇到代理时效性问题，那么我们该如何检测代理是否正常呢？

网络爬虫的应用极大的方便了人们，尤其是多线程多任务工作时，能够极大的提高信息采集工作效率。在使用爬虫IP时，经常会遇到代理时效的问题，那么我们该怎么检测代理是否正常 ？

静态独享、动态共享和动态独享通过API获取爬虫ip列表后，您就可以在程序里通过代理服务器获取网页数据。

隧道代理无需调用API获取代理，直接查看隧道的IP和端口号。

您获取的爬虫ip是这样的：122.96.59.105:23068 122.96.59.105 是代理服务器的IP地址；23068 是代理服务器的端口号。

爬虫IP验证

使用静态独享、动态独享和动态共享的IP需要进行授权验证，购买后只有通过您的用户名密码或设置您的IP白名单后才能使用。

隧道共享则是通过访问青果隧道服务器，服务器访问只对您的业务授权使用，同时支持用户名密码（Authkey和Authpwd）和IP白名单。

我们支持两种验证方式：

1、绑定您机器的IP作为白名单

如果是办公室电脑，可以访问 ip138.com 查询您的外网IP；

如果是Linux服务器，可以通过如下命令查看机器外网IP：curl d.qg.net/ip

进入平台中心，找到您所在的产品，管理白名单(包括添加删除白名单)，白名单设置详情如下图：

image-20211026174537109image-20211026174620025

2、帐密验证

进入平台，在您所在的爬虫ip业务找到用于爬虫ip验证的用户名密钥信息（Authkey和Authpwd）。