Luminati(BrightData) 路觅 Unblocker解锁器

你想抓取网站数据但是不会写程序,要高价购买爬虫程序?
你想抓取网站数据但是总是被阻止?
你想抓取网站数据但是总是被验证码阻止?
Luminati充分利用其在该领域的专业知识并创建了Unblocker解锁器。这是第一款无阻塞软件,可自动进行IP管理并将您的请求升级,使其看起来像一个真正的浏览器。无需特殊配置或经验,即可让您在爬虫抓取方面取得100%的成功率。
这个功能强大的工具可以为您节省时间、开发成本以及处理错误、重试和部分/不正确数据的麻烦。使用Unblocker解锁器,您只需要发送一个请求,我们将在后台进行处理,确保您不会被屏蔽并获得最准确的数据。

使用Unblocker解锁器不需要任何特殊集成或新的价格方案。您可以像使用动态住宅通道一样使用它,无需额外费用,可通过API终端或LPM(Luminati代理管理器)使用。
*标头
Unblocker解锁器将自动管理标头,使其看起来像是来自一个真实浏览器的请求一样(例如,如果模仿谷歌Chrome,unblocker解锁器就会添加Chrome会发送的所有标头,同时删除Chrome不会发送的标头).Unblocker解锁器也会通过不同的浏览器进行自动切换。换言之,您根本不需要担心标头的问题。
*协议
互联网在不同的协议上运行,比如 HTTP/1、HTTP/1.1、HTTP/2以及将来的QUIC(HTTP/3)。大多数的爬虫抓取都使用HTTP/1.1,浏览器则多使用HTTP/2。Unblocker解锁器将请求协议升级为浏览器。也就是说,无论现在还是将来,您只需要发送简单的请求,而无需担心如何为您的请求选择正确的协议。
*国家/IP选择
Unblocker解锁器还会尝试将请求与要发送的最佳对等IP进行匹配。这包括选择与目标站点匹配的国家以及在IP之间传播请求,以确保我们不会从同一个IP发送过多的请求。换句话说,您根本不需要担心IP的切换。
*防指纹识别
一些目标网站会查看某些有效请求,如果发现是机器人就会将其屏蔽。如下是指纹识别的一些示例:
- 用户代理
- 接受语言
- 从用户代理标头发送与浏览器匹配的正确标头(accept-language 接受语言、accept-encoding 接受编码、upgrade-connection 升级连接等)
- 标头的顺序
- 标头的大写
- HTTP版本
- HTTP2设置
- TLS设置(扩展名、密码列表等)
- 是否发送cookie(cookie通常不利于抓取)
- IP国家
- IP网络
Unblocker解锁器可处理大多数的这些情况并且不断改进以解决更多类似的问题,也就是说,您不需要担心指纹识别的问题。
怎样开始?
使用Unblocker解锁器就像使用一个新的分区通道一样容易。具体方法如下:
API:
通过我们的API来发送您的第一个请求:
curl --proxy zproxy.lum-superproxy.io:22225 --proxy-user lum-customer-{your_customer_id}-zone-{your_zone}-unblock:{zone_password} -k
"http://lumtest.com/myip.json"
您将从Unblocker解锁器获得相同的内容格式,就像您在没有代理的情况下请求数据一样(如果之前有HTML,那么您仍然可以用Unblocker获取HTML)。
LPM(Luminati代理管理器):
在Unblocker解锁器通道创建一个新的端口:
单击添加新端口(例如24001)-> 选择通道区域:Unblocker-> 保存。
通过新端口发送您的请求:
curl --proxy 127.0.0.1:24001 "http://lumtest.com/myip.json"
