我如何使用 IPRoyal 住宅代理抓取 linkedin?

问题描述 投票:0回答:0

您好,我购买了一个 IPRoyal 住宅代理,我已经按照有关如何将其与我的 scrapy 脚本集成以抓取 linkedin 公共资料的说明进行操作。但是每当我尝试在我的终端中运行

scrapy shell https://www.linkedin.com/in/reidhoffman
时,我都会收到
DEBUG: Crawled (999) <GET https://www.linkedin.com/in/reidhoffman> (referer: None)
错误消息。另外,当我检查
response
时,我得到
<999 https://www.linkedin.com/in/reidhoffman>
。这是什么意思,我如何让我的代理工作并为我抓取 linkedin?

python proxy linkedin
© www.soinside.com 2019 - 2024. All rights reserved.