使用 Puppeteer 绕过 Cloudflare

Question

我正在尝试使用我的 Puppeteer 进入 hotbit.io。但当 puppeteer 尝试进入页面时，我遇到了“在访问 www.hotbit.io 之前检查您的浏览器”。 当我以“headless: false”运行程序时，它会在 5 秒后重定向到该页面。但我的问题是，我想以无头方式运行它：true。 当我在 headless: true 中运行它时，它在 cloudflare 页面上超时

我已经尝试过：

• “傀儡师-额外插件-隐形”
• “Cloudflare-scraper (https://www.npmjs.com/package/cloudflare-scraper)”。这有非常有限的文档（不存在），但我在他们的 github 上的“问题”下看到，它不再受支持。

cloudflare 似乎知道我正在激活无头功能。

有人知道如何跳过cloudflare重定向页面吗？

Answer 1

谢谢@BGPHiJACK！

它通过将用户代理设置为：Mozilla/5.0（Windows NT 5.1；rv:5.0）Gecko/20100101 Firefox/5.0

所以在我初始化页面后，我设置了用户代理。

const page = await browser.newPage();
    
await page.setUserAgent('Mozilla/5.0 (Windows NT 5.1; rv:5.0) Gecko/20100101 Firefox/5.0')

Answer 2

Cloudflare 已更新，现在像 puppeteer-extra-plugin-stealth 或更改 UserAgent 这样的插件不起作用。 npm 中有一个模块允许我访问 cloudflare 受保护的站点。 https://www.npmjs.com/package/antibotbrowser