我应该如何设置 PyQuery 用户代理?

问题描述 投票:0回答:1

使用 pyquery 抓取 HTML 时,检索页面时如何设置浏览器字符串?

import pyquery
pqobj = pyquery.PyQuery(url="https://www.cisco.com/")
html = pqobj.html()
plain_text = pqobj.text()
python html web-scraping browser
1个回答
0
投票

如何设置浏览器字符串?

使用标题选项...

import pyquery
pqobj = pyquery.PyQuery(
    url="https://www.cisco.com/",
    headers={"user-agent": "Foo Browser version 0.1"})
html = pqobj.html()
plain_text = pqobj.text()
© www.soinside.com 2019 - 2024. All rights reserved.