beautifulsoup 相关问题

Beautiful Soup是一个用于解析HTML / XML的Python包。此软件包的最新版本是版本4,导入为bs4。

无法使用发布请求获取某些项目

我在python中编写了一个脚本来获取网站上的课程材料列表。要显示课程资料,有必要填写一些可以找到的输入如果您跟踪查找...

回答 1 投票 1

BeautifulSoup无法使用ID找到Div

我正试图从亚马逊刮取价格并使用请求和BeautifulSoup4。脚本的片段如下:headers = {'User-Agent':'Mozilla / 5.0(Macintosh; Intel Mac OS X 10_10_1)...

回答 1 投票 0

从没有要与BeautifulSoup一起使用的表元素的html创建csv文件

预先感谢您的任何帮助。我有一个与CFTC网址相关的当前CSV历史数据:https://www.cftc.gov/dea/options/other_lof.htm我希望创建一个脚本来提取数据...

回答 2 投票 0

BeautifulSoup无法从页面中找到数据[重复]

我试图从我的NFL Fantasy足球联赛中使用以下代码网站提取数据=“http://fantasy.nfl.com/league/XXXXXXX”req = requests.get(site)soup = BeautifulSoup(req.text,“ html5lib“)...

回答 1 投票 0

无法限制我的脚本来解析网页中的特定部分

我在python中编写了一个脚本来从Ppage中删除Plot中的描述。事情是描述在几个p标签内。还有其他p标签,我不希望......

回答 2 投票 1

如何从url字符串中的列表传递值

我有这个Python脚本的问题。我正在尝试从包含主字符串的列表中传递值。我附上了剧本。在此命令页面中= requests.get(“https://www.google ....

回答 2 投票 1

我怎么能抓住所有的 contents?(python3.6)

当使用python3和BeautifulSoup从Web获取指定的内容时,我无法获得“td”中的所有信息。这是我从bs4导入的代码导入请求BeautifulSoup def ...

回答 3 投票 0

如何从html页面过滤其中包含文本的HTML节点

我是网络抓取新手,遇到问题我使用BeautifulSoup来抓取网页。我想获得其中包含文本的节点。我尝试使用像这样的汤= ...的get_text()方法

回答 1 投票 1

如何获得匹配给定正则表达式的所有xpath?

是否有任何python库有助于获取与给定正则表达式匹配的dom节点的xpath?我试图从faq页面获取问题和答案对这些是三个不同的...

回答 2 投票 0

如何向下滚动并单击按钮以在python中连续网页抓取页面

我想废弃整个页面以获取帐户的链接,但问题是:我需要多次点击加载更多按钮以获取要废弃的帐户的完整列表有一个偶尔出现的弹出窗口如何...

回答 1 投票 1

BeautifulSoup - 如何获取两个不同标签之间的所有文本?

我想获得两个标签之间的所有文本: I DONT WANT this #many different tags - p, table, h2 including text that I want ...

回答 2 投票 5

如何使用beautifulsoup刮掉整个网站

我特别喜欢编程和OO编程。尽管如此,我正在尝试编写一个非常简单的Spider来进行网络爬行。这是我的第一种方法:我需要从中获取数据......

回答 1 投票 5

使用beautifulsoup4进行xml解析,命名空间问题

在使用beautifulsoup4(根据需要安装了lxml)以xml(word / document.xml)的形式解析.docx文件内容时,我遇到了一个问题。这部分来自xml:...

回答 2 投票 7

Python Beautiful Soup包含JSP / JS的页面

我正试图从这个页面中刮取价格:url = https://www.renodepot.com/en/steph-round-base-shower-kit-69375118价格信息在span标签中给出,我无法抓它。 ...

回答 1 投票 0

如何使用beautifulsoup打印href属性,同时通过硒自动化?

蓝色元素的href值是我想要从这个HTML访问我尝试了几种方法来打印链接,但没有工作。我的代码如下: - discover_page = BeautifulSoup(r.text,'html.parser')...

回答 3 投票 0

无法在python中访问带有请求的网页

在讨论了我的问题后,无法使用beautifulsoup打印链接,同时通过selenium自动化,我意识到主要问题是在URL中请求无法...

回答 1 投票 1

需要帮助获取代码以循环访问网站

如何让这段代码通过网站的所有430页并输出到文件? >>>导入请求,bs4 >>> resp = requests.get('https://everythingrs.com/tools/osrs / ...

回答 1 投票 0

使用BeautifulSoup从html文件中提取特定文本

我有一个如下所示的代码。我正在使用BeautifulSoup来抓取class ='product'中的文本。但我只想在我提取的csv文件中使用第2和第4个值(即'Product 2'和'Product 4')。截至目前我...

回答 1 投票 -1

美丽的汤留下标签

我想用python解析一个HTML文件,但BeautifulSoup省略了一些关键标签。网站上的HTML文件部分看起来像这样,包含所有子节点。 HTML片段...

回答 1 投票 1

BeautifulSoup和scraping href是行不通的

再次,我在BeautifulSoup中刮掉href的时候遇到了麻烦。我有一个我正在抓取的页面列表,我有数据,但即使我使用各种代码工作,我也似乎无法得到hrefs ...

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.