screen-scraping 相关问题

屏幕抓取(也称为网络抓取或数据抓取)是一种用于从用户界面收集和解析信息的软件技术。如果您的问题是关于从网站或Web-API进行抓取,请使用[web-scraping]标记。

尝试抓取网址

因此,我试图从免费游戏网站上获取所有网址,但该网址始终返回空白。我不知道我在做什么错,下图显示了路径结果= request.get(“ ...

回答 1 投票 0

我可以从Python的html文件中抓取表格吗?

我想从此文本文件text_file中刮除该表,而我想要的表是Summary Summary,合并财务和其他数据。 BeautifulSoup.content给我的代码如下:The Origin ...

回答 1 投票 0

我想在此文本文件中替换表格“收益的使用”。我有办法在python中做吗?

我是python网络抓取的新手。我正在尝试从文本文件text_file上删除表格。附加了文本文件,我想将“收益使用”表刮到excel文件中,或将其刮到...

回答 1 投票 0

无法从包含过滤器的网站中提取文本

我正在尝试使用Python和Requests和BeautifulSoup来从以下网站(www.mars.com/locations)中获取所有位置。该网站有一个筛选器,可以选择大洲,国家和地区...

回答 1 投票 0

Python Chrome驱动程序,单击Safari Web浏览器上的阅读器视图

[抓取网站时如何在Safari浏览器中单击“阅读器视图”?网址:https://www.w3resource.com/java-exercises/collection/index.php我需要一个Python脚本来单击阅读器视图,然后复制所有...

回答 1 投票 0

向amazon.in发送GET请求,但Web服务器以响应代码503响应,该怎么办?

这是我的代码:整个脚本在最初的2-3次中运行良好,但现在不断发送503个响应。我多次检查了Internet,但是...没有任何问题...

回答 1 投票 0

单击网站上的按钮,然后抓取网页

我有一个网站,我想单击一个按钮,然后使用python刮取该网站,该按钮之间的html代码为:

回答 2 投票 5

python,beautifulsoup标记似乎为无类型

在此处输入图像描述,在此代码中,type(tag)返回“ Nonetype”,但我必须看到bs4.element.tag而不是nonetype。我的代码有问题吗?

回答 1 投票 0

Web Scraping,脚本返回AttributeError:“ NoneType”

嘿StackOverFlow社区!我正在尝试构建代码以从网站抓取财务数据并将其记录到excel文件中。为此,我需要先学会抓取并使用FreeCodeCamp的...

回答 1 投票 0

Webscraping Python超时

Python Web Scraping-在访问公司/办公室网络中的某些公共站点时获得超时连接。要避免这种情况的任何设置/代理? 。任何建议...

回答 1 投票 -3

写入txt文件多个字符串,仅保存最后一个字符串?

我知道这是一个重复的问题,但是从网络上的所有答案中我都找不到解决方案,因为所有抛出错误。只需尝试从Web抓取标题并将其保存到txt文件即可。 ...

回答 1 投票 0

如何分别打印CLI项目的名称和URL?

我正在构建吉他浏览CLI。如您在此处看到的,我将吉他的名称和URL放入了一系列哈希值:def self.get_electric doc = Nokogiri :: HTML(open(“ https://reverb.com/c / ...

回答 1 投票 1

我正在使用cheerio从https://www.nba.com/players/langston/galloway/204038中获取统计信息,但我无法显示表格数据

[[我想访问的信息] [1] [1]:https://i.stack.imgur.com/4SpCU.png不管我做什么,我都无法访问统计信息表。我怀疑这与多人有关...

回答 1 投票 0

我可以使用img标签的BeautifulSoup刮取“ value”属性吗?

我一直在测试我对Web抓取的理解,并且无法将特定值拉到img标签内的属性。我可以缩小到适当的前导标签,但是一旦我尝试拉出...

回答 1 投票 0

我正在尝试在“ https://dribbble.com/jobs”上刮擦公司的名称

当我尝试以下代码时,它只会再次返回第一项。我是python新手,不胜感激。从硒中以pd格式导入熊猫从时间导入睡眠中导入webdriver ...

回答 2 投票 0

无法创建数据框并将其数据正确填充到csv文件中

我希望仅使用两个简单的信息就可以删除此链接,但是我不知道为什么会有这个结果,并且它不能为我提供我要搜索的所有数据:...

回答 1 投票 0

组织名称(发现是在网上搜刮),以将其用作请求中的输入

我曾使用Crawler收集一些著名艺术家,歌手,音乐家,团体的名字。我列表中的许多名称都是结构化的,名称前有姓,中间是逗号。我写...

回答 1 投票 0

使用python从网页的“值”中获取数字

所以我用python打开了一个网页,其中python将在一个框中输入一个数字(数量),例如100,然后该网站在另一个框中生成一个数字(数量),反之亦然,价格每变化一次...] >

回答 1 投票 0

Puppeteer为什么不在文本字段中键入任何内容?

我正在制作一个需要在用户在网站上注册或更新个人资料时将用户与第三方网站同步的应用程序。我已经让Puppeteer登录,然后导航...

回答 2 投票 0

如何通过python webScrapping避免“请确认您是人类”?

我一直在尝试使用python获取网站的一些信息。我曾尝试使用请求和硒来获取网站的HTML代码,但我总是会得到此HTML。我猜是网站...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.