使用Google自定义搜索作为图像抓取工具吗?

问题描述 投票:0回答:1

我想抓取与特定文本重合的图像。我希望它过滤这些,定期检查新图像,然后将结果上传到程序。

我必须建立一个网站来做到这一点吗?有更好的工具吗?哪种方法最简单?我对文档有些不知所措。

filter web-scraping image-uploading google-custom-search
1个回答
0
投票

我建议您使用Google搜索抓取与特定文本一致的图像。请记住,google对网络抓取非常敏感,尤其是对于服务器频繁请求搜索页面的情况。阅读this post以进入它(搜索结果页面在某种程度上类似于查询business directories)。

我必须建立一个网站来做到这一点吗?

绝对不(对于Google常规搜索)。如果要使用Google自定义搜索,则需要设置一个网站。

有更好的工具吗?

我认为最好的方法是自定义刮板(python,php)。但是同样,请以一定的速度抓取,以免Google禁止您或拒绝CAPTCHA

哪种方法最简单?

如果您缺乏编程技能,请转到the web scraping software

© www.soinside.com 2019 - 2024. All rights reserved.