我们如何使抓取看起来像真实的人浏览

Question

所以我正在整理一个网站，但有时我会在几分钟内受到限制我在我的代码中使用标题来清理但我想知道我们还能做些什么来使自己看起来像一个真实的人，而不是只是一个机器人

我研究了一下，发现我们也可以使我们的[[拖拉速度稍微慢一些]]绕过检测想听听您的想法和建议

ua=UserAgent()
   hdr = {'User-Agent': ua.random,
  'Accept-Charset': 'ISO-8859-1,utf-8;q=0.7,*;q=0.3',
  'Accept-Encoding': 'none',
  'Accept-Language': 'en-US,en;q=0.8',
  'Connection': 'keep-alive'}

不得不把这段代码放进去，因为它不允许我发布它

所以我在整理一个网站，但有时我会被限制在几分钟内，我在我的代码中使用标头进行整理，但我想知道还有更多的方法可以使我们看起来像一个...

Answer 1

您可以做的一件事是让您的时间睡眠变得随机。机器人是步调一致，人类是飘忽不定。