ruby mechanize 代理重试直至连接

问题描述 投票:0回答:1

我想做的是这个

我有一个带有 ip|port 的代理列表

现在 Mechanize 正在使用这些代理,我已经设置了

open_timeout = 20 
read_timeout = 20

我想要它做的是重试,但即使我有“proxies = @proxies.order("RANDOM()").first”,它也会使用相同的代理重试,它不会加载新的代理,而是会加载将从缓存加载

这是我使用的代码:

begin
    proxies = @proxies.order("RANDOM()").first
    proxy_ip = proxies.ip
    proxy_port = proxies.port
    puts proxy_ip
    puts proxy_port

    agent = Mechanize.new
    agent.open_timeout = 20
    agent.read_timeout = 20
    agent.set_proxy(proxy_ip, proxy_port)


    page = agent.get("http://whatismyip.org/"
rescue
     puts "oh shit, error"
     retry

end
    doc = page.parser
    ip_ad = doc.css('span').text
    puts ip_ad

现在我的问题是如何让它加载新代理而不是从缓存中使用它

ruby-on-rails ruby proxy mechanize mechanize-ruby
1个回答
0
投票

对于从谷歌来到这里的任何人,这就是我解决问题的方法

offset = rand(Proxy.count)
proxies = @proxies.offset(offset).first

我使用了偏移,它就像一个魅力,这是

        begin

            page = minion.submit(form,button)
    
        rescue Mechanize::ResponseCodeError => e
    
            offset = rand(Proxy.count)
            proxies = @proxies.offset(offset).first
            proxy_ip = proxies.ip
            proxy_port = proxies.port
            puts proxy_ip
            puts proxy_port
    
            minion.open_timeout = 3.0
            minion.read_timeout = 3.0
            minion.cookie_jar.clear!
            minion.max_history = 0
            #minion.set_proxy(proxy_ip, proxy_port)
    
            sleep 5.0
    
            if page.parser.xpath('//h2[contains(@class,"name")]').text == "Ingen träff"
                puts "ingen träff"
            else
                puts "retrying"
                retry
            end
    
    end
© www.soinside.com 2019 - 2024. All rights reserved.