3

我正在使用 Ubuntu 服务器 17.04。

我正在尝试将我的代理设置为硒。但它不起作用。我正在使用来自https://stormproxies.com/的代理。基本上只有我允许的 ip 才会被允许拥有代理，然后我必须使用他们给我的 ip 来访问它。所以基本上它不是这样的"ip:port@user:pass"。假设这是我使用的代理 ip

示例： https ://123.123.123.123:13028

代理工作正常......因为我在scrapy中使用它。

但不能在硒中工作..我已经尝试了我发现的所有例子，它给了我各种各样的错误。我在想是因为这些例子已经过时了……也许吧。

我的硒和一切都是最新的。我已将 geckodriver 设置为路径……以及所有内容。如果我不添加代理，Selenium 可以正常工作。

这些是我为所有人使用的主要进口产品。

from selenium import webdriver
from selenium.webdriver.common.proxy import *
from pyvirtualdisplay import Display

这些是我尝试过的所有脚本。

第一个示例它没有给我任何错误，但它没有连接到代理。当我尝试在“ https://whatismyipaddress.com ”中获取 ip 时，我得到了我的真实 ip，而不是代理

display = Display(visible=0, size=(1920, 1080)).start()

myProxy = "https://123.123.123.123:13028"

proxy = Proxy({
    'proxyType': ProxyType.MANUAL,
    'httpProxy': myProxy,
    'ftpProxy': myProxy,
    'sslProxy': myProxy,
    'noProxy': None
})
browser = webdriver.Firefox()
browser.get("https://whatismyipaddress.com/")

第二个示例- 它给了我这个错误：WebDriverException：消息：进程意外关闭，状态为：1

proxies = "123.123.123.123:13028"
prox = Proxy()
prox.proxy_type = ProxyType.MANUAL
prox.http_proxy = proxies
prox.socks_proxy = proxies
prox.ssl_proxy = proxies

capabilities = webdriver.DesiredCapabilities.FIREFOX
prox.add_to_capabilities(capabilities)

driver = webdriver.Firefox(capabilities=capabilities)

第三个示例 - 它给了我这个错误：WebDriverException：消息：进程意外关闭，状态为：1

PROXY_PORT = '13028'
PROXY_HOST = '123.123.123.123'

fp = webdriver.FirefoxProfile()
print PROXY_PORT
print PROXY_HOST
fp.set_preference("network.proxy.type", 1)
fp.set_preference("network.proxy.http", PROXY_HOST)
fp.set_preference("network.proxy.http_port", int(PROXY_PORT))
fp.set_preference("network.proxy.https", PROXY_HOST)
fp.set_preference("network.proxy.https_port", int(PROXY_PORT))
fp.set_preference("network.proxy.ssl", PROXY_HOST)
fp.set_preference("network.proxy.ssl_port", int(PROXY_PORT))
fp.set_preference("network.proxy.ftp", PROXY_HOST)
fp.set_preference("network.proxy.ftp_port", int(PROXY_PORT))
fp.set_preference("network.proxy.socks", PROXY_HOST)
fp.set_preference("network.proxy.socks_port", int(PROXY_PORT))
fp.set_preference("general.useragent.override",
                  "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_3) AppleWebKit/537.75.14 (KHTML, like Gecko) Version/7.0.3 Safari/7046A194A")
fp.update_preferences()

driver = webdriver.Firefox(firefox_profile=fp)

第 4 个示例- 它给了我这个错误：InvalidArgumentException: Message: null is not an array

PROXY = "123.123.123.123:13028"
webdriver.DesiredCapabilities.FIREFOX['proxy'] = {
    "httpProxy": PROXY,
    "ftpProxy": PROXY,
    "sslProxy": PROXY,
    "noProxy": None,
    "proxyType": "MANUAL",
}
driver = webdriver.Firefox()
driver.get('http://www.whatsmyip.org/')

我也使用了这个例子：

第 5 个示例 - 它给了我这个错误：WebDriverException：消息：进程意外关闭，状态为：1

ProxyHost = "123.123.123.123"
ProxyPort = "13028"


def ChangeProxy(ProxyHost, ProxyPort):
    "Define Firefox Profile with you ProxyHost and ProxyPort"
    profile = webdriver.FirefoxProfile()
    profile.set_preference("network.proxy.type", 1)
    profile.set_preference("network.proxy.http", ProxyHost)
    profile.set_preference("network.proxy.http_port", int(ProxyPort))
    profile.update_preferences()
    return webdriver.Firefox(firefox_profile=profile)


def FixProxy():
    # ""Reset Firefox Profile""
    profile = webdriver.FirefoxProfile()
    profile.set_preference("network.proxy.type", 0)
    return webdriver.Firefox(firefox_profile=profile)


driver = ChangeProxy(ProxyHost, ProxyPort)
driver.get("http://whatismyipaddress.com")

time.sleep(5)

driver = FixProxy()
driver.get("http://whatismyipaddress.com")
4

1 回答 1

1

您只需在初始化驱动程序时将 firefox_options 元素添加到驱动程序。

确保您正确导入代理端（显然）

from selenium.webdriver.common.proxy import Proxy, ProxyType

然后像这样初始化你的驱动程序

options = Options()
options.add_argument("--headless")

ProxyHost = "x.x.x.x" 
ProxyPort = "8118"

def SetProxy(ProxyHost ,ProxyPort):

    profile = webdriver.FirefoxProfile()
    profile.set_preference("network.proxy.type", 1)
    profile.set_preference("network.proxy.http", ProxyHost )
    profile.set_preference("network.proxy.http_port", int(ProxyPort))
    profile.update_preferences()
    return webdriver.Firefox(firefox_profile=profile, firefox_options=options)


try:
        driver = SetProxy(ProxyHost ,ProxyPort)
        driver.get("http://x.x.x.x")
        print(driver.page_source)
        driver.close()
except:
        traceback.print_exc()
        driver.close()
于 2018-09-11T12:26:09.917 回答