CentOS + Selenium 用法小结

使用场景
在CentOS下使用Selenium,这里的CentOS是指无GUI的Server版,其特殊性在于,没有可以供输出的显示界面,除了常见的headless方法以外,还有xvfb等工具可以使用,本文即记录我使用时碰到的一些流程及坑点。

解决方案headless方法的使用

以Chrome为例

安装selenium

pip install selenium

安装chrome-browser

wget https://dl.google.com/linux/direct/google-chrome-stable_current_x86_64.rpm --no-check-certificate  
sudo yum install google-chrome-stable_current_x86_64.rpm

安装chromedriver:一个用来和chrome交互的接口

sudo yum install chromedriver

编写test.py文件

test.py

from selenium import webdriver
from selenium.webdriver.chrome.options import Options chrome_options = Options()
chrome_options.add_argument('--headless') # 16年之后,chrome给出的解决办法,抢了PhantomJS饭碗
chrome_options.add_argument('--disable-gpu')
chrome_options.add_argument('--no-sandbox') # root用户不加这条会无法运行
driver = webdriver.Chrome(chrome_options=chrome_options)
for i in range(10):
     driver.get("https://www.baidu.com/")
     print(driver.title)
driver.close()