Python Selenium 常用方法

你的名字 2022-09-27 06:49 362阅读 0赞

欢迎加入学习交流QQ群：657341423

--------------------

在python中，自动化操作web，有selenium和splinter，后者主要根据前者进行一个封装，功能没有前者强大，但比较容易掌握上手，如果对于没有基础新手而言，可以学习后者再学前者。先说说Selenium的一些具体用法吧：  
一、打开浏览器  
driver的部署，调用浏览器需要用到浏览器的driver。  
driver放置位置具有争议。有的说是在chrome 下运行脚本，需要将chromedriver.exe 放在chrome浏览器安装目录下  
在ie 下运行脚本，需要将IEDriverServer.exe 放在ie浏览器安装目录下  
还有火狐的geckodriver.exe  
而我的driver放置是直接放置在python的安装目录下的，也是可以直接运行。  
1，谷歌

from selenium import webdriver
    
    driver=webdriver.Chrome()  #调用chrome浏览器
    
    driver.get('https://www.baidu.com')
    
    print driver.title
    
    driver.quit()

2、火狐

from selenium import webdriver
    
    browser = webdriver.Firefox()
    browser.get('http://seleniumhq.org/')

3、IE

driver=webdriver.Ie()   #调用ie浏览器

二、浏览器常用功能

driver.maximize_window()#浏览器最大化
    driver.set_window_size(480, 800)#设置浏览器宽480、高800显示
    driver.back()#浏览器后退
    driver.forward()#浏览器前进
    driver.quit()#关闭浏览器
    driver.title#获取浏览器标题
    driver.current_url  #获取当前浏览器窗口网址

三、对象定位

find_element_by_id()
    find_element_by_name()
    #id和name定位有局限性，如果没有这些属性的就无法用这个定位
    
    find_element_by_class_name()
    find_element_by_tag_name()
    #class_name和tag_name，在网页中会出现多次的情况。
    
    find_element_by_link_text()
    find_element_by_partial_link_text()
    #文字链接，partial_link用于模糊匹配。
    
    find_element_by_xpath()
    find_element_by_css_selector()
    这两种最常用，而且精准。

**find\_elements\_by\_XX和find\_element\_by\_XX有明显区别，前者是复数。find\_elements是不能直接点击的，它是复数的**

find_elements_by_id()
    find_elements_by_name()
    
    find_elements_by_class_name()
    find_elements_by_tag_name()
    
    find_elements_by_link_text()
    find_elements_by_partial_link_text()
    
    find_elements_by_xpath()
    find_elements_by_css_selector()

四、操作元素  
操作元素的方法有下面几个：  
 clear 清除元素的内容，如果可以的话  
 send\_keys 在元素上模拟按键输入  
 click 单击元素  
 submit 提交表单

driver.find_element_by_id("user_pwd").clear()
    #用于清除输入框的默认内容
    driver.find_element_by_id("user_pwd").send_keys("password")
    #用于在一个输入框里输入xx 内容
    driver.find_element_by_id("dl_an_submit").click()
    #用于单击一个按钮
    driver.find_element_by_id("dl_an_submit").submit()
    #提交表单
    #可看到可以使用submit()方法来代替click()对输入的信息进行提交，在有些情
    况下两个方法可以相互使用；submit()要求提交对象是一个表单，更强调对信息的提交。click()更强调
    事件的独立性

text=driver.find_element_by_id("cp").text
    获取元素的text
    
    location = driver.find_element_by_xpath("//div[@id='u1']/a[3]").location  
    print (location)  
    #坐标: {'y': 19, 'x': 498}  
    
    attribute=driver.find_element_by_id("kw").get_attribute('type')
    #返回元素的属性值，可以是id、name、type 或元素拥有的其它任意属性
    
    result=driver.find_element_by_id("kw").is_displayed()
    #返回元素的结果是否可见，返回结果为True 或False
    result=driver.find_element_by_id("kw").is_selected
    #返回元素的结果是否已选，用于checkbox和radio，返回结果为True 或False

更多方法可以参考：  
Python\\Lib\\site-packages\\selenium\\webdriver\\remote\\[webdriver.py][]

五、ActionChains 类鼠标操作的常用方法：  
 context\_click() 右击  
 double\_click() 双击  
 drag\_and\_drop() 拖动  
 move\_to\_element() 鼠标悬停在一个元素上  
 click\_and\_hold() 按下鼠标左键在一个元素上  
注意click()与上述鼠标操作方法是不同的，两者不属于同一个类。

#引入ActionChains 类
    from selenium.webdriver.common.action_chains import ActionChains
    
    #定位到要右击的元素
    right =driver.find_element_by_xpath("xx")
    
    #对定位到的元素执行鼠标右键操作
    ActionChains(driver).context_click(right).perform()
    
    #driver：浏览器驱动 driver 作为参数传入
    #context_click：鼠标操作方法
    #right：需要操作元素

六、键盘事件

#引入Keys 类包
    from selenium.webdriver.common.keys import Keys
    import time
    driver = webdriver.Firefox()
    driver.get("http://www.baidu.com")
    #输入框输入内容
    driver.find_element_by_id("kw").send_keys("selenium")
    time.sleep(3)
    #删除多输入的一个m
    driver.find_element_by_id("kw").send_keys(Keys.BACK_SPACE)
    time.sleep(3)
    #输入空格键+“教程”
    driver.find_element_by_id("kw").send_keys(Keys.SPACE)
    driver.find_element_by_id("kw").send_keys(u"教程")
    time.sleep(3)
    #ctrl+a 全选输入框内容
    driver.find_element_by_id("kw").send_keys(Keys.CONTROL,'a')
    time.sleep(3)
    #ctrl+x 剪切输入框内容
    driver.find_element_by_id("kw").send_keys(Keys.CONTROL,'x')
    time.sleep(3)
    #输入框重新输入内容，搜索
    driver.find_element_by_id("kw").send_keys(Keys.CONTROL,'v')
    time.sleep(3)
    #通过回车键盘来代替点击操作
    driver.find_element_by_id("su").send_keys(Keys.ENTER)
    time.sleep(3)
    driver.quit()

经常使用到的键盘操作：  
send\_keys(Keys.BACK\_SPACE) 删除键（BackSpace）  
send\_keys(Keys.SPACE) 空格键(Space)  
send\_keys(Keys.TAB) 制表键(Tab)  
send\_keys(Keys.ESCAPE) 回退键（Esc）  
send\_keys(Keys.ENTER) 回车键（Enter）  
send\_keys(Keys.CONTROL,‘a’) 全选（Ctrl+A）  
send\_keys(Keys.CONTROL,‘c’) 复制（Ctrl+C）  
send\_keys(Keys.CONTROL,‘x’) 剪切（Ctrl+X）  
send\_keys(Keys.CONTROL,‘v’) 粘贴（Ctrl+V）  
更多方法可以参看：  
Python\\Lib\\site-packages\\selenium\\webdriver\\common\\keys.py文件

七、设置等待时间  
implicitly\_wait()：是webdirver 提供的一个超时等待。隐的等待一个元素被发现，或一个命令完成。  
如果超出了设置时间的则抛出异常。  
WebDriverWait()：同样也是webdirver 提供的方法。在设置时间内，默认每隔一段时间检测一次当前  
页面元素是否存在，如果超过设置时间检测不到则抛出异常。

implicitly\_wait() 隐形等待  
implicitly\_wait()方法比sleep() 更加智能，后者只能选择一个固定的时间的等待，前者可以在一个时间范围内智能的等待。

WebDriverWait() 显示等待  
详细格式如下：  
WebDriverWait(driver, timeout, poll\_frequency=0.5, ignored\_exceptions=None)  
driver - WebDriver 的驱动程序(Ie, Firefox, Chrome 或远程)  
timeout - 最长超时时间，默认以秒为单位  
poll\_frequency - 休眠时间的间隔（步长）时间，默认为0.5 秒  
ignored\_exceptions - 超时后的异常信息，默认情况下抛NoSuchElementException 异常。

具体说明：[http://blog.csdn.net/huilan\_same/article/details/52544521][http_blog.csdn.net_huilan_same_article_details_52544521]

八、定位一组对象  
通常ID，classname，tag定位会生成一组元素的，如果用这种方法，而且想定位某一个元素，只能用循环这组元素，然后通过get\_attribute判断。

# 选择页面上所有的tag name 为input 的元素
    inputs = driver.find_elements_by_tag_name('input')
    #然后从中过滤出tpye 为checkbox 的元素，单击勾选
    for input in inputs:
    if input.get_attribute('type') == 'checkbox':
    input.click()

二次定位：  
driver.find\_element\_by\_id(‘xx’).find\_element\_by\_link\_text(‘xx’).click()

九、定位frame 中的对象

driver.switch_to.frame(0)  # 1.用frame的index来定位，第一个是0
    # driver.switch_to.frame("frame1")  # 2.用id来定位
    # driver.switch_to.frame("myframe")  # 3.用name来定位
    #driver.switch_to.frame(driver.find_element_by_tag_name("iframe"))  # 4.用WebElement对象来定位

从frame中切回主文档(switch\_to.default\_content())  
driver.switch\_to.default\_content()

如果frame里面嵌套frame，一层层切进去  
driver.switch\_to.frame(“frame1”)  
driver.switch\_to.frame(“frame2”)

从frame2再切回frame1，这里selenium给我们提供了一个方法能够从子frame切回到父frame，而不用我们切回主文档再切进来。  
driver.switch\_to.parent\_frame() \# 如果当前已是主文档，则无效果

十、浏览器多窗口

#获得当前窗口
    nowhandle=driver.current_window_handle
    #获取全部窗口
    allhandles=driver.window_handles
    #获取第二个窗口
    driver.window_handles[1]
    #切换第二个窗口
    driver.switch_to_window(driver.window_handles[1])
    #关闭窗口
    driver.close()
    
    
    也可以通过循环全部窗口allhandles，然后通过判断title去切换窗口

十一、alert/confirm/prompt 处理  
处理JavaScript 所生成的alert、confirm 以及prompt 是很简单的。具体思路是使用  
switch\_to.alert()方法定位到alert/confirm/prompt。然后使用text/accept/dismiss/send\_keys 按需进行操做。  
 text 返回alert/confirm/prompt 中的文字信息。  
 accept 点击确认按钮。  
 dismiss 点击取消按钮，如果有的话。  
 send\_keys 输入值，这个alert\\confirm 没有对话框就不能用了，不然会报错。

#获取网页上的警告信息
    alert=driver.switch_to_alert()
    #接收警告信息
    alert.accept()
    dirver.quit()
    #接受警告信息
    alert = driver.switch_to_alert()
    alert.accept()
    #得到文本信息并打印
    alert = driver.switch_to_alert()
    print alert.text()
    #取消对话框（如果有的话）
    alert = driver.switch_to_alert()
    alert.dismiss()
    #输入值（如果有的话）
    alert = driver.switch_to_alert()
    alert.send_keys(“xxx”)

十二、下拉框处理

#先定位到下拉框
    m=driver.find_element_by_id("ShippingMethod")
    #再点击下拉框下的选项
    m.find_element_by_xpath("//option[@value='10.69']").click()

也有些下拉框是鼠标移上去直接弹出的，那么我们可以使用move\_to\_element()进行操作。

radio和checkbox直接通过find\_element方式定位点击即可。

十三、上存文件  
只要定位上传按钮，通send\_keys 添加  
本地文件路径就可以了。绝对路径和相对路径都可以，关键是上传的文件存在

<div class="row-fluid">
    <div class="span6 well">
    <h3>upload_file</h3>
    <input type="file" name="file" />
    </div>
    </div>

driver.find\_element\_by\_name(“file”).send\_keys(‘D:\\file.txt’)

**下载文件**

from selenium import webdriver
    from time import sleep
    
    options = webdriver.ChromeOptions()
    prefs = {'profile.default_content_settings.popups': 0, 'download.default_directory': 'd:\\'}
    options.add_experimental_option('prefs', prefs)
    
    driver = webdriver.Chrome(executable_path='E:\\Python\\chromedriver.exe', chrome_options=options)
    driver.get('https://pypi.python.org/pypi/dodo_commands/0.5.1')
    driver.find_element_by_xpath('//a[@class="button green"]').click()
    sleep(3)
    driver.quit()

executable\_path：为chromedriver.exe路径。  
download.default\_directory：文件保存路径。

十四、执行js 一般有两种场景：  
 一种是在页面上直接执行JS  
 另一种是在某个已经定位的元素上执行JS

execute_script(script, *args)
    在当前窗口/框架同步执行javaScript
    script：JavaScript 的执行。
    *args：适用任何JavaScript 脚本。

**页面滚动条**

#将页面滚动条拖到底部
    js="var q=document.documentElement.scrollTop=10000"
    driver.execute_script(js)
    time.sleep(3)
    #将滚动条移动到页面的顶部
    js_="var q=document.documentElement.scrollTop=0"
    driver.execute_script(js_)
    time.sleep(3)

十五、Cookie处理  
webdriver 操作cookie 的方法有：  
 get\_cookies() 获得所有cookie 信息  
 get\_cookie(name) 返回特定name 有cookie 信息  
 add\_cookie(cookie\_dict) 添加cookie，必须有name 和value 值  
 delete\_cookie(name) 删除特定(部分)的cookie 信息  
 delete\_all\_cookies() 删除所有cookie 信息

通过向浏览器中添加cookie 可以绕过登录的验证码，这是比较有意思的一种解决方案。我们可以在
    用户登录之前，通过add_cookie(）方法将用户名密码写入浏览器cookie ，再次访问系统登录链接将自
    动登录。例如下面的方式：
    
    ....
    #访问xxxx 网站
    driver.get("http://www.xxxx.cn/")
    #将用户名密码写入浏览器cookie
    driver.add_cookie({'name':'Login_UserNumber', 'value':'username'})
    driver.add_cookie({'name':'Login_Passwd', 'value':'password'})
    #再次访问xxxx 网站，将会自动登录
    driver.get("http://www.xxxx.cn/")
    time.sleep(3)
    ....
    driver.quit()
    
    使用cookie 进行登录最大的难点是如何获得用户名密码的name ，如果找到不到name 的名字，就没
    办法向value 中输用户名、密码信息。
    笔者的建议是可以通过get_cookies()方法来获取登录的所有的cookie 信息，从而进行找到用户名、
    密码的name 对象的名字

[webdriver.py]: http://webdriver.py
[http_blog.csdn.net_huilan_same_article_details_52544521]: http://blog.csdn.net/huilan_same/article/details/52544521