欢迎加入学习交流QQ群：657341423
在python中，自动化操作web，有selenium和splinter，后者主要根据前者进行一个封装，功能没有前者强大，但比较容易掌握上手，如果对于没有基础新手而言，可以学习后者再学前者。先说说Selenium的一些具体用法吧： 一、打开浏览器 driver的部署，调用浏览器需要用到浏览器的driver。 driver放置位置具有争议。有的说是在chrome 下运行脚本，需要将chromedriver.exe 放在chrome浏览器安装目录下 在ie 下运行脚本，需要将IEDriverServer.exe 放在ie浏览器安装目录下 还有火狐的geckodriver.exe 而我的driver放置是直接放置在python的安装目录下的，也是可以直接运行。 1，谷歌
from selenium import webdriver driver=webdriver.Chrome() #调用chrome浏览器 driver.get('https://www.baidu.com') print driver.title driver.quit()2、火狐
from selenium import webdriver browser = webdriver.Firefox() browser.get('http://seleniumhq.org/')3、IE
driver=webdriver.Ie() #调用ie浏览器二、浏览器常用功能
driver.maximize_window()#浏览器最大化 driver.set_window_size(480, 800)#设置浏览器宽480、高800显示 driver.back()#浏览器后退 driver.forward()#浏览器前进 driver.quit()#关闭浏览器 driver.title#获取浏览器标题 driver.current_url #获取当前浏览器窗口网址三、对象定位
find_element_by_id() find_element_by_name() #id和name定位有局限性，如果没有这些属性的就无法用这个定位 find_element_by_class_name() find_element_by_tag_name() #class_name和tag_name，在网页中会出现多次的情况。 find_element_by_link_text() find_element_by_partial_link_text() #文字链接，partial_link用于模糊匹配。 find_element_by_xpath() find_element_by_css_selector() 这两种最常用，而且精准。find_elements_by_XX和find_element_by_XX有明显区别，前者是复数。find_elements是不能直接点击的，它是复数的
find_elements_by_id() find_elements_by_name() find_elements_by_class_name() find_elements_by_tag_name() find_elements_by_link_text() find_elements_by_partial_link_text() find_elements_by_xpath() find_elements_by_css_selector()四、操作元素 操作元素的方法有下面几个： clear 清除元素的内容，如果可以的话 send_keys 在元素上模拟按键输入 click 单击元素 submit 提交表单
driver.find_element_by_id("user_pwd").clear() #用于清除输入框的默认内容 driver.find_element_by_id("user_pwd").send_keys("password") #用于在一个输入框里输入xx 内容 driver.find_element_by_id("dl_an_submit").click() #用于单击一个按钮 driver.find_element_by_id("dl_an_submit").submit() #提交表单 #可看到可以使用submit()方法来代替click()对输入的信息进行提交，在有些情 况下两个方法可以相互使用；submit()要求提交对象是一个表单，更强调对信息的提交。click()更强调 事件的独立性 text=driver.find_element_by_id("cp").text 获取元素的text location = driver.find_element_by_xpath("//div[@id='u1']/a[3]").location print (location) #坐标: {'y': 19, 'x': 498} attribute=driver.find_element_by_id("kw").get_attribute('type') #返回元素的属性值，可以是id、name、type 或元素拥有的其它任意属性 result=driver.find_element_by_id("kw").is_displayed() #返回元素的结果是否可见，返回结果为True 或False result=driver.find_element_by_id("kw").is_selected #返回元素的结果是否已选，用于checkbox和radio，返回结果为True 或False更多方法可以参考： Python\Lib\site-packages\selenium\webdriver\remote\webdriver.py
五、ActionChains 类鼠标操作的常用方法： context_click() 右击 double_click() 双击 drag_and_drop() 拖动 move_to_element() 鼠标悬停在一个元素上 click_and_hold() 按下鼠标左键在一个元素上 注意click()与上述鼠标操作方法是不同的，两者不属于同一个类。
#引入ActionChains 类 from selenium.webdriver.common.action_chains import ActionChains #定位到要右击的元素 right =driver.find_element_by_xpath("xx") #对定位到的元素执行鼠标右键操作 ActionChains(driver).context_click(right).perform() #driver：浏览器驱动 driver 作为参数传入 #context_click：鼠标操作方法 #right：需要操作元素六、键盘事件
#引入Keys 类包 from selenium.webdriver.common.keys import Keys import time driver = webdriver.Firefox() driver.get("http://www.baidu.com") #输入框输入内容 driver.find_element_by_id("kw").send_keys("selenium") time.sleep(3) #删除多输入的一个m driver.find_element_by_id("kw").send_keys(Keys.BACK_SPACE) time.sleep(3) #输入空格键+“教程” driver.find_element_by_id("kw").send_keys(Keys.SPACE) driver.find_element_by_id("kw").send_keys(u"教程") time.sleep(3) #ctrl+a 全选输入框内容 driver.find_element_by_id("kw").send_keys(Keys.CONTROL,'a') time.sleep(3) #ctrl+x 剪切输入框内容 driver.find_element_by_id("kw").send_keys(Keys.CONTROL,'x') time.sleep(3) #输入框重新输入内容，搜索 driver.find_element_by_id("kw").send_keys(Keys.CONTROL,'v') time.sleep(3) #通过回车键盘来代替点击操作 driver.find_element_by_id("su").send_keys(Keys.ENTER) time.sleep(3) driver.quit()经常使用到的键盘操作： send_keys(Keys.BACK_SPACE) 删除键（BackSpace） send_keys(Keys.SPACE) 空格键(Space) send_keys(Keys.TAB) 制表键(Tab) send_keys(Keys.ESCAPE) 回退键（Esc） send_keys(Keys.ENTER) 回车键（Enter） send_keys(Keys.CONTROL,‘a’) 全选（Ctrl+A） send_keys(Keys.CONTROL,‘c’) 复制（Ctrl+C） send_keys(Keys.CONTROL,‘x’) 剪切（Ctrl+X） send_keys(Keys.CONTROL,‘v’) 粘贴（Ctrl+V） 更多方法可以参看： Python\Lib\site-packages\selenium\webdriver\common\keys.py文件
七、设置等待时间 implicitly_wait()：是webdirver 提供的一个超时等待。隐的等待一个元素被发现，或一个命令完成。 如果超出了设置时间的则抛出异常。 WebDriverWait()：同样也是webdirver 提供的方法。在设置时间内，默认每隔一段时间检测一次当前 页面元素是否存在，如果超过设置时间检测不到则抛出异常。
implicitly_wait() 隐形等待 implicitly_wait()方法比sleep() 更加智能，后者只能选择一个固定的时间的等待，前者可以在一个时间范围内智能的等待。
WebDriverWait() 显示等待 详细格式如下： WebDriverWait(driver, timeout, poll_frequency=0.5, ignored_exceptions=None) driver - WebDriver 的驱动程序(Ie, Firefox, Chrome 或远程) timeout - 最长超时时间，默认以秒为单位 poll_frequency - 休眠时间的间隔（步长）时间，默认为0.5 秒 ignored_exceptions - 超时后的异常信息，默认情况下抛NoSuchElementException 异常。
具体说明：http://blog.csdn.net/huilan_same/article/details/52544521
八、定位一组对象 通常ID，classname，tag定位会生成一组元素的，如果用这种方法，而且想定位某一个元素，只能用循环这组元素，然后通过get_attribute判断。
# 选择页面上所有的tag name 为input 的元素 inputs = driver.find_elements_by_tag_name('input') #然后从中过滤出tpye 为checkbox 的元素，单击勾选 for input in inputs: if input.get_attribute('type') == 'checkbox': input.click()二次定位： driver.find_element_by_id(‘xx’).find_element_by_link_text(‘xx’).click()
九、定位frame 中的对象
driver.switch_to.frame(0) # 1.用frame的index来定位，第一个是0 # driver.switch_to.frame("frame1") # 2.用id来定位 # driver.switch_to.frame("myframe") # 3.用name来定位 #driver.switch_to.frame(driver.find_element_by_tag_name("iframe")) # 4.用WebElement对象来定位从frame中切回主文档(switch_to.default_content()) driver.switch_to.default_content()
如果frame里面嵌套frame，一层层切进去 driver.switch_to.frame(“frame1”) driver.switch_to.frame(“frame2”)
从frame2再切回frame1，这里selenium给我们提供了一个方法能够从子frame切回到父frame，而不用我们切回主文档再切进来。 driver.switch_to.parent_frame() # 如果当前已是主文档，则无效果
十、浏览器多窗口
#获得当前窗口 nowhandle=driver.current_window_handle #获取全部窗口 allhandles=driver.window_handles #获取第二个窗口 driver.window_handles[1] #切换第二个窗口 driver.switch_to_window(driver.window_handles[1]) #关闭窗口 driver.close() 也可以通过循环全部窗口allhandles，然后通过判断title去切换窗口十一、alert/confirm/prompt 处理 处理JavaScript 所生成的alert、confirm 以及prompt 是很简单的。具体思路是使用 switch_to.alert()方法定位到alert/confirm/prompt。然后使用text/accept/dismiss/send_keys 按需进行操做。 text 返回alert/confirm/prompt 中的文字信息。 accept 点击确认按钮。 dismiss 点击取消按钮，如果有的话。 send_keys 输入值，这个alert\confirm 没有对话框就不能用了，不然会报错。
#获取网页上的警告信息 alert=driver.switch_to_alert() #接收警告信息 alert.accept() dirver.quit() #接受警告信息 alert = driver.switch_to_alert() alert.accept() #得到文本信息并打印 alert = driver.switch_to_alert() print alert.text() #取消对话框（如果有的话） alert = driver.switch_to_alert() alert.dismiss() #输入值（如果有的话） alert = driver.switch_to_alert() alert.send_keys(“xxx”)十二、下拉框处理
#先定位到下拉框 m=driver.find_element_by_id("ShippingMethod") #再点击下拉框下的选项 m.find_element_by_xpath("//option[@value='10.69']").click()也有些下拉框是鼠标移上去直接弹出的，那么我们可以使用move_to_element()进行操作。
radio和checkbox直接通过find_element方式定位点击即可。
十三、上存文件 只要定位上传按钮，通send_keys 添加 本地文件路径就可以了。绝对路径和相对路径都可以，关键是上传的文件存在
<div class="row-fluid"> <div class="span6 well"> <h3>upload_file</h3> <input type="file" name="file" /> </div> </div>driver.find_element_by_name(“file”).send_keys(‘D:\file.txt’)
下载文件
from selenium import webdriver from time import sleep options = webdriver.ChromeOptions() prefs = {'profile.default_content_settings.popups': 0, 'download.default_directory': 'd:\\'} options.add_experimental_option('prefs', prefs) driver = webdriver.Chrome(executable_path='E:\\Python\\chromedriver.exe', chrome_options=options) driver.get('https://pypi.python.org/pypi/dodo_commands/0.5.1') driver.find_element_by_xpath('//a[@class="button green"]').click() sleep(3) driver.quit()executable_path：为chromedriver.exe路径。 download.default_directory：文件保存路径。
十四、执行js 一般有两种场景： 一种是在页面上直接执行JS 另一种是在某个已经定位的元素上执行JS
execute_script(script, *args) 在当前窗口/框架同步执行javaScript script：JavaScript 的执行。 *args：适用任何JavaScript 脚本。页面滚动条
#将页面滚动条拖到底部 js="var q=document.documentElement.scrollTop=10000" driver.execute_script(js) time.sleep(3) #将滚动条移动到页面的顶部 js_="var q=document.documentElement.scrollTop=0" driver.execute_script(js_) time.sleep(3)十五、Cookie处理 webdriver 操作cookie 的方法有： get_cookies() 获得所有cookie 信息 get_cookie(name) 返回特定name 有cookie 信息 add_cookie(cookie_dict) 添加cookie，必须有name 和value 值 delete_cookie(name) 删除特定(部分)的cookie 信息 delete_all_cookies() 删除所有cookie 信息
通过向浏览器中添加cookie 可以绕过登录的验证码，这是比较有意思的一种解决方案。我们可以在 用户登录之前，通过add_cookie(）方法将用户名密码写入浏览器cookie ，再次访问系统登录链接将自 动登录。例如下面的方式： .... #访问xxxx 网站 driver.get("http://www.xxxx.cn/") #将用户名密码写入浏览器cookie driver.add_cookie({'name':'Login_UserNumber', 'value':'username'}) driver.add_cookie({'name':'Login_Passwd', 'value':'password'}) #再次访问xxxx 网站，将会自动登录 driver.get("http://www.xxxx.cn/") time.sleep(3) .... driver.quit() 使用cookie 进行登录最大的难点是如何获得用户名密码的name ，如果找到不到name 的名字，就没 办法向value 中输用户名、密码信息。 笔者的建议是可以通过get_cookies()方法来获取登录的所有的cookie 信息，从而进行找到用户名、 密码的name 对象的名字