selenium用法详解
selenium主要是用来做自动化测试，支持多种浏览器，爬虫中主要用来解决JavaScript渲染问题。
模拟浏览器进行网页加载，当requests,urllib无法正常获取网页内容的时候
一、声明浏览器对象
注意点一，Python文件名或者包名不要命名为selenium，会导致无法导入
from selenium import webdriver
#webdriver可以认为是浏览器的驱动器，要驱动浏览器必须用到webdriver，支持多种浏览器，这里以Chrome为例
browser = webdriver.Chrome()
二、访问页面并获取网页html
from selenium import webdriver
browser = webdriver.Chrome()
('www.taobao')
print(browser.page_source)#browser.page_source是获取网页的全部html
browser.close()
三、查元素
单个元素
from selenium import webdriver
browser = webdriver.Chrome()
('www.taobao')
input_first = browser.find_element_by_id('q')
input_second = browser.find_element_by_css_selector('#q')
input_third = browser.find_element_by_xpath('//*[@id="q"]')
print(input_first,input_second,input_third)
browser.close()
常用的查方法
find_element_by_name
find_element_by_xpath
find_element_by_link_text
find_element_by_partial_link_text
find_element_by_tag_name
find_element_by_class_name
find_element_by_css_selector
也可以使用通用的方法
from selenium import webdriver
from selenium.webdrivermon.by import By
browser = webdriver.Chrome()
('www.taobao')
input_first = browser.find_element(BY.ID,'q')#第一个参数传入名称，第二个传入具体的参数
print(input_first)
browser.close()
多个元素，elements多个s
input_first = browser.find_elements_by_id('q')
四、元素交互操作-搜索框传入关键词进行自动搜索
selenium获取cookie
from selenium import webdriver
import time
browser = webdriver.Chrome()
('www.taobao')
input = browser.find_element_by_id('q')#到搜索框
input.send_keys('iPhone')#传送入关键词
time.sleep(5)
input.clear()#清空搜索框
input.send_keys('男士内裤')
button = browser.find_element_by_class_name('btn-search')#到搜索按钮
button.click()
更多操作: adthedocs.io/api.html#webelement#可以有属性、截图等等
五、交互动作，驱动浏览器进行动作，模拟拖拽动作，将动作附加到动作链中串行执行
from selenium import webdriver
from selenium.webdriver import ActionChains#引入动作链
browser = webdriver.Chrome()
url = 'www.runoob/try/try.php?filename=jqueryui-api-droppable'
(url)
browser.switch_to.frame('iframeResult')#切换到iframeResult框架
source = browser.find_element_by_css_selector('#draggable')#到被拖拽对象
target = browser.find_element_by_css_selector('#droppable')#到目标
actions = ActionChains(browser)#声明actions对象
actions.drag_and_drop(source, target)
actions.perform()#执行动作
更多操作: adthedocs.io/api.html#module-selenium.webdrivermon.action_chains
六、执行JavaScript
有些动作可能没有提供api，比如进度条下拉，这时，我们可以通过代码执行JavaScript
from selenium import webdriver
browser = webdriver.Chrome()
('www.zhihu/explore')
ute_script('window.scrollTo(0, document.body.scrollHeight)')
ute_script('alert("To Bottom")')
七、获取元素信息
获取属性
from selenium import webdriver
from selenium.webdriver import ActionChains
browser = webdriver.Chrome()
url = 'www.zhihu/explore'
(url)
logo = browser.find_element_by_id('zh-top-link-logo')#获取网站logo
print(logo)
_attribute('class'))
browser.close()
获取文本值
from selenium import webdriver
browser = webdriver.Chrome()
url = 'www.zhihu/explore'
(url)
input = browser.find_element_by_class_name('zu-top-add-question')
)#文本值
browser.close()
# 获取Id，位置，标签名，大小
from selenium import webdriver
browser = webdriver.Chrome()
url = 'www.zhihu/explore'