成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Python爬蟲的第二種姿勢(shì),Selenium框架案例講解

開發(fā) 后端
本篇給大家詳解Python爬蟲的第二種姿勢(shì),Selenium框架案例的相關(guān)內(nèi)容,希望對(duì)你有所幫助!

[[390411]]

selenium使用流程:

1.環(huán)境安裝:

  1. pip install selenium 

2.下載一個(gè)瀏覽器的驅(qū)動(dòng)程序(谷歌瀏覽器)

3.實(shí)例化一個(gè)瀏覽器對(duì)象基本使用

代碼

  1. from selenium import webdriver 
  2. from lxml import etree 
  3. from time import sleep 
  4.  
  5. if __name__ == '__main__'
  6.  
  7.     bro = webdriver.Chrome(r"E:\google\Chrome\Application\chromedriver.exe"
  8.     bro.get(url='http://scxk.nmpa.gov.cn:81/xk/'
  9.  
  10.     page_text = bro.page_source 
  11.     tree = etree.HTML(page_text) 
  12.     li_list = tree.xpath('//*[@id="gzlist"]/li'
  13.     for li in li_list: 
  14.         name = li.xpath('./dl/@title')[0] 
  15.         print(name
  16.     sleep(5) 
  17.     bro.quit() 

 基于瀏覽器自動(dòng)化的操作代碼

#編寫基于瀏覽器自動(dòng)化的操作代碼

  • 發(fā)起請(qǐng)求: get(url)
  • 標(biāo)簽定位: find系列的方法
  •  標(biāo)簽交互: send_ keys( 'xxx' )
  •  執(zhí)行js程序: excute_script('jsCod')
  •  前進(jìn),后退: back(),forward( )
  •  關(guān)閉瀏覽器: quit()1

代碼

  1. https://www.taobao.com/ 
  2.  
  3. from selenium import webdriver 
  4. from time import sleep 
  5.  
  6. bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe"
  7.  
  8. bro.get(url='https://www.taobao.com/'
  9.  
  10. #標(biāo)簽定位 
  11. search_input = bro.find_element_by_id('q'
  12. sleep(2) 
  13. #執(zhí)行一組js代碼,使得滾輪向下滑動(dòng) 
  14. bro.execute_script('window.scrollTo(0,document.body.scrollHeight)'
  15. sleep(2) 
  16. #標(biāo)簽交互 
  17. search_input.send_keys('女裝'
  18. button = bro.find_element_by_class_name('btn-search'
  19. button.click() 
  20.  
  21. bro.get('https://www.baidu.com'
  22. sleep(2) 
  23. bro.back() 
  24. sleep(2) 
  25. bro.forward() 
  26. sleep(5) 
  27. bro.quit() 

 selenium處理iframe:

  •  如果定位的標(biāo)簽存在于iframe標(biāo)簽之中,則必須使用switch_to.frame(id)
  •  動(dòng)作鏈(拖動(dòng)) : from selenium. webdriver import ActionChains
  •  實(shí)例化一個(gè)動(dòng)作鏈對(duì)象: action = ActionChains (bro)
  •  click_and_hold(div) :長(zhǎng)按且點(diǎn)擊操作
  •  move_by_offset(x,y)
  •  perform( )讓動(dòng)作鏈立即執(zhí)行
  •  action.release( )釋放動(dòng)作鏈對(duì)象

代碼

  1. https://www.runoob.com/try/try.php?filename=jqueryui-api-droppable 
  2.  
  3. from selenium import webdriver 
  4. from time import sleep 
  5. from selenium.webdriver import ActionChains 
  6. bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe"
  7.  
  8. bro.get('https://www.runoob.com/try/try.php?filename=jqueryui-api-droppable'
  9.  
  10. bro.switch_to.frame('iframeResult'
  11.  
  12. div = bro.find_element_by_id('draggable'
  13.  
  14. #動(dòng)作鏈 
  15. action = ActionChains(bro) 
  16. action.click_and_hold(div) 
  17.  
  18. for i in range(5): 
  19.     action.move_by_offset(17,0).perform() 
  20.     sleep(0.3) 
  21.  
  22. #釋放動(dòng)作鏈 
  23. action.release() 
  24.  
  25. bro.quit() 

 selenium模擬登陸QQ空間

代碼

  1. https://qzone.qq.com/ 
  2.  
  3. from selenium import webdriver 
  4. from time import sleep 
  5.  
  6.  
  7. bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe"
  8. bro.get('https://qzone.qq.com/'
  9. bro.switch_to.frame("login_frame"
  10.  
  11. switcher = bro.find_element_by_id('switcher_plogin'
  12. switcher.click() 
  13.  
  14. user_tag = bro.find_element_by_id('u'
  15. password_tag = bro.find_element_by_id('p'
  16. user_tag.send_keys('1234455'
  17. password_tag.send_keys('qwer123'
  18. sleep(1) 
  19.  
  20. but = bro.find_element_by_id('login_button'
  21. but.click() 

 無頭瀏覽器和規(guī)避檢測(cè)

代碼

  1. from  selenium import webdriver 
  2. from time import sleep 
  3. #實(shí)現(xiàn)無可視化界面 
  4. from selenium.webdriver.chrome.options import Options 
  5. #實(shí)現(xiàn)規(guī)避檢測(cè) 
  6. from selenium.webdriver import ChromeOptions 
  7.  
  8. #實(shí)現(xiàn)無可視化界面 
  9. chrome_options = Options() 
  10. chrome_options.add_argument('--headless'
  11. chrome_options.add_argument('--disable-gpu'
  12. #實(shí)現(xiàn)規(guī)避檢測(cè) 
  13. option = ChromeOptions() 
  14. option.add_experimental_option('excludeSwitches',['enable-automation']) 
  15.  
  16. bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe",chrome_options=chrome_options,options=option
  17.  
  18. bro.get('https://www.baidu.com'
  19. print(bro.page_source) 
  20. sleep(2) 
  21. bro.quit() 

 【編輯推薦】

 

責(zé)任編輯:姜華 來源: 今日頭條
相關(guān)推薦

2017-12-28 15:20:50

2009-10-23 17:35:16

linux進(jìn)程管理

2009-08-24 17:24:28

C#創(chuàng)建XML文檔

2009-10-28 13:44:40

linux庫文件路徑

2014-04-21 10:25:01

大數(shù)據(jù)

2017-10-26 15:17:06

Python爬蟲框架歌曲下載

2017-05-15 21:00:15

大數(shù)據(jù)Scrapy爬蟲框架

2017-06-28 15:06:51

PythonLambda函數(shù)

2023-11-11 19:34:30

攝像頭慢直播

2022-12-12 08:22:51

2020-12-09 10:15:34

Pythonweb代碼

2020-12-23 10:10:23

Pythonweb代碼

2022-07-07 10:33:27

Python姿勢(shì)代碼

2022-06-22 09:44:41

Python文件代碼

2021-02-23 09:54:22

M1蘋果電腦惡意軟件銀雀

2022-07-18 14:33:05

PythonPDF報(bào)告

2021-09-06 15:31:01

鴻蒙HarmonyOS應(yīng)用

2010-01-08 10:52:17

Ubuntu VMwa

2009-06-12 10:18:59

StaticJava

2010-02-01 14:28:37

Python全局變量
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)

主站蜘蛛池模板: 波多野结衣一区二区三区在线观看 | 久久国产成人 | 91久久久久久久 | 韩国久久精品 | 精品欧美二区 | av在线亚洲天堂 | 国产一区二区三区免费 | 欧美看片 | 91麻豆精品国产91久久久资源速度 | 亚洲精品一区二区在线观看 | 一区二区免费在线观看 | 日本国产一区二区 | 久久久www成人免费无遮挡大片 | 亚洲一区二区视频 | 日韩av在线一区二区三区 | 久久毛片网站 | 7777在线| 国产精品视频免费播放 | 日本成人毛片 | 日韩精品久久一区二区三区 | 99久久婷婷国产亚洲终合精品 | 欧美激情在线精品一区二区三区 | 激情亚洲 | 色屁屁在线观看 | 五月天国产 | 亚洲国产成人av好男人在线观看 | 亚洲高清在线观看 | www.国产91| 欧美亚洲另类丝袜综合网动图 | 精品日韩一区 | 久久久国产视频 | 日韩在线观看中文字幕 | 国产精品不卡 | 一区二区视频在线观看 | 欧美久久久久久 | 亚洲欧美日韩国产综合 | 久久99精品久久久久久 | 在线国产精品一区 | 欧美a级成人淫片免费看 | 精品中文字幕视频 | 免费在线a视频 |