av一区二区在线观看_亚洲男人的天堂网站_日韩亚洲视频_在线成人免费_欧美日韩精品免费观看视频_久草视

您的位置:首頁技術(shù)文章
文章詳情頁

python+selenium+chromedriver實(shí)現(xiàn)爬蟲示例代碼

瀏覽:3日期:2022-07-30 14:23:35

下載好所需程序

1.Selenium簡介

Selenium是一個(gè)用于Web應(yīng)用程序測試的工具,直接運(yùn)行在瀏覽器中,就像真正的用戶在操作一樣。

2.Selenium安裝

方法一:在Windows命令行(cmd)輸入pip install selenium即可自動安裝,安裝完成后,輸入pip show selenium可查看當(dāng)前的版本

python+selenium+chromedriver實(shí)現(xiàn)爬蟲示例代碼

方法二:直接下載selenium包:

selenium下載網(wǎng)址

Pychome安裝selenium如果出現(xiàn)無法安裝,參考以下博客解決Pycharm無法使用已經(jīng)安裝Selenium的問題

3.禁止谷歌瀏覽器自動更新

搜索本地:管理工具-服務(wù)-Google自動更新服務(wù)-選擇禁止

python+selenium+chromedriver實(shí)現(xiàn)爬蟲示例代碼

安裝瀏覽器對應(yīng)的驅(qū)動driver我這里用的是谷歌,選擇對應(yīng)的驅(qū)動版本

驅(qū)動的下載地址如下:

http://chromedriver.storage.googleapis.com/index.html

python+selenium+chromedriver實(shí)現(xiàn)爬蟲示例代碼

python+selenium+chromedriver實(shí)現(xiàn)爬蟲示例代碼

win32、win64的都下載win32.zip的

將下載的chromedriver進(jìn)行解壓,并將文件復(fù)制或移動到,瀏覽器快捷方式所在目錄。

環(huán)境變量配置1.Python環(huán)境配置2.chromedriver環(huán)境配置3.pychrome的python環(huán)境指向自己電腦安裝好的python

注意:將下載好的chromewebdriver.exe驅(qū)動放在Python的安裝路徑下的Scripts里面,同時(shí)將Scripts路徑添加到PATH中,這樣每次運(yùn)行python的時(shí)候就會自動加載驅(qū)動

代碼實(shí)現(xiàn)

#已經(jīng)準(zhǔn)備環(huán)境:webdriver:Google已經(jīng)安裝好;環(huán)境變量配置好;pip install selenium;#selenium是一個(gè)包,包有很多對象,對象有屬性,方法。from selenium import webdriverbrowser=webdriver.Chrome()#打開瀏覽器url='https://news.qq.com/zt2020/page/feiyan.htm#/global?nojump=1'#獲取數(shù)據(jù)的地址#請求瀏覽器內(nèi)容:請求方式:get,post,tokenbrowser.get(url)#css選擇器,id選擇器:#開頭,class選擇器:.開頭,標(biāo)簽選擇器:p,span,div。coronavirus_countent=browser.find_element_by_class_name(’d’)#定位到class選擇器d這個(gè)內(nèi)容print(coronavirus_countent)#查看內(nèi)容,session,一種緩存機(jī)制,通過瀏覽器解析,然后緩存的內(nèi)容# <selenium.webdriver.remote.webelement.WebElement (session='a1aa22161543b44f599e97b35dbc1ac5', element='fe645993-43cb-46cf-83a7-2488dd3d838a')>print(coronavirus_countent.text)#查看當(dāng)前css.class中的d的內(nèi)容coronavirus_time=browser.find_element_by_class_name(’ml’)#定位到class選擇器d這個(gè)內(nèi)容print(coronavirus_time.text)coronavirus_data=browser.find_element_by_class_name(’nowConfirm’)#定位到class選擇器d這個(gè)內(nèi)容print('=======')print(coronavirus_data.text)print('=====找nowConfirm下面的字內(nèi)容')coronavirus_sub=coronavirus_data.find_element_by_class_name(’addnum’)print(coronavirus_sub.text)browser.quit()

到此這篇關(guān)于python+selenium+chromedriver實(shí)現(xiàn)爬蟲示例代碼的文章就介紹到這了,更多相關(guān)python selenium chromedriver 爬蟲內(nèi)容請搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)!

標(biāo)簽: Python 編程
相關(guān)文章:
主站蜘蛛池模板: 亚洲伊人影院 | 中文字幕在线观看免费 | 一二三区视频 | 国产精品剧情 | 亚洲精品视频免费 | 日韩欧美网站 | 成人激情综合网 | 国产精品国产三级国产专区53 | 日韩在线免费观看视频 | 91久久精品日日躁夜夜躁欧美 | 国产一区二区中文字幕 | 最近日本中文字幕 | 日韩视频精品 | 亚洲免费福利视频 | 久久国产影院 | 综合色在线 | 午夜影院在线 | 国产精品成人国产乱一区 | 一区视频在线 | 欧美日韩免费在线 | 日韩一区二区三区在线 | 69国产精品 | 九九在线观看高清免费 | 夜夜操夜夜爽 | 天天色播 | 日本欧美在线 | 日韩欧美久久久 | 成人免费网站黄 | 久久精品一区二区 | 秋霞午夜鲁丝一区二区老狼 | 精品视频网站 | 亚洲天堂男人天堂 | 日本中文字幕在线观看 | 国产91热爆ts人妖系列 | www.日韩 | 日本三级久久 | 黄免费视频| 亚洲精品区 | 最近中文字幕在线 | 国产伦精品一区二区三区视频黑人 | www.日本在线观看 |