Python Selenium實(shí)現(xiàn)無(wú)可視化界面過(guò)程解析
無(wú)可視化界面的意義
有時(shí)候我們爬取網(wǎng)頁(yè)數(shù)據(jù),并不希望看其中的過(guò)程,只想看到最后的數(shù)據(jù)結(jié)果就可以了,這時(shí)候,***面就很有必要了!
代碼如下
from selenium import webdriverfrom time import sleep#實(shí)現(xiàn)無(wú)可視化界面from selenium.webdriver.chrome.options import Options#實(shí)現(xiàn)規(guī)避檢測(cè)from selenium.webdriver import ChromeOptions#實(shí)現(xiàn)無(wú)可視化界面的操作chrome_options = Options()chrome_options.add_argument(’--headless’)chrome_options.add_argument(’--disable-gpu’)#實(shí)現(xiàn)規(guī)避檢測(cè)option = ChromeOptions()option.add_experimental_option(’excludeSwitches’, [’enable-automation’])#如何實(shí)現(xiàn)讓selenium規(guī)避被檢測(cè)到的風(fēng)險(xiǎn)bro = webdriver.Chrome(executable_path=’./chromedriver’,chrome_options=chrome_options,options=option)#無(wú)可視化界面(無(wú)頭瀏覽器) phantomJsbro.get(’https://www.baidu.com’)print(bro.page_source)sleep(2)bro.quit()
運(yùn)行效果:
打印出網(wǎng)頁(yè)代碼,證明爬取網(wǎng)站信息成功
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. 匹配模式 - XSL教程 - 42. 利用CSS3新特性創(chuàng)建透明邊框三角3. CSS Hack大全-教你如何區(qū)分出IE6-IE10、FireFox、Chrome、Opera4. 概述IE和SQL2k開發(fā)一個(gè)XML聊天程序5. ASP中if語(yǔ)句、select 、while循環(huán)的使用方法6. HTML DOM setInterval和clearInterval方法案例詳解7. 存儲(chǔ)于xml中需要的HTML轉(zhuǎn)義代碼8. ASP實(shí)現(xiàn)加法驗(yàn)證碼9. XML入門的常見問(wèn)題(一)10. XML入門精解之結(jié)構(gòu)與語(yǔ)法
