chromepython

❶ chrome插件爬蟲與python爬蟲的有何優劣

python自帶模塊可用來發送處理請求，雖然比較靈活但API易用性較差，所以一般都要進行二次封裝，我曾經也進行過封裝，最後發現自己封裝出來的模塊無限趨近於非常成熟的requests庫，所以還是直接使用requests吧
當然requests只發送和接受請求，對於頁面分析還要配合lxml或beautifulsoup等第三方庫進行。高級點的知禪升爬蟲不僅僅是發送和處理請求，還需要處理異常，請求速度控搭老制等問題，這就需襲御要我們寫額外的代碼去控制！

❷ python無法打開谷歌瀏覽器

我覺得有可能是driver版本不一致
你可以通過driver = webdriver.Chrome(executable_path=d'你的driver.exe.路徑')

設置

❸ 如何用python寫chrome插件

通常是python使用PYQT，然後使用內嵌的WEBKIT，可以通過API和JS控制這個瀏覽器。 也基本夠用了。

瀏覽器插件可以用JS代替。至於IE瀏覽器，只能用C++寫BHO插件。 FIREFOX使用它自帶的規范開發。相對容易些。其它的瀏覽器大多使用JS驅動就可以。比如CHROME。

❹ 使用Python和Splinter打開了chrome沒有動態提示是怎麼回事

a.看chrome版本。
b.看版本對應的驅動：http://blog.csdn.net/huilan_same/article/details/51896672
c.下載驅動(國內鏡像)：http://npm.taobao.org/mirrors/chromedriver/
d.配置數御chromedriver地址到環境變數。或者把chromedriver.exe放到python下的Scripts文件夾下。
e.重啟python交互窗唯此口，重新執行代碼。薯山岩

❺ python如何把chrome封裝到exe

3個步驟。
第一步就是找到chrome的運李基宏行文件，第二步就是通過代碼os.path.dirname(os.path.abspath(__file__))獲取到打包後exe運行的臨時鋒畝文件哪冊夾的絕對路徑，第三步是直接把整個運行文件打包進exe，整個封裝過程就完成了。
只需要封裝成類，將driver return出去，此時就可以使用exe附屬的瀏覽器了。

❻ 怎樣使用Python調用我們平時使用的chrome瀏覽器

importunittest,os,time
fromseleniumimportwebdriver
fromselenium.common.

dictInput={}

classTest(unittest.TestCase):
defsetUp(self):
self.chromedriver="C:.exe"#將chromedriver.exe拷貝到你想要調用的chrome安裝路徑下即可
os.environ["webdriver.chrome.driver"]=self.chromedriver
self.browser=webdriver.Chrome(self.chromedriver)
deftest(self):
self.browser.get('xxxx')#此處xxxx為網頁的url
if__name__=='__main__':
importsys;sys.argv=['',
'Test.test'
]
unittest.main()

❼ 怎麼用Python獲取Chrome的地址欄句柄

首先，假設通過Firefox()瀏覽器定向爬取CSDN首頁導航欄信息，審查元素代碼如下圖所示，在div class="menu"路徑的ul、li、a下，同時可以定位ul class="clearfix"。

代碼如下所示：
?

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17

# coding=utf-8
import os
from selenium import webdriver

#PhantomJS無界面瀏覽器
##driver = webdriver.PhantomJS(executable_path="G:\phantomjs-1.9.1-windows\phantomjs.exe")

#打開火狐瀏覽器
driver = webdriver.Firefox()
url = "http://www.csdn.net/"
driver.get(url)

#xpath路徑定位導航欄
elem_dh = driver.find_elements_by_xpath("//div[@class='menu']/ul/li/a")
for elem in elem_dh:
print elem.text #獲取正文
print elem.get_attribute('href') #獲取屬性值

然後轉換成chrome瀏覽器，只需要在"C:\Program Files (x86)\Google\Chrome\Application\"路徑下放置個chromedriver.exe驅動，再進行調用即可，代碼如下所示：
?

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27

# coding=utf-8
import os
from selenium import webdriver

#PhantomJS無界面瀏覽器
##driver = webdriver.PhantomJS(executable_path="G:\phantomjs-1.9.1-windows\phantomjs.exe")

#打開火狐瀏覽器
#driver = webdriver.Firefox()

#谷歌瀏覽器
chromedriver = "C:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe"
os.environ["webdriver.chrome.driver"] = chromedriver
driver = webdriver.Chrome(chromedriver)

#WebDriverException: Message: unknown error: session deleted because of page crash

url = "http://www.csdn.net/"
driver.get(url)

❽ python抓取chrome中element的body內容

您要問的是python抓取chrome中element的body內容的步驟是什麼？步驟如下：。安宏基彎裝selenium庫，可以通過pip命令進行安裝，使蔽悶用selenium庫打開Chrome瀏覽器，並進入鋒孝目標網站。
1、使用selenium庫中的find_element_by_xpath()方法來獲取目標element，可以關閉Chrome瀏覽器，並對獲取到的body內容進行處理或存儲。

❾ 如何在chrome中跑自己的python腳本

前端工具
FireFox有Firebug前端工具，而對於Chrome瀏覽器，同樣有很好的前端工具。右鍵選擇『審查元素』或者快捷鍵 F12 ，即可看到一些開發寫的code，這對於獲取測試對象(測試控制項)的某些屬性很有幫助。
瀏覽器窗口的最大化以及大小設置，以及前進，後退
這里有幾點注意：
XXXX.get（URL）轉到URL地址
time.sleep(ns) 等待時間
XXXX.back( ) 返回到上一個瀏覽器
XXXX.forward（） 前進到下一個瀏覽器
XXXX.set_window_size(width,height) width,height 我們可以自己根據需要設置。
XXXX.maximize（） 窗口最大化
XXXX.title 得到瀏覽器的標題
XXXX.quit( ) 瀏覽器退出
XXXX.close( ) 瀏覽器關閉
import time —>保證腳本運行的穩定性
browser=webdriver.Chrome() —>調用Chrome瀏覽器
使用print()語句可以查看腳本是否運行正確
腳本如下
from selenium import webdriver
import time
browser=webdriver.Chrome()
first_url=」http://www..com」
browser.get(first_url)
print (「open the first url is %s」%first_url)
time.sleep(3)
second_url=」http://news..com」
print(『open the second url is %s』%second_url)
browser.get(second_url)
time.sleep(3)
print(「back to the first_url %s」%first_url)
browser.back()
time.sleep(2)
print (「forwar to the second_url %s」%first_url)
browser.forward()
time.sleep(2)
print(「設置瀏覽器高320，寬480顯示」)
browser.set_window_size(480,320)
time.sleep(2)
print(「瀏覽器最大化」)
browser.maximize_window()
title=browser.title
print (title)
browser.find_element_by_link_text(「貼吧」).click
time.sleep(3)

❿ 寫Python爬蟲一定要用到chromedriver嗎

如果是讓我侍祥寫，我優先選用selenium(chromedriver)，模擬正常瀏覽。效率低很多，但是數據靠譜。

爬蟲與反爬，就像生存與死亡，是一個值得考慮到問題。

寫爬蟲，目的是獲得數據。如果是簡單、無爭議公開的數據，只要不對伺服器造成壓力，方法都不重要。但往往要獲取的數據，很多情況下對方都不希望通過爬蟲自動化輕易得到。這時候，雙方工程師、甚至是律師就要博奕了。

紅方：基於數據統計、機器學習的方法，判斷區別與常人瀏覽的途徑很多。

藍方：針對紅方的可能手段，也有很多途徑。所謂上有政策，下有對策。比如維護一個IP池自動切換。博奕，說白了就是斗爭。沒有永遠勝利的一方。花費精力寫一個專業爬蟲，但這個爬蟲可能也需要維護的。個人覺得不值得，應該想想其他方式。

專業爬蟲，核心不會用python寫的

大前端的語言，js+抓包分析是更加勝任爬蟲的語言。一是爬取的數據，大部份都是來自網站或APP。用原汁原味的js，再對口不過碧蔽。同時，效率會更高。據我所知，很多競爭對手爬取對方的價格，基本都繞不開js。用python會適得其反。

說個反爬的損招

通過nginx配置，能實現簡單的反爬，這里說一個損招。

一般對方爬取我方數據時，我們都會設置路障，比如要求對方輸入手機驗證碼、識別圖片、或者告知，請24小時候再來訪問。

不妨反其道而行之，如果能確認對方是爬蟲，不要阻止對方來爬取，二是造隨機數據給對方爬。數據偽裝成什老慧搏么樣，可以靈活控制。可以80%假，20%真。或者比例反過來。甚至比例可以隨機。這種方法可以捉弄對方的工程師。

最後友情提醒，爬蟲有風險，碼農要謹慎。