chromepython
❶ chrome插件爬虫与python爬虫的有何优劣
python自带模块可用来发送处理请求，虽然比较灵活但API易用性较差，所以一般都要进行二次封装，我曾经也进行过封装，最后发现自己封装出来的模块无限趋近于非常成熟的requests库，所以还是直接使用requests吧
当然requests只发送和接受请求，对于页面分析还要配合lxml或beautifulsoup等第三方库进行。高级点的知禅升爬虫不仅仅是发送和处理请求，还需要处理异常，请求速度控搭老制等问题，这就需袭御要我们写额外的代码去控制！
❷ python无法打开谷歌浏览器
我觉得有可能是driver版本不一致
你可以通过driver = webdriver.Chrome(executable_path=d'你的driver.exe.路径')
设置
❸ 如何用python写chrome插件
通常是python使用PYQT，然后使用内嵌的WEBKIT，可以通过API和JS控制这个浏览器。 也基本够用了。
浏览器插件可以用JS代替。至于IE浏览器，只能用C++写BHO插件。 FIREFOX使用它自带的规范开发。相对容易些。其它的浏览器大多使用JS驱动就可以。比如CHROME。
❹ 使用Python和Splinter打开了chrome没有动态提示是怎么回事
a.看chrome版本。
b.看版本对应的驱动：http://blog.csdn.net/huilan_same/article/details/51896672
c.下载驱动(国内镜像)：http://npm.taobao.org/mirrors/chromedriver/
d.配置数御chromedriver地址到环境变量。或者把chromedriver.exe放到python下的Scripts文件夹下。
e.重启python交互窗唯此口，重新执行代码。薯山岩
❺ python如何把chrome封装到exe
3个步骤。
第一步就是找到chrome的运李基宏行文件，第二步就是通过代码os.path.dirname(os.path.abspath(__file__))获取到打包后exe运行的临时锋亩文件哪册夹的绝对路径，第三步是直接把整个运行文件打包进exe，整个封装过程就完成了。
只需要封装成类，将driver return出去，此时就可以使用exe附属的浏览器了。
❻ 怎样使用Python调用我们平时使用的chrome浏览器
importunittest,os,time
fromseleniumimportwebdriver
fromselenium.common.
dictInput={}
classTest(unittest.TestCase):
defsetUp(self):
self.chromedriver="C:.exe"#将chromedriver.exe拷贝到你想要调用的chrome安装路径下即可
os.environ["webdriver.chrome.driver"]=self.chromedriver
self.browser=webdriver.Chrome(self.chromedriver)
deftest(self):
self.browser.get('xxxx')#此处xxxx为网页的url
if__name__=='__main__':
importsys;sys.argv=['',
'Test.test'
]
unittest.main()
❼ 怎么用Python获取Chrome的地址栏句柄
首先，假设通过Firefox()浏览器定向爬取CSDN首页导航栏信息，审查元素代码如下图所示，在div class="menu"路径的ul、li、a下，同时可以定位ul class="clearfix"。
代码如下所示：
?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
# coding=utf-8
import os
from selenium import webdriver
#PhantomJS无界面浏览器
##driver = webdriver.PhantomJS(executable_path="G:\phantomjs-1.9.1-windows\phantomjs.exe")
#打开火狐浏览器
driver = webdriver.Firefox()
url = "http://www.csdn.net/"
driver.get(url)
#xpath路径定位导航栏
elem_dh = driver.find_elements_by_xpath("//div[@class='menu']/ul/li/a")
for elem in elem_dh:
print elem.text #获取正文
print elem.get_attribute('href') #获取属性值
然后转换成chrome浏览器，只需要在"C:\Program Files (x86)\Google\Chrome\Application\"路径下放置个chromedriver.exe驱动，再进行调用即可，代码如下所示：
?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
# coding=utf-8
import os
from selenium import webdriver
#PhantomJS无界面浏览器
##driver = webdriver.PhantomJS(executable_path="G:\phantomjs-1.9.1-windows\phantomjs.exe")
#打开火狐浏览器
#driver = webdriver.Firefox()
#谷歌浏览器
chromedriver = "C:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe"
os.environ["webdriver.chrome.driver"] = chromedriver
driver = webdriver.Chrome(chromedriver)
#WebDriverException: Message: unknown error: session deleted because of page crash
url = "http://www.csdn.net/"
driver.get(url)
❽ python抓取chrome中element的body内容
您要问的是python抓取chrome中element的body内容的步骤是什么？步骤如下：。安宏基弯装selenium库，可以通过pip命令进行安装，使蔽闷用selenium库打开Chrome浏览器，并进入锋孝目标网站。
1、使用selenium库中的find_element_by_xpath()方法来获取目标element，可以关闭Chrome浏览器，并对获取到的body内容进行处理或存储。
❾ 如何在chrome中跑自己的python脚本
前端工具
FireFox有Firebug前端工具，而对于Chrome浏览器，同样有很好的前端工具。右键选择‘审查元素’或者快捷键 F12 ，即可看到一些开发写的code，这对于获取测试对象(测试控件)的某些属性很有帮助。
浏览器窗口的最大化以及大小设置，以及前进，后退
这里有几点注意：
XXXX.get（URL）转到URL地址
time.sleep(ns) 等待时间
XXXX.back( ) 返回到上一个浏览器
XXXX.forward（） 前进到下一个浏览器
XXXX.set_window_size(width,height) width,height 我们可以自己根据需要设置。
XXXX.maximize（） 窗口最大化
XXXX.title 得到浏览器的标题
XXXX.quit( ) 浏览器退出
XXXX.close( ) 浏览器关闭
import time —>保证脚本运行的稳定性
browser=webdriver.Chrome() —>调用Chrome浏览器
使用print()语句可以查看脚本是否运行正确
脚本如下
from selenium import webdriver
import time
browser=webdriver.Chrome()
first_url=”http://www..com”
browser.get(first_url)
print (“open the first url is %s”%first_url)
time.sleep(3)
second_url=”http://news..com”
print(‘open the second url is %s’%second_url)
browser.get(second_url)
time.sleep(3)
print(“back to the first_url %s”%first_url)
browser.back()
time.sleep(2)
print (“forwar to the second_url %s”%first_url)
browser.forward()
time.sleep(2)
print(“设置浏览器高320，宽480显示”)
browser.set_window_size(480,320)
time.sleep(2)
print(“浏览器最大化”)
browser.maximize_window()
title=browser.title
print (title)
browser.find_element_by_link_text(“贴吧”).click
time.sleep(3)
❿ 写Python爬虫一定要用到chromedriver吗
如果是让我侍祥写，我优先选用selenium(chromedriver)，模拟正常浏览。效率低很多，但是数据靠谱。
爬虫与反爬，就像生存与死亡，是一个值得考虑到问题。
写爬虫，目的是获得数据。如果是简单、无争议公开的数据，只要不对服务器造成压力，方法都不重要。但往往要获取的数据，很多情况下对方都不希望通过爬虫自动化轻易得到。这时候，双方工程师、甚至是律师就要博奕了。
红方：基于数据统计、机器学习的方法，判断区别与常人浏览的途径很多。
蓝方：针对红方的可能手段，也有很多途径。所谓上有政策，下有对策。比如维护一个IP池自动切换。博奕，说白了就是斗争。没有永远胜利的一方。花费精力写一个专业爬虫，但这个爬虫可能也需要维护的。个人觉得不值得，应该想想其他方式。
专业爬虫，核心不会用python写的
大前端的语言，js+抓包分析是更加胜任爬虫的语言。一是爬取的数据，大部份都是来自网站或APP。用原汁原味的js，再对口不过碧蔽。同时，效率会更高。据我所知，很多竞争对手爬取对方的价格，基本都绕不开js。用python会适得其反。
说个反爬的损招
通过nginx配置，能实现简单的反爬，这里说一个损招。
一般对方爬取我方数据时，我们都会设置路障，比如要求对方输入手机验证码、识别图片、或者告知，请24小时候再来访问。
不妨反其道而行之，如果能确认对方是爬虫，不要阻止对方来爬取，二是造随机数据给对方爬。数据伪装成什老慧搏么样，可以灵活控制。可以80%假，20%真。或者比例反过来。甚至比例可以随机。这种方法可以捉弄对方的工程师。
最后友情提醒，爬虫有风险，码农要谨慎。