如何用Python Selenium和ChromeDriver编写一个简单的爬虫示例代码？
- 内容介绍
- 文章标签
- 相关推荐
本文共计621个文字，预计阅读时间需要3分钟。
下载所需程序：Selenium简介Selenium是一个用于Web应用程序测试的工具，它可以直接在浏览器中运行，就像真实的用户在操作一样。
2. Selenium安装方法一：在Windows命令行（cmd）中输入“pip install Selenium。”
下载好所需程序
1.Selenium简介
Selenium是一个用于Web应用程序测试的工具，直接运行在浏览器中，就像真正的用户在操作一样。
2.Selenium安装
方法一：在Windows命令行（cmd）输入pip install selenium即可自动安装，安装完成后，输入pip show selenium可查看当前的版本
方法二：直接下载selenium包：
selenium下载网址
Pychome安装selenium如果出现无法安装，参考以下博客
解决Pycharm无法使用已经安装Selenium的问题
3.禁止谷歌浏览器自动更新
搜索本地：管理工具-服务-Google自动更新服务-选择禁止
安装浏览器对应的驱动driver
我这里用的是谷歌，选择对应的驱动版本
驱动的下载地址如下：
chromedriver.storage.googleapis.com/index.html
win32、win64的都下载win32.zip的
将下载的chromedriver进行解压，并将文件复制或移动到，浏览器快捷方式所在目录。
环境变量配置
1.Python环境配置
2.chromedriver环境配置
3.pychrome的python环境指向自己电脑安装好的python
注意：将下载好的chromewebdriver.exe驱动放在Python的安装路径下的Scripts里面，同时将Scripts路径添加到PATH中，这样每次运行python的时候就会自动加载驱动
代码实现
#已经准备环境：webdriver:Google已经安装好；环境变量配置好；pip install selenium; #selenium是一个包，包有很多对象，对象有属性，方法。 from selenium import webdriver browser=webdriver.Chrome()#打开浏览器 url="news.qq.com/zt2020/page/feiyan.htm#/global?nojump=1"#获取数据的地址 #请求浏览器内容：请求方式：get,post,token browser.get(url) #css选择器，id选择器：#开头，class选择器：.开头，标签选择器：p,span,div。 coronavirus_countent=browser.find_element_by_class_name('d')#定位到class选择器d这个内容 print(coronavirus_countent)#查看内容，session,一种缓存机制，通过浏览器解析，然后缓存的内容 # <selenium.webdriver.remote.webelement.WebElement (session="a1aa22161543b44f599e97b35dbc1ac5", element="fe645993-43cb-46cf-83a7-2488dd3d838a")> print(coronavirus_countent.text)#查看当前css.class中的d的内容 coronavirus_time=browser.find_element_by_class_name('ml')#定位到class选择器d这个内容 print(coronavirus_time.text) coronavirus_data=browser.find_element_by_class_name('nowConfirm')#定位到class选择器d这个内容 print("=======") print(coronavirus_data.text) print("=====找nowConfirm下面的字内容") coronavirus_sub=coronavirus_data.find_element_by_class_name('addnum') print(coronavirus_sub.text) browser.quit()
到此这篇关于python+selenium+chromedriver实现爬虫示例代码的文章就介绍到这了,更多相关python selenium chromedriver 爬虫内容请搜索易盾网络以前的文章或继续浏览下面的相关文章希望大家以后多多支持易盾网络！
本文共计621个文字，预计阅读时间需要3分钟。
下载所需程序：Selenium简介Selenium是一个用于Web应用程序测试的工具，它可以直接在浏览器中运行，就像真实的用户在操作一样。
2. Selenium安装方法一：在Windows命令行（cmd）中输入“pip install Selenium。”
下载好所需程序
1.Selenium简介
Selenium是一个用于Web应用程序测试的工具，直接运行在浏览器中，就像真正的用户在操作一样。
2.Selenium安装
方法一：在Windows命令行（cmd）输入pip install selenium即可自动安装，安装完成后，输入pip show selenium可查看当前的版本
方法二：直接下载selenium包：
selenium下载网址
Pychome安装selenium如果出现无法安装，参考以下博客
解决Pycharm无法使用已经安装Selenium的问题
3.禁止谷歌浏览器自动更新
搜索本地：管理工具-服务-Google自动更新服务-选择禁止
安装浏览器对应的驱动driver
我这里用的是谷歌，选择对应的驱动版本
驱动的下载地址如下：
chromedriver.storage.googleapis.com/index.html
win32、win64的都下载win32.zip的
将下载的chromedriver进行解压，并将文件复制或移动到，浏览器快捷方式所在目录。
环境变量配置
1.Python环境配置
2.chromedriver环境配置
3.pychrome的python环境指向自己电脑安装好的python
注意：将下载好的chromewebdriver.exe驱动放在Python的安装路径下的Scripts里面，同时将Scripts路径添加到PATH中，这样每次运行python的时候就会自动加载驱动
代码实现
#已经准备环境：webdriver:Google已经安装好；环境变量配置好；pip install selenium; #selenium是一个包，包有很多对象，对象有属性，方法。 from selenium import webdriver browser=webdriver.Chrome()#打开浏览器 url="news.qq.com/zt2020/page/feiyan.htm#/global?nojump=1"#获取数据的地址 #请求浏览器内容：请求方式：get,post,token browser.get(url) #css选择器，id选择器：#开头，class选择器：.开头，标签选择器：p,span,div。 coronavirus_countent=browser.find_element_by_class_name('d')#定位到class选择器d这个内容 print(coronavirus_countent)#查看内容，session,一种缓存机制，通过浏览器解析，然后缓存的内容 # <selenium.webdriver.remote.webelement.WebElement (session="a1aa22161543b44f599e97b35dbc1ac5", element="fe645993-43cb-46cf-83a7-2488dd3d838a")> print(coronavirus_countent.text)#查看当前css.class中的d的内容 coronavirus_time=browser.find_element_by_class_name('ml')#定位到class选择器d这个内容 print(coronavirus_time.text) coronavirus_data=browser.find_element_by_class_name('nowConfirm')#定位到class选择器d这个内容 print("=======") print(coronavirus_data.text) print("=====找nowConfirm下面的字内容") coronavirus_sub=coronavirus_data.find_element_by_class_name('addnum') print(coronavirus_sub.text) browser.quit()
到此这篇关于python+selenium+chromedriver实现爬虫示例代码的文章就介绍到这了,更多相关python selenium chromedriver 爬虫内容请搜索易盾网络以前的文章或继续浏览下面的相关文章希望大家以后多多支持易盾网络！