selenium是一个python知名的自动化测试库,它可以执行批量化的浏览器操作,因此有些爬虫会采用selenium的方式进行开发。接下来的这篇文章小编就通过一个selenium使用示例来介绍一下python怎么使用selenium库。
第一步:python中安装selenium库
和其他所有Python库一样,selenium库需要安装
pip install selenium # Windows电脑安装selenium
pip3 install selenium # Mac电脑安装selenium
第二步:下载谷歌浏览器驱动并合理放置
selenium的脚本可以控制所有常见浏览器,在使用之前需要安装浏览器端的驱动
注意:驱动和浏览器要版本对应
推荐使用Chrome浏览器:谷歌浏览器驱动
打开chrome浏览器,在网址栏中输入chrome://version/打开关于版本页面,根据版本信息下载相应chrome驱动
将驱动放在python的安装目录(我的python集成在Anaconda3)
第三步:使用selenium爬取QQ音乐歌词(简单示例)
import time
# 本地Chrome浏览器设置方法
from selenium import webdriver #从selenium库中调用webdriver模块
driver = webdriver.Chrome() # 设置引擎为Chrome,从本地打开一个Chrome浏览器
driver.get('https://y.qq.com/n/ryqq/songDetail/0002Pa3i2ZU2Ec') # 打开网页
time.sleep(3) # 程序暂停3秒钟,等待网页加载完毕
div_p = driver.find_element_by_id('lrc_content') # 解析网页并提取所需标签
print(div_p.text) # 打印文本
driver.close() # 关闭浏览器
小结
到此这篇关于python怎么使用selenium库的文章就介绍到这了,更多selenium库的使用教程请搜索W3Cschool以前的文章或继续浏览下面的相关文章。
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。