标签：bro 浏览器 驱动程序 selenium li 初步 模块 page

问题：
selenium模块和爬虫之间又怎样的关联？

• 便捷的获取网站中动态加载的数据（ajax）
• 便捷的实现模拟登录

Selenium测试直接运行在浏览器中，就像真正的用户在操作一样
什么是selenium？

• 基于浏览器自动化的一个模块。

selenium的使用流程：

• 环境的安装： pip install selenium

• 下载一个浏览器的驱动程序
  - 下载路径http://chromedriver.storage.googleapis.com/index.html
  - 驱动程序和浏览器的映射关系：
  https://blog.csdn.net/huilan_same/article/details/51896672

• 实例化一个浏览器对象

• 编写基于浏览器的自动化的代码

from selenium import webdriver
from lxml import etree
from time import sleep
# 实例化一个浏览器对象（传入浏览器的驱动程序）
bro = webdriver.Chrome(executable_path='./chromedriver.exe')
# 让浏览器发起一个指定的url对应请求
bro.get('http://scxk.nmpa.gov.cn:81/xk/')

# 获取浏览器当前页面的源码数据
page_text = bro.page_source

# 解析企业名称
tree = etree.HTML(page_text)
li_list = tree.xpath('//ul[@id="gzlist"]/li')
for li in li_list:
    name = li.xpath('./dl/@title')[0]
    print(name)
sleep(5)
bro.quit()

标签：bro,浏览器,驱动程序,selenium,li,初步,模块,page
来源： https://blog.csdn.net/qq_43278562/article/details/115458722

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。