python中爬虫库selenium模拟人为使用浏览器基础使用

再使用之前需要有一个浏览器驱动控件
我的是win10系统，所以先查看浏览器版本号。
Chrome的在右上角登录右边的菜单栏->帮助->关于Google Chrome中可查看版本
Firefox的在右上角菜单栏->帮助->关于Firefox可查看版本号

Chrome的下载地址
如果没有自己的版本号，找最相近的版本
http://chromedriver.storage.googleapis.com/index.html
Firefox的下载地址，如果没有自己的版本号，找最相近的版本
https://github.com/mozilla/geckodriver/releases

下载完解压到浏览器启动路径。右键快捷方式，点击属性。找到文件路径。将下载好的driver解压到该路径下。然后配置环境变量。也是该driver的路径。完成之后就可以用了、有的电脑可能需要重新启动，环境变量才生效。还有就是需要重新启动你的编辑器。
我用的是Visual Studio Code!
个人推荐这个编辑器，很好用

然后
代码很简单。其中也有注释，就直接上代码了。

# 导包
from selenium import webdriver
import time
import requests


# 建立浏览器对象 指定浏览器Ie  Chrome  .Firefox  .Opera
browser = webdriver.Chrome()

# 使用浏览器访问网站  百度重定向到https
browser.get('http://www.baidu.com')

# 向文本框填充文本
browser.find_element_by_id('kw').send_keys('查找内容')

# 模仿人为等待。
time.sleep(5)
# 模拟点击搜索按钮
browser.find_element_by_id('su').click()

# 等待加载页面
time.sleep(20)


# 匹配多个节点 第一种
# elist = browser.find_elements('css selector','h3')

#第二种
elist = browser.find_elements_by_class_name('t')

text_str = str(elist[0].text)

print(elist[0].text)
# 点击链接
browser.find_element_by_link_text(text_str).click()
print(elist)

# 睡眠
time.sleep(50)
# 关闭浏览器
browser.quit()

火狐的其实一样

只需要改一下使用浏览器

# 建立浏览器对象 指定浏览器Ie  Chrome  .Firefox  .Opera
browser = webdriver.Firefox()

# 使用浏览器访问网站  百度重定向到https
browser.get('http://www.baidu.com')

# # 向文本框填充文本
browser.find_element_by_id('kw').send_keys('你要在文本框输入的内容')

time.sleep(5)
# # 模拟点击搜索按钮
browser.find_element_by_id('su').click()

time.sleep(20)

# # 匹配多个节点 第一种
# elist = browser.find_elements('css selector','h3')

# #第二种
elist = browser.find_elements_by_class_name('t')

text_str = str(elist[0].text)

print(elist[0].text)
# # 点击链接
browser.find_element_by_link_text(text_str).click()


# 关闭浏览器
time.sleep(50)
browser.quit()

python中爬虫库selenium模拟人为使用浏览器基础使用

猜你喜欢