脚本之家,脚本语言编程技术及教程分享平台!
分类导航

Python|VBS|Ruby|Lua|perl|VBA|Golang|PowerShell|Erlang|autoit|Dos|bat|shell|

服务器之家 - 脚本之家 - Python - Python实现自动化网页操作

Python实现自动化网页操作

2023-10-18 14:14安乐常 Python

python语言中可以使用selenium来实现自动化网页操作,本文就给大家介绍下python自动操作网页的实现方法,有需要的朋友可以参考下

编程语言:python

集成开发环境(IDE):Visual Studio Code

配置方法参照Visual Studio Code配置Python编程环境

1 准备

推荐使用Chrome浏览器

1.1 安装selenium程序包

激活虚拟环境,打开新的Terminal,输入以下代码:

python -m pip install selenium

如下图所示,表示安装成功,版本为4.7.2

Python实现自动化网页操作

关闭虚拟环境,打开新的Terminal

1.2 引入函数模块

#引入time模块,实现延时
import time
#引入selenium库中的webdriver模块,实现对网页的操作
from selenium import webdriver
#引入By Class,辅助元素定位
from selenium.webdriver.common.by import By
#引入ActionChains Class,辅助鼠标移动
from selenium.webdriver.common.action_chains import ActionChains

2 实现

2.1 打开网页

#打开谷歌浏览器
driver = webdriver.Chrome() 
#打开网页
driver.get('URL') #将URL替换为需要操作的网址

2.2 元素定位

要想实现对网页的控制,需要首先定位网页上的元素,一般为搜索框、选项、按钮等。

selenium 4.0以上的版本更新了元素定位方式,要用到find_element函数,用法举例如下:

el = driver.find_element(By.NAME, "*")

首先要获取元素的信息:

打开网页后,按F12,打开元素审查窗口

Python实现自动化网页操作

点击窗口中红框标出的图标,即可在页面上选择需要定位的元素,查看其代码。

一般需要定位的元素代码都以input开头,下图为搜索框的代码,从代码中可以提取定位元素所需要的信息:

Python实现自动化网页操作

根据下列信息均可以定位元素,但要保证根据该信息可以唯一定位到该元素:

By. *
NAME name=“*”
CLASS_NAME class_name=“*”
ID id=“*”
TAG_NAME tag_name=“*”
LINK_TEXT  
PARTIAL_LINK_TEXT  
CSS_SELECTOR  
XPATH Copy full XPath

如果根据其他信息无法唯一定位该元素,可以采取XPath定位,XPath的获取方式比较特殊,需要右键单击该代码行,在下拉列表中选择Copy full XPath,如下图所示:

Python实现自动化网页操作

2.3 元素控制

定位到元素后,可以进行下列操作,实现对元素的控制:

method 功能
click() 点击
send_keys(‘*’) 输入
clear() 清空

以输入文字为例,代码如下(*为需要输入的文字):

el.send_keys('*')

如果打开网页时,需要控制的元素不在可视范围内,需要滑动鼠标定位,则要借助于ActionChains,否则可能会报错:找不到该元素。

ActionChains(driver).move_to_element(el).click().perform()
el.click()

上述示例为点击操作,其中第二行最好加上,确保点到该元素

另外一种找不到元素的原因可能是网页还没有加载完毕,此时就可以借助于延时功能:

time.sleep(1)

2.4 弹出框的处理

如果点击按钮后,不是打开一个新的页面,而是弹出了一个窗口,需要在新的窗口中操作,则需要通过如下代码转到新的frame下,否则可能会报错:找不到该元素。

driver.switch_to.frame(0)

随后继续按2.2定位元素即可。

到此这篇关于Python实现自动化网页操作的文章就介绍到这了,更多相关内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文地址:https://blog.csdn.net/weixin_50249477/article/details/128714797

延伸 · 阅读

精彩推荐
  • PythonDRF之请求与响应的实现

    DRF之请求与响应的实现

    本文主要介绍了DRF请求与响应的实现,文中通过示例代码介绍的非常详细,需要的朋友们下面随着小编来一起学习学习吧...

    暗黑妹妹11402021-12-13
  • PythonPython 多进程和数据传递的理解

    Python 多进程和数据传递的理解

    这篇文章主要介绍了Python 多进程和数据传递的理解的相关资料,希望通过本文能帮助到大家,需要的朋友可以参考下...

    wait_for_eva5552020-12-11
  • PythonPython正则抓取新闻标题和链接的方法示例

    Python正则抓取新闻标题和链接的方法示例

    这篇文章主要介绍了Python正则抓取新闻标题和链接的方法,结合具体实例形式分析了Python正则匹配页面元素及文件写入相关操作技巧,需要的朋友可以参考下...

    我要的shine6062020-09-30
  • Pythonkeras分类模型中的输入数据与标签的维度实例

    keras分类模型中的输入数据与标签的维度实例

    这篇文章主要介绍了keras分类模型中的输入数据与标签的维度实例,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...

    xytywh6332020-07-03
  • PythonPython xlrd/xlwt 创建excel文件及常用操作

    Python xlrd/xlwt 创建excel文件及常用操作

    这篇文章主要介绍了Python xlrd/xlwt 创建excel文件及常用操作,帮助大家更好的理解和使用python办公,感兴趣的朋友可以了解下...

    淡怀8622020-09-24
  • Pythonpython中的itertools的使用详解

    python中的itertools的使用详解

    这篇文章主要介绍了python中的itertools的使用详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面...

    你就像只铁甲小宝18042020-04-26
  • PythonPython区块链创建Block Class教程

    Python区块链创建Block Class教程

    这篇文章主要为大家介绍了Python区块链创建Block Class教程详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪...

    菜鸟教程11942023-02-15
  • PythonNumPy 如何生成多维数组的方法

    NumPy 如何生成多维数组的方法

    这篇文章主要介绍了NumPy 如何生成多维数组的方法,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧...

    lusing13122021-01-12