python网页操作自动化脚本(python自动化操作浏览器)
想要用python3做个软件对网页自动化操作,需要搭建什么环境,如何实现???
只用python就行了啊。vs和pycharm都算是编辑器没什么关系啊,就是用记事本编辑也行哦。那就用pycharm吧,大家都吹嘘它好用。
就是用python的urllib模块请求网页就可以了。
登录就是post数据,然后获得cookie(可能还有一下其他的东西),带着它就可以做一些评论。
评论就是根据按钮找到相关的网页链接,向它post/get数据。
评论采集就是请求相关的网页,获得评论的数据,可能是html或者json之类的,然后用beautifulsoup或者json分析,获得格式化后的数据。
以前用Python做过一个空间的自动点赞、自动回复说说留言、获取留言的程序。
只要就是分析链接和js脚本费点时间。其他地方都简单。
PYTHON怎样编写自动化
就直接写脚本,给你举给例子:
编写工具:
1.设计目标:
首先说一下我要工具的功能:
遍历某个目录下包括其下子目录中所有指定的后缀文件,然后为这些文件的头部插入指定的字符串。
2.使用场景:
设计这样的工具起因是我最近在将之前 CSDN 中的博客搬运到自己的 Hexo 博客空间上,了解的应该知道,假如都是 Markdown 编写的话,搬运的时候只需要在文件头部加上如下的一串额外的内容:
---
title: 博客标题
date: 博客创建时间(例如:2016-09-03 17:15:22)
tags: 标签(如:[Hexo,Next],多个的话用,号隔开)
categories: 分类(如:Web)
---123456
标题?title?直接使用文件名称去掉?.md?后缀即可;
时间?date?需要通过文件库获取文件的创建时间;
标签?tags?和分类?categories?,由于我的文件会根据分类放入不同的子目录下,所以直接获取当前文件所在目录的名称即可。
此外,为了在博客首页只展示部分内容,而不是展开博客的完整内容,还需要在博客中恰当的位置插入这个标签:!--more--?,通常加载第一段内容结束的位置。
3.实现代码:
根据上面的思路,我们在?source/_posts?目录下创建一个工具脚本,起名为?SuitFileToHexo.py?,然后依次完成以下步骤:
指定 Linux 环境下 Python 解释器目录,并指定编码方式:
#!/usr/bin/env python# -*- coding: utf-8 -*-
引入的模块:
在脚本开始的地方,最先需要做的事情就是把需要用到的模块都先引入进来,大致分析一下我们这个功能需要用到的模块:
import os.path,time
1
遍历当前目录下所有?.md?文件列表:
这就需要使用到 Python 的文件目录操作模块?os.path?,使用?os.listdir?获取目录列表,然后通过?os.path.splitext?分割文件名称和后缀名,从而筛选合格的文件:
# 获取指定目录指定后缀名的文件列表def getFileList(path,endStr):'''获取指定目录下,指定后缀的文件列表'''r_list = []
f_list = os.listdir(path) ? #获取目录列表for i in f_list: ? ?# 分离文件名和后缀名,过滤掉工具脚本
file_endStr = os.path.splitext(i)[1] ? ?# 判断是否是目录
if os.path.isdir(i):
f_list1 = os.listdir(path+'/'+i) ? ? ? ?for j in f_list1: ? ? ? ? ? ?# 过滤出指定后缀 endStr 后缀的文件
if os.path.splitext(j)[1] == endStr: ? ? ? ? ? ? ? ?# 为了清晰目录把文件所在目录也标识出来
r_list.append(i+'/'+j) ? ? ? ? ? ? ? ?# print j.decode("string_escape")
elif file_endStr == endStr:
r_list.append(i)return r_list
这里发现了一个问题,就是在?os.path.isdir(i)?在 2.7.11 的版本莫名其妙地返回 false,需要做如下修改才能正常:
if file_endStr == '':
i = os.path.join(path, i) ? #=================〉这一行很必要
# print i
# 判断是否是目录
if os.path.isdir(i):
...
获取文件的创建时间:
需要使用到?os.time?模块的功能:
# 获取文件创建时间def get_FileCreateTime(filePath):
t = os.path.getctime(filePath) ?return TimeStampToTime(t)# 把时间戳转化为时间: 1479264792 to 2016-11-16 10:53:12'''def TimeStampToTime(timestamp):
timeStruct = time.localtime(timestamp) ?return time.strftime('%Y-%m-%d %H:%M:%S',timeStruct)
获取博客标题:
其实就是从目录字符串中截掉后缀名,再截掉最后一个?/?之前的内容即可得到博客名称:
# 获取目录中去掉前面路径和后缀的文件名字def getFileSimpleName(filePath):
name = ''
# 先去掉后缀
name = os.path.splitext(filePath)[0] ?# 获取最后一个斜杠位置
index = name.rfind('/') ?# 找不到则返回 -1
if index != -1: ?# 截取斜杠后面到结尾内容
name = name[index+1:] ?# print name
return name
获取文件所在的目录名称作为页签值:
与获取博客名称思路略有相似,获取最后一个斜杠位置,截掉斜杠之后的内容,在获取一个最后一个斜杠位置,假如有则截取斜杠之后的内容即是文件所在目录的名称:
# 获得分类文件目录名称def getTypeNameByPath(filePath):fileTag = ''# 获取最后一个斜杠位置index = filePath.rfind('/')# 找不到则返回 -1if index != -1: ? ?# 截取斜杠后面到结尾内容
fileTag = filePath[:index] ? ?# 截掉前面部分
index = fileTag.rfind('/') ? ?if index != -1:
fileTag = fileTag[index+1:]# print fileTagreturn fileTag
向文件中插入内容:
调用以上方法即可分别得到我们想要的信息:
# 指定目录path = './'# 得到文件列表files = getFileList(path,'.md') ?
for i in files: ?print 'title: '+getFileSimpleName((i.decode("string_escape"))) ?print 'date: '+get_FileCreateTime((path+i.decode("string_escape"))) ?print 'tags: ['+getTypeNameByPath((i.decode("string_escape")))+']'
接下来要做的就是把这些内容按照格式插入到文件中去,当然插入之前需要先检查文件中是否已经插入过类似的内容了,可以简单地通过检查开头 40 个字符串中是否包含这个字符串来判别:
'''---
title: '''
关于展示分隔符?!--more--?插入的位置,大致逻辑是:第一个标题后面,而且刚好插入在第二个标题之前即可,而使用 Markdown 语法撰写的博客标题使用?#?来表示的,最终的插入方法如下:
# 向文件中插入指定数据def addHeadToFile(filePath,title,date,tags):file = open(filePath,"r")
content = file.read()
index = content[:40].find('''---
title:''')# 添加if index == -1: ? ?print 'Undadded'
addContent = '''---
title: '''+title+'''
date: '''+date+'''
tags: ['''+tags+''']
categories: '''+tags+'''
hr /
'''
# 检测是否插入部分显示标签
content = addContent + content
index = content.find('''!--more-- ''') ? ?if index == -1: ? ? ? ?# 获取第一段的位置
index = content.find('''### ''') ? ? ? ?if index != -1: ? ? ? ? ? ?#print "first ### pos = ",index
# 下一个标题位置(在第二个标题之前插入即可)
pos = content[index:].find('''
#''',1) ? ? ? ? ? ?if pos != -1:
index += pos ? ? ? ? ? ? ? ?#print "second enter pos = ",index
content = content[:index]+'''
!--more--
'''+content[index:]
file = open(filePath,"w")
file.write(content)else: ? ?#print 'file head had added'# 记得要关闭文件file.close()
最后完整的调用过程:
# 指定目录path = './'# 得到文件列表files = getFileList(path,'.md') ?
# 声明一些全局变量title = ''date = ''tags = ''for i in files:
title = getFileSimpleName(i.decode("string_escape"))
date = get_FileCreateTime(path+i.decode("string_escape"))
tags = getTypeNameByPath(i.decode("string_escape")) ? ?print 'title: '+title ? ?print 'date: '+date ? ?print 'tags: ['+tags+']'
addHeadToFile(path+i.decode("string_escape"),title,date,tags)
appium + python编写自动化脚本
之前一篇博客已经讲述怎样手动使用 appium-desktop启动测试机上的app ,但我们实际跑自动化脚本的过程中,是需要用脚本调用appium启动app的,接下来就尝试写Python脚本启动app并登陆app。环境为Windows10 + Python3.7 + appium1.18.0 + Android手机 + 今日头条app + Pycharm
具体的获取方法请参考 APP自动化测试之appium连接真机启动app ,配置信息如下:
appium在本机开启的话则IP为127.0.0.1,端口默认为4723
我们会看到手机上今日头条app被打开。
我们查看手机,会发现手机正在自动做登录今日头条的app操作,且登录成功。
至此,我们通过编写一个简单的Python脚本完成了登录app的操作,如果加上断言,就是一条完整的用例。
想用python编写一个脚本,登录网页,在网页里做一系列操作,应该怎样实现?
python编写一个脚本的具体操作:
1、首先,打开python并创建一个新的PY文件。
2、其次,import os,因为涉及系统文件的路径,因此首先在此处导入系统模块。
3、随后,可以双击打开HTML文件,然后就可以看到书写的网页,如下图所示。
4、最后,添加html.close(),需添加此行代码以关闭,否则将占用大量内存,如下图所示。这样,用python简单的制作一个网页的所有操作就完成了。完成。