自动化填写每日健康和出行报告

2020-06-26 阅读量

今年因为众所周知的原因，一整个学期都在家，但是学校要求每天都需要填报健康和出行报告… 坚持了一个学期，真的坚持不下去= =，趁这两天有空写一个自动化工具解放自己～

1 整体思路

基于填报系统的特点，考虑了两种自动化提交的方式：

使用selenium自动化框架进行模拟填报这部分内容请参考上一篇博文
直接通过https协议获取页面，登陆并发送对应的post报文

这一篇文章主要分析第二种方式。

2 分析过程

因为这是一个需要登陆的网站，所以我们首先需要建立session并登陆。因为网站采用了https，并且页面跳转比较迅速，很难直接在chrome的开发者工具中看到对应的报文，所以这里我才用了Burpsuite Proxy的方式，拦截了中间的报文。看到了登陆过程中对应的post请求。

这里可以看出这个post表单有三个参数i_user、i_pass、i_captcha，分别对应用户名、密码和验证码。

因此我们这需要构造这样一个包发送到 https://id.tsinghua.edu.cn/do/off/ui/auth/login/check 这个URL即可。

用同样的方式再来看我们提交日报时候的post请求。只需要向对应的URL发送指定内容的post报文即可。这里需要注意每次post报文发送的URL是否一致，我这里尝试拦截了多次，发现目标URL是一致的。

3 Code


import requests
from bs4 import BeautifulSoup
import time
# d = {'ticket':'pm8EKA0Hpw2n01D949N7SSG68AQWXF5TXQ9R'}
header = {
    # POST /do/off/ui/auth/login/check HTTP/1.1
    'Host': 'id.tsinghua.edu.cn',
    'Connection': 'keep-alive',
    # Content-Length: 49
    # Cache-Control: max-age=0
    # Upgrade-Insecure-Requests: 1
    'Origin': 'https://id.tsinghua.edu.cn',
    'Content-Type': 'application/x-www-form-urlencoded',
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.97 Safari/537.36',
    # Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9
    # Sec-Fetch-Site: same-origin
    # Sec-Fetch-Mode: navigate
    # Sec-Fetch-User: ?1
    # Sec-Fetch-Dest: document
    'Referer': 'https://id.tsinghua.edu.cn/do/off/ui/auth/login/form/a585295b8da408afdda9979801383d0c/0?/fp/',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8',
}


new_header = {
    'Host': 'thos.tsinghua.edu.cn',
    'Connection': 'close',
    # Content-Length: 4209
    'Accept': 'application/json, text/javascript, */*; q=0.01',
    # X-Requested-With: XMLHttpRequest
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.97 Safari/537.36',
    'Content-Type': 'text/plain;charset=UTF-8',
    'Origin': 'https://thos.tsinghua.edu.cn',
    # Sec-Fetch-Site: same-origin
    # Sec-Fetch-Mode: cors
    # Sec-Fetch-Dest: empty
    'Referer': 'https://thos.tsinghua.edu.cn/fp/formParser?status=select&formid=00b70379-9ac6-4983-b34c-453d600c&service_id=d42b05be-1ad8-4d96-8c1e-14be2bb24e26&process=b9ac0715-58e3-4a03-a984-e13d720b65e8&privilegeId=7396288065e394839668dd9053560290',
    # Accept-Encoding: gzip, deflate
    'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8'
}
# 登陆信息
login_data = {
    'i_user' : 'Stu_ID',
    'i_pass' : 'password',
    'i_captcha' : ''
}

# 表单数据 这里因为信息设计个人信息 予以省略
data = '{header:{"code":0,"message":{"title":"","detail":""}},*******}'

# r = requests.get('https://thos.tsinghua.edu.cn/fp/?ticket=pm8EKA0Hpw2n013N36DBV2KZ9WD97K39WDMU')

while True:
    print( time.strftime("%Y-%m-%d %H:%M:%S", time.localtime()) )
    with requests.Session() as s:
        url = 'https://id.tsinghua.edu.cn/do/off/ui/auth/login/check'
        r = s.get('https://thos.tsinghua.edu.cn') #建立session
        # print(r.text)
        r = s.post(url, data = login_data)#, headers = header)
        # print(r.text)
        # print(r.url)
        soup = BeautifulSoup(r.text,'html.parser')
        href = soup.find_all('a')[0]['href']
        r = s.get(href)
        r = s.post('https://thos.tsinghua.edu.cn/fp/formParser?status=update&formid=00b70379-9ac6-4983-b34c-453d600c&workflowAction=startProcess&workitemid=&process=b9ac0715-58e3-4a03-a984-e13d720b65e8', headers = new_header, data = data.encode('utf-8'))
        print(r.text)
    time.sleep(10)

总结

直接发送https报文的方式更接近于问题的本质，所以会更简洁。但是要注意的是这里因为报文固定，为了简便，我直接从拦截的报文中获取了对应的数据，如果需要从https通信中自动获取信息，要经历更复杂的通信过程。拦截过程就发现了，其实这一过程的通信不止这两个包。

Okay，将代码挂在服务器上设定间隔时间，大功告成！