【闲鱼社区互助】学生求助:如何在空闲时提供帮助而不被牵连?

简介: 通过编写Python脚本来帮助预约实验室仪器的过程,包括需求分析、获取仪器ID、生成时间列表、处理登录态(使用cookie)、实现预约步骤以及提供完整的代码实现。同时,文章还探讨了使用gevent协程并发请求的可能性,并总结了在实现过程中遇到的问题和思考。

一、先说背景

大学生论文求助二,因为是需要在实验室利用仪器测验结果以完成论文,所以在预约设备的使用时间上是个难题!不是约不到就是约不到还被导师骂,真是大怨种,没办法因为真的很难,几乎不亚于春运票!

1.1、来自闲鱼的求助

题主不知道这样做是对是错,但如果要是把服务器打挂了,是不是要负法律责任?好像是这样的,之前有过这样的新闻,不过…题主想要留一手,应该是可以办到。

二、需求分析

一开始沟通,题主以为是雇主想通过模拟操作web端实现预约的行为,结果就是一顿操作最后得到的结果是耗时太长,比人工还长,可能就会失手被别人捷足先登,所以题主仔细研究,还是得仔细一点,枉做了前面许多无用功;决定通过API的形式来预约仪器。

2.1、仪器ID

它是唯一不变的ID,这个是每个设备固定的ID。

2.2、时间

这个就比较恶心了,它是每十分钟为一个时段预约,假如要预约上午9点30到17点30分就需要48个时间点,所以需要自己手动生成,否则就是复制参数修改日期即可。

# 预约日期
base_date = "2022-07-01"
subx_date = "{} {}:{}:00"
date_list = []


def generate_time_list():
    """生成预约时间段:list --> str"""
    for h in range(9, 18):
        if h == 9:
            h = "".join(["0", str(h)])
        for m in range(0, 59, 10):
            if m == 0:
                a = subx_date.format(base_date, h, str(m) * 2)
            else:
                a = subx_date.format(base_date, h, m)
            date_list.append(a)

    AppointmentTimes = ",".join(date_list[3:-3])

    return AppointmentTimes
2.3、登录态

在F12分析过程中发现,它不是以登录返回token这样的形式保持登录,而是通过cookie来储存的,毕竟是web端,这样做没有问题,所以它需要cookie,因为单纯的登录还有验证码,这需要识别图片验证码技术,比较繁琐不愿意浪费时间在这上面,所以选择复制登录后的cookie即可。

# 登录cookies;过期后需要登录再次更新cookie,浏览器打开F12-->network正常的http请求,在requests header处复制cookie的值
cookie = "csrftoken=835328320; CULTURE=zh-CN; bn_theme_style=jinan; .AspNetCore.Session=CfDJ8DKTn8Q111g95NRrGwYnoItkylVnyV1EB4cDINYXeP/Zu0c3xlEt0XXJqGOIG4S7W93ZE+gSpswUnvZTlP49yJEkZZEE+VSlWEQC4WvkKY1jM0MG3UMCzXlnc3uOW4HfoqvySk8hgX/a+SrWJg3CGWRGABCJItPnQaxft0y6q; .AspNetCore.Cookies=CfDJ8DKTn8Q-D8lJhg95NRrGwYkAZmXiJuVm-p1DhTyvaZiiQ7nfSq6YFZceS4PHYj111ZuWUl11tCZv0SE0OAajkVn9ZUPk85QRqagurWzsEU-tadi-NEJnKdzgN9ffJoc5OYEp8wPSYOL4LAN3CnpDgGAIOdsrsn7diiOhulO-GZkRBzJZpwtghcwiWHfju4cyx6rEJGpQrdR-0xBe3GSKmDt8lKKr_lD-HtXEWMMLbVompyA_JhkXlKUQKOohq5JTgvffEHB2SVanXm2ePzHkKbEX3pffrXA_6Tb3gTF8aZs_TQzoPKBDsQHdr4Y808BS1A"
cookies = {
   }
coo = RequestsCookieJar()
for cook in cookie.split(";"):
    co = cook.strip().split("=")
    cookies[co[0]] = co[1]  # 使用grequests库做请求时需要的cookies
    coo.set(co[0], co[1])  # http请求set登录态
2.4、实现步骤

前面已经获取了API、入参、cookies;剩下来的操作就是模拟用户行为了,多测试几遍是否可行!不行,又是哪里出了问题,所以题主需要在这里把问题都摸清了。然后按部就班完成一次测试,代表代码和逻辑实现没有问题。

2.5、完整的代码
import time

import requests
from requests.cookies import RequestsCookieJar

# 预约地址
url = "https://xxxxxx.edu.cn/xxsole/xxxtment/xxxpointment"
# 预约日期
base_date = "2022-07-01"
subx_date = "{} {}:{}:00"
date_list = []


def generate_time_list():
    """生成预约时间段:list --> str"""
    for h in range(9, 18):
        if h == 9:
            h = "".join(["0", str(h)])
        for m in range(0, 59, 10):
            if m == 0:
                a = subx_date.format(base_date, h, str(m) * 2)
            else:
                a = subx_date.format(base_date, h, m)
            date_list.append(a)

    AppointmentTimes = ",".join(date_list[3:-3])

    return AppointmentTimes


# 构造入参
payload = {
   "EquipmentId": "da7xxxx607-1e2xx659-baxxxa7xxxx2a",  # 设备id
           "ChangeAppointmentId": None,
           "AppointmentUserId": None,
           "VirtualEquipmentBindId": None,
           "WeekIndex": None,
           "AppointmentStep": 10,
           "bookingTime_1": base_date,  # 预约日期
           "SubjectId": "12dxx3-4ae6-xxxx-3cdd1xxxx74",  # 科研主题
           "SubjectProjectId": None,
           "UseNature": 0,
           "ExperimentationContent": 1,
           "SampleNo": None,
           "SampleCount": 0,
           "SampleStuff": None,
           "SampleSize": None,
           "Target": None,
           "hasReadTheNotice": "on",
           "AppointmentTimes": generate_time_list()}  # 预约时间

# 登录cookies;过期后需要登录再次更新cookie,浏览器打开F12-->network正常的http请求,在requests header处复制cookie的值
cookie = "csrftoken=835xxxx8320; CULTURE=zh-CN; bn_theme_style=xxxn; .AspNetCore.Session=CfDx223n8Q+D8lJhg95NRrGwYnoItkylVnyV1EB4cDINYXeP/Zu0c3xlEt0XXJqGOIG4S7W93ZE+gSpswUnvZTlP49yJEkZZEE+VSlWEQC4WvkKY1jM0MG3UMCzXlnc3uOW4HfoqvySk8hgX/a+SrWJg3CGWRGABCJItPnQaxft0y6q; .AspNetCore.Cookies=CfDJ8DKTn8Q-D8lJhg95NRrGwYkAZmXiJuVm-p1DhTyvaZiiQ7nfSq6YFZceS4PHYjXplZuWUl11tCZv0SE0OAajkVn9ZUPk85QRqagurWzsEU-tadi-NEJnKdzgN9ffJoc5OYEp8wPSYOL4LAN333gGAIOdsrxxxiOhulO-GZkRBzJZpwtghcwiWHfju4cyx6rEJGpQrdR-0xBe3GSKmDt8lKKr_lD-HtXEWMMLbVompyA_JhkXlKUQKOohq5JTgvffEHB2SVanXm2ePzHkKbEX3pffrXA_6Tb3gTF8aZs_TQzoxxxHdr4Y808BS1A"
cookies = {
   }
coo = RequestsCookieJar()
for cook in cookie.split(";"):
    co = cook.strip().split("=")
    cookies[co[0]] = co[1]  # 使用grequests库做请求时需要的cookies
    coo.set(co[0], co[1])  # http请求set登录态

# 模拟请求头信息
headers = {
   "content-type": "application/x-www-form-urlencoded; charset=UTF-8", 'Connection': 'close'}
headers[
    "Referer"] = "https://xxxxxx/Coxxx/Apxxxtment/ApxxxxentBoxContainer?id=da796xxxxxc1a7372a"
headers["Origin"] = "https://xxxxx.edu.cn"
headers["Host"] = "xxxxx.edu.cn"
headers[
    "User-Agent"] = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.0.0 Safari/537.36"

# http session请求对象
sess = requests.session()
sess.cookies.update(coo)  # 刷新cookie

while True:  # 预约前,不断循环
    start_time = time.time()
    res = sess.post(url=url, data=payload, headers=headers)
    if "预约成功" in res.text and "xxx" in res.text:
        print("恭喜你,预约成功!!!")
        break  # 预约成功跳出循环
    elif "暂时不可预约" in res.text:
        print(res.text)
        continue  # 经过测试每5s才成功请求一次
    else:
        print(res.text)  # 预约失败
    spent_time = time.time() - start_time
    print("花费是时间:{}s".format(spent_time))

三、扩展

  • 想通过gevent协程并发来解决预约问题,不管并发多少次,每次都只会成功一次,接下来的并发8次都会失败,所以不采用这种损人不利己的方式。
import grequests
from requests.cookies import RequestsCookieJar

# 登录cookies;过期后需要登录再次更新cookie,浏览器打开F12-->network正常的http请求,在requests header处复制cookie的值
cookie = "csrftoken=835328320; CULTURE=zh-CN; bn_theme_style=jinan; .AspNetCore.Session=CfDJ8DKTn8Q+D8lJhg95NRrGwYnoItkylVnyV1EB4cDINYXeP/Zu0c3xlEt0XXJqGOIG4S7W93ZE+gSpswUnvZTlP49yJEkZZEE+VSlWEQC4WvkK211122UMCzXlnc3uOW4HfoqvySk8hgX/a+SrWJg3CGWRGABCJItPnQaxft0y6q; .AspNetCore.Cookies=CfDJ8DKTn8Q-D8lJhg95NRrGwYkAZmXiJuVm-p1DhTyvaZiiQ7nfSq6YFZceS4PHYjXplZuWUl11tCZv0SE0OAajkVn9ZUPk85QRqagurWzsEU-tadi-NEJnKdzgN9ffJoc5OYEp8wPSYOL4LAN3CnpDgGAIOdsrsn7diiOhulO-GZkRBzJZpwtghcwiWHfju4cyx6rEJGpQrdR-0xBe3GSKmDt8lKKr_lD-HtXEWMMLbVompyA_JhkXlKUQKOohq5JTgvffEHB2SVanXm2ePzHkKbEX3pffrXA_6Tb3gTF8aZs_TQzoPKBDsQHdr4Y808BS1A"
cookies = {
   }
coo = RequestsCookieJar()
for cook in cookie.split(";"):
    co = cook.strip().split("=")
    cookies[co[0]] = co[1]  # 使用grequests库做请求时需要的cookies


start_time = time.time()
for _ in range(3):
    req_list = [grequests.post(url=url, data=payload,cookies=cookies, headers=headers) for _ in range(20)]
    res_list = grequests.map(req_list)
    for res in res_list:
        print(res.text)
spent_time = time.time() - start_time
print("花费是时间:{}s".format(spent_time))

四、总结

从时间成本上来算,是亏了,首先误以为是ui自动化可以达到目的,效果有了但是不一定能成功,所以题主痛定思痛,需要认真思考、分析雇主的需求,然后再决定实现方案,免得最后雇主会因不满意而拒绝买单。

相关文章
|
3月前
|
消息中间件 Cloud Native Java
AutoMQ 社区双周精选第十一期(2024.05.27~2024.06.12)
AutoMQ v1.0 追踪修复Apache Kafka 3.4.x多个BUG,提升CPU与GC性能。优化包括修复Raft线程异常、死锁及NPE问题,防止网络分区导致脑裂。Netty Chunk大小调整减少CPU使用,取消跨块分配策略以降低GC负担。此外,AutoBalancing的Reporter和Retriever现支持指定Listener Name进行安全配置。关注公众号获取更多社区更新,一起参与云原生消息中间件建设!
38 3
|
3月前
|
传感器 存储 数据采集
技术好文共享:焕新!CANape19真香!
技术好文共享:焕新!CANape19真香!
|
4月前
|
消息中间件 Cloud Native 调度
AutoMQ 社区双周精选第十期
AutoMQ 发布1.0.5版,更改默认日志滚动为大小滚动,限制日志空间在5GiB内,增强大规模对象删除性能。AutoBalancing调度加速,使用攒批间隔策略执行Action,每批对单一节点操作不超过50,批次间间隔5秒。
30 0
|
4月前
|
监控 架构师 算法
直到前京东高级架构师来到我们单位,我才知道Java性能调优多重要
现代大规模关键性系统中的Java性能调优,是一项富有挑战的任务。你需要关注各种问题,包括算法结构、内存分配模式以及磁盘和文件I/O的使用方式。性能调优最困难的是找出问题,即便是经验丰富的人也会被他们的直觉所误导。性能杀手总是隐藏在最意想不到的地方。
|
前端开发 JavaScript 小程序
新来个技术总监,给公司项目引入了全新的业务架构,堪称最佳实践!
新来个技术总监,给公司项目引入了全新的业务架构,堪称最佳实践!
|
运维 前端开发 调度
|
人工智能 算法 自动驾驶
高德技术开放日活动预告 | 聊聊技术与成长那些事,锁定4月10日
为帮助大家解疑答惑,阿里巴巴高德地图为大家准备了本次高德技术开放日活动,并邀请到了核心工程师与大家一起聊聊智慧出行核心技术以及职场实习、成长那些事。4月10日(周六)上午9点半直播,与大家不见不散。
高德技术开放日活动预告 | 聊聊技术与成长那些事,锁定4月10日
|
缓存 前端开发 rax
|
弹性计算 Cloud Native NoSQL
阿里云新品发布会周刊第63期 丨 优秀技术人,如何做到高效沟通?
MaxCompute作为企业级云数据仓库,从底层基础设施、数据中心、网络、供电等,到中间的平台能力安全,再到向上的用户权限管理、隐私保护等共提供三级超过20项安全功能。敬请关注8月5日阿里云新品发布会,将为您详细解读云上大数据平台发展趋势及面临的安全挑战!
697 0
阿里云新品发布会周刊第63期 丨 优秀技术人,如何做到高效沟通?