【闲鱼社区互助】学生求助:如何在空闲时提供帮助而不被牵连?

简介: 通过编写Python脚本来帮助预约实验室仪器的过程,包括需求分析、获取仪器ID、生成时间列表、处理登录态(使用cookie)、实现预约步骤以及提供完整的代码实现。同时,文章还探讨了使用gevent协程并发请求的可能性,并总结了在实现过程中遇到的问题和思考。

一、先说背景

大学生论文求助二,因为是需要在实验室利用仪器测验结果以完成论文,所以在预约设备的使用时间上是个难题!不是约不到就是约不到还被导师骂,真是大怨种,没办法因为真的很难,几乎不亚于春运票!

1.1、来自闲鱼的求助

题主不知道这样做是对是错,但如果要是把服务器打挂了,是不是要负法律责任?好像是这样的,之前有过这样的新闻,不过…题主想要留一手,应该是可以办到。

二、需求分析

一开始沟通,题主以为是雇主想通过模拟操作web端实现预约的行为,结果就是一顿操作最后得到的结果是耗时太长,比人工还长,可能就会失手被别人捷足先登,所以题主仔细研究,还是得仔细一点,枉做了前面许多无用功;决定通过API的形式来预约仪器。

2.1、仪器ID

它是唯一不变的ID,这个是每个设备固定的ID。

2.2、时间

这个就比较恶心了,它是每十分钟为一个时段预约,假如要预约上午9点30到17点30分就需要48个时间点,所以需要自己手动生成,否则就是复制参数修改日期即可。

# 预约日期
base_date = "2022-07-01"
subx_date = "{} {}:{}:00"
date_list = []


def generate_time_list():
    """生成预约时间段:list --> str"""
    for h in range(9, 18):
        if h == 9:
            h = "".join(["0", str(h)])
        for m in range(0, 59, 10):
            if m == 0:
                a = subx_date.format(base_date, h, str(m) * 2)
            else:
                a = subx_date.format(base_date, h, m)
            date_list.append(a)

    AppointmentTimes = ",".join(date_list[3:-3])

    return AppointmentTimes
2.3、登录态

在F12分析过程中发现,它不是以登录返回token这样的形式保持登录,而是通过cookie来储存的,毕竟是web端,这样做没有问题,所以它需要cookie,因为单纯的登录还有验证码,这需要识别图片验证码技术,比较繁琐不愿意浪费时间在这上面,所以选择复制登录后的cookie即可。

# 登录cookies;过期后需要登录再次更新cookie,浏览器打开F12-->network正常的http请求,在requests header处复制cookie的值
cookie = "csrftoken=835328320; CULTURE=zh-CN; bn_theme_style=jinan; .AspNetCore.Session=CfDJ8DKTn8Q111g95NRrGwYnoItkylVnyV1EB4cDINYXeP/Zu0c3xlEt0XXJqGOIG4S7W93ZE+gSpswUnvZTlP49yJEkZZEE+VSlWEQC4WvkKY1jM0MG3UMCzXlnc3uOW4HfoqvySk8hgX/a+SrWJg3CGWRGABCJItPnQaxft0y6q; .AspNetCore.Cookies=CfDJ8DKTn8Q-D8lJhg95NRrGwYkAZmXiJuVm-p1DhTyvaZiiQ7nfSq6YFZceS4PHYj111ZuWUl11tCZv0SE0OAajkVn9ZUPk85QRqagurWzsEU-tadi-NEJnKdzgN9ffJoc5OYEp8wPSYOL4LAN3CnpDgGAIOdsrsn7diiOhulO-GZkRBzJZpwtghcwiWHfju4cyx6rEJGpQrdR-0xBe3GSKmDt8lKKr_lD-HtXEWMMLbVompyA_JhkXlKUQKOohq5JTgvffEHB2SVanXm2ePzHkKbEX3pffrXA_6Tb3gTF8aZs_TQzoPKBDsQHdr4Y808BS1A"
cookies = {
   }
coo = RequestsCookieJar()
for cook in cookie.split(";"):
    co = cook.strip().split("=")
    cookies[co[0]] = co[1]  # 使用grequests库做请求时需要的cookies
    coo.set(co[0], co[1])  # http请求set登录态
2.4、实现步骤

前面已经获取了API、入参、cookies;剩下来的操作就是模拟用户行为了,多测试几遍是否可行!不行,又是哪里出了问题,所以题主需要在这里把问题都摸清了。然后按部就班完成一次测试,代表代码和逻辑实现没有问题。

2.5、完整的代码
import time

import requests
from requests.cookies import RequestsCookieJar

# 预约地址
url = "https://xxxxxx.edu.cn/xxsole/xxxtment/xxxpointment"
# 预约日期
base_date = "2022-07-01"
subx_date = "{} {}:{}:00"
date_list = []


def generate_time_list():
    """生成预约时间段:list --> str"""
    for h in range(9, 18):
        if h == 9:
            h = "".join(["0", str(h)])
        for m in range(0, 59, 10):
            if m == 0:
                a = subx_date.format(base_date, h, str(m) * 2)
            else:
                a = subx_date.format(base_date, h, m)
            date_list.append(a)

    AppointmentTimes = ",".join(date_list[3:-3])

    return AppointmentTimes


# 构造入参
payload = {
   "EquipmentId": "da7xxxx607-1e2xx659-baxxxa7xxxx2a",  # 设备id
           "ChangeAppointmentId": None,
           "AppointmentUserId": None,
           "VirtualEquipmentBindId": None,
           "WeekIndex": None,
           "AppointmentStep": 10,
           "bookingTime_1": base_date,  # 预约日期
           "SubjectId": "12dxx3-4ae6-xxxx-3cdd1xxxx74",  # 科研主题
           "SubjectProjectId": None,
           "UseNature": 0,
           "ExperimentationContent": 1,
           "SampleNo": None,
           "SampleCount": 0,
           "SampleStuff": None,
           "SampleSize": None,
           "Target": None,
           "hasReadTheNotice": "on",
           "AppointmentTimes": generate_time_list()}  # 预约时间

# 登录cookies;过期后需要登录再次更新cookie,浏览器打开F12-->network正常的http请求,在requests header处复制cookie的值
cookie = "csrftoken=835xxxx8320; CULTURE=zh-CN; bn_theme_style=xxxn; .AspNetCore.Session=CfDx223n8Q+D8lJhg95NRrGwYnoItkylVnyV1EB4cDINYXeP/Zu0c3xlEt0XXJqGOIG4S7W93ZE+gSpswUnvZTlP49yJEkZZEE+VSlWEQC4WvkKY1jM0MG3UMCzXlnc3uOW4HfoqvySk8hgX/a+SrWJg3CGWRGABCJItPnQaxft0y6q; .AspNetCore.Cookies=CfDJ8DKTn8Q-D8lJhg95NRrGwYkAZmXiJuVm-p1DhTyvaZiiQ7nfSq6YFZceS4PHYjXplZuWUl11tCZv0SE0OAajkVn9ZUPk85QRqagurWzsEU-tadi-NEJnKdzgN9ffJoc5OYEp8wPSYOL4LAN333gGAIOdsrxxxiOhulO-GZkRBzJZpwtghcwiWHfju4cyx6rEJGpQrdR-0xBe3GSKmDt8lKKr_lD-HtXEWMMLbVompyA_JhkXlKUQKOohq5JTgvffEHB2SVanXm2ePzHkKbEX3pffrXA_6Tb3gTF8aZs_TQzoxxxHdr4Y808BS1A"
cookies = {
   }
coo = RequestsCookieJar()
for cook in cookie.split(";"):
    co = cook.strip().split("=")
    cookies[co[0]] = co[1]  # 使用grequests库做请求时需要的cookies
    coo.set(co[0], co[1])  # http请求set登录态

# 模拟请求头信息
headers = {
   "content-type": "application/x-www-form-urlencoded; charset=UTF-8", 'Connection': 'close'}
headers[
    "Referer"] = "https://xxxxxx/Coxxx/Apxxxtment/ApxxxxentBoxContainer?id=da796xxxxxc1a7372a"
headers["Origin"] = "https://xxxxx.edu.cn"
headers["Host"] = "xxxxx.edu.cn"
headers[
    "User-Agent"] = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.0.0 Safari/537.36"

# http session请求对象
sess = requests.session()
sess.cookies.update(coo)  # 刷新cookie

while True:  # 预约前,不断循环
    start_time = time.time()
    res = sess.post(url=url, data=payload, headers=headers)
    if "预约成功" in res.text and "xxx" in res.text:
        print("恭喜你,预约成功!!!")
        break  # 预约成功跳出循环
    elif "暂时不可预约" in res.text:
        print(res.text)
        continue  # 经过测试每5s才成功请求一次
    else:
        print(res.text)  # 预约失败
    spent_time = time.time() - start_time
    print("花费是时间:{}s".format(spent_time))

三、扩展

  • 想通过gevent协程并发来解决预约问题,不管并发多少次,每次都只会成功一次,接下来的并发8次都会失败,所以不采用这种损人不利己的方式。
import grequests
from requests.cookies import RequestsCookieJar

# 登录cookies;过期后需要登录再次更新cookie,浏览器打开F12-->network正常的http请求,在requests header处复制cookie的值
cookie = "csrftoken=835328320; CULTURE=zh-CN; bn_theme_style=jinan; .AspNetCore.Session=CfDJ8DKTn8Q+D8lJhg95NRrGwYnoItkylVnyV1EB4cDINYXeP/Zu0c3xlEt0XXJqGOIG4S7W93ZE+gSpswUnvZTlP49yJEkZZEE+VSlWEQC4WvkK211122UMCzXlnc3uOW4HfoqvySk8hgX/a+SrWJg3CGWRGABCJItPnQaxft0y6q; .AspNetCore.Cookies=CfDJ8DKTn8Q-D8lJhg95NRrGwYkAZmXiJuVm-p1DhTyvaZiiQ7nfSq6YFZceS4PHYjXplZuWUl11tCZv0SE0OAajkVn9ZUPk85QRqagurWzsEU-tadi-NEJnKdzgN9ffJoc5OYEp8wPSYOL4LAN3CnpDgGAIOdsrsn7diiOhulO-GZkRBzJZpwtghcwiWHfju4cyx6rEJGpQrdR-0xBe3GSKmDt8lKKr_lD-HtXEWMMLbVompyA_JhkXlKUQKOohq5JTgvffEHB2SVanXm2ePzHkKbEX3pffrXA_6Tb3gTF8aZs_TQzoPKBDsQHdr4Y808BS1A"
cookies = {
   }
coo = RequestsCookieJar()
for cook in cookie.split(";"):
    co = cook.strip().split("=")
    cookies[co[0]] = co[1]  # 使用grequests库做请求时需要的cookies


start_time = time.time()
for _ in range(3):
    req_list = [grequests.post(url=url, data=payload,cookies=cookies, headers=headers) for _ in range(20)]
    res_list = grequests.map(req_list)
    for res in res_list:
        print(res.text)
spent_time = time.time() - start_time
print("花费是时间:{}s".format(spent_time))

四、总结

从时间成本上来算,是亏了,首先误以为是ui自动化可以达到目的,效果有了但是不一定能成功,所以题主痛定思痛,需要认真思考、分析雇主的需求,然后再决定实现方案,免得最后雇主会因不满意而拒绝买单。

相关文章
|
5月前
|
消息中间件 Java Kafka
AutoMQ 社区双周精选第十二期(2024.06.29~2024.07.12)
欢迎来到 AutoMQ 第十一期双周精选!在过去两周里,主干动态方面,AutoMQ 跟进了 Apache Kafka 3.4.x BUG 修复,并进行了CPU & GC 性能优化,另外,AutoBalancing 的 Reporter 和 Retriever 也将支持指定 Listener Name 配置接入点。
31 1
AutoMQ 社区双周精选第十二期(2024.06.29~2024.07.12)
|
6月前
|
消息中间件 Cloud Native Java
AutoMQ 社区双周精选第十一期(2024.05.27~2024.06.12)
AutoMQ v1.0 追踪修复Apache Kafka 3.4.x多个BUG,提升CPU与GC性能。优化包括修复Raft线程异常、死锁及NPE问题,防止网络分区导致脑裂。Netty Chunk大小调整减少CPU使用,取消跨块分配策略以降低GC负担。此外,AutoBalancing的Reporter和Retriever现支持指定Listener Name进行安全配置。关注公众号获取更多社区更新,一起参与云原生消息中间件建设!
45 3
|
7月前
|
消息中间件 Cloud Native 调度
AutoMQ 社区双周精选第十期
AutoMQ 发布1.0.5版,更改默认日志滚动为大小滚动,限制日志空间在5GiB内,增强大规模对象删除性能。AutoBalancing调度加速,使用攒批间隔策略执行Action,每批对单一节点操作不超过50,批次间间隔5秒。
44 0
|
Cloud Native 机器人 数据挖掘
2021 中国开源码力榜合作社区招募:一起寻找开源世界的超级码丽
2021 中国开源码力榜合作社区招募:一起寻找开源世界的超级码丽
199 0
2021 中国开源码力榜合作社区招募:一起寻找开源世界的超级码丽
|
人工智能 运维 资源调度
还在犹豫吗?现在参与 OCM 社区正是时候
距离上一篇宣告 OCM 开源并提交 CNCF TOC 项目孵化申请的文章已经有一个多月了。这一个多月来 OCM 社区吸引了越来越多的关注和伙伴们的加入,OCM 自身的研发,相关领域产品和解决方案的应用也取得了快速的发展。如果你还在对云原生环境下多集群管理的技术选型犹豫不决,希望这篇文章能够答疑解惑。现在参与 OCM 社区正是时候。
还在犹豫吗?现在参与 OCM 社区正是时候
|
人工智能 算法 自动驾驶
高德技术开放日活动预告 | 聊聊技术与成长那些事,锁定4月10日
为帮助大家解疑答惑,阿里巴巴高德地图为大家准备了本次高德技术开放日活动,并邀请到了核心工程师与大家一起聊聊智慧出行核心技术以及职场实习、成长那些事。4月10日(周六)上午9点半直播,与大家不见不散。
高德技术开放日活动预告 | 聊聊技术与成长那些事,锁定4月10日
|
缓存 前端开发 rax
|
前端开发 JavaScript 定位技术
阿里自主研发的互动游戏引擎Hilo开源啦!【内有详解】
Hilo,一套HTML5跨终端的互动游戏解决方案开源啦!。Hilo支持了多届淘宝&天猫狂欢城等双十一大型和日常营销活动。内核极简,提供包括DOM,Canvas,Flash,WebGL等多种渲染方案,满足全终端和性能要求。详细介绍见内文。
42339 0