小猿日记(15) - 脚本订正注意事项

简介: 小猿日记(15) - 脚本订正注意事项

口水记

最近事情贼多,又是ppt述职、项目上线、开发、又是出差的,还是618,趁着618值班的几天,先水一篇文章。

我发现人啊,处在舒适区习惯了,真的很难走出来,就像我水习惯了,就不想写长篇知识点了。

虽然在工作中以及项目中开发了10来个框架和专利技术,我也很想将技术点以及源码分享出来,但是,我现在还不能分享出来,均属于公司的技术,等公司有开源计划了,我才能进行分享。公司的github开源组织我是加入了的,但是还没有明确的开源通知,公司的项目开源一个操作流程还没出来,所以。。。等等吧

讲讲最近的一件小事情,最近有小伙伴跑了线上脚本

从7点开始...

等着等着...

10点了,问他脚本多久能够处理完

"嗯?不知道啊,没打印进度"

幸好有一件事,就是可以断点续跑,所以直接修改脚本代码

将进度打印出来,重新上线,继续跑

这次就很直观了,3个小时也差不多跑了60%,那么算下来...

还是不等了,脚本在测试环境跑过很多次了,没有问题

晚上也没有并发,异常会有告警

所以算好时间

到11点打开电脑,连上VPN

查看日志,妥妥的,顺利跑完

小结

  • 打印进度,进度,进度
  • 异常/中断重跑不影响已跑数据
  • 多线程处理

声明

本文故事情节纯属遐想,如有雷同,我是原创。

公众号

更多精彩内容、活动、程序猿的小故事,欢迎扫码关注公众号

程序编程之旅

目录
相关文章
|
3月前
|
存储 数据采集 算法
《花100块做个摸鱼小网站! 》第三篇—热搜表结构设计和热搜数据存储
本文档详细介绍了如何搭建并实现一个简易的热搜数据抓取及存储系统。首先,通过基础链接导航引导读者了解项目的组成部分,包括服务器配置、示例网站和源码库。接着,逐步讲解了数据库表结构设计、利用MyBatis插件自动生成Java对象的过程,以及热搜数据的存储逻辑。在数据存储部分,特别关注了唯一ID生成算法,确保数据不会重复。此外,还提供了爬取抖音和百度热搜的具体实现代码,包括使用OkHttp进行网络请求、利用Jsoup解析HTML文档等技术细节。通过本文档的学习,读者不仅能掌握热搜数据抓取与存储的基本方法,还能了解到一些实用的开发技巧和工具。
54 1
《花100块做个摸鱼小网站! 》第三篇—热搜表结构设计和热搜数据存储
|
6月前
|
SQL 运维 关系型数据库
阿里云DTS踩坑经验分享系列|数据不一致修复大法
阿里云数据传输服务DTS在帮助用户迁移数据、同步数据时,在某些复杂场景下会出现源库与目标库数据不一致的问题,造成数据错误,给用户带来困扰。由于数据不一致的问题很难完全避免,为了及时修复不一致的数据,DTS产品推出数据订正功能,保障用户在同步\迁移数据时的数据一致性。本文介绍了产生数据不一致的一些典型场景,并重点阐述了如何使用DTS数据订正功能来修复不一致的数据。
545 4
|
6月前
|
数据库
编程日记02:个人站优化数据库和日志
编程日记02:个人站优化数据库和日志
44 0
|
6月前
|
存储 小程序 数据库
零基础开发小程序第五课-修改数据
零基础开发小程序第五课-修改数据
|
SQL 数据库
数据库实验三——数据更新操作中经典题、难题以及易错题合集(含数据导入导出操作详细教程)
数据库实验三——数据更新操作中经典题、难题以及易错题合集(含数据导入导出操作详细教程)
207 0
数据库实验三——数据更新操作中经典题、难题以及易错题合集(含数据导入导出操作详细教程)
|
Linux Python
彩蛋丨利用R语言脚本实现批量合并Excel表格,再也不用手动点来点去了!
彩蛋丨利用R语言脚本实现批量合并Excel表格,再也不用手动点来点去了!
|
存储 小程序 数据库
零基础开发小程序第五课-修改数据(一)
零基础开发小程序第五课-修改数据(一)
|
小程序
零基础开发小程序第五课-修改数据(二)
零基础开发小程序第五课-修改数据(二)
|
SQL 消息中间件 JavaScript
系统上线前,SQL脚本的9大坑
系统上线前,SQL脚本的9大坑
网络工程项目报价单应该怎么写?记住这6个步骤准没错!
网络工程项目报价单应该怎么写?记住这6个步骤准没错!
311 0