Node.js躬行记(22)——Node环境升级日志

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: Node.js躬行记(22)——Node环境升级日志

 公司之前所有的 Node 项目,其环境都是 8.9.4 版本,发布于 2018 年的一个比较古老的版本。

  老版本有两个比较明显的问题:

  1. Node 高版本的特性和方法都无法使用。
  2. 有些第三方新版本的包无法安装和升级,该包可能依赖比较高的 Node 版本。

  之前在开发项目时就遇到第三方包自身的问题,必须升级或换个包才能解决,但因为 Node 版本的原因,无法替换,只能用其他方式来修补漏洞。

  为了提升维护性和开发体验,还是决定升级 Node 版本,2021年升级过一次,升级到 14 版本。

  但是因为一些奇怪的问题加上业务繁重,没有时间细究,就又回滚了,一直拖到今年的 7 月份,才继续推进升级的事情,本次会升级到 16.15 版本。

  目前总共有 4 个 Node 环境需要升级,测试资源紧张,在升级后,是没有人力来验证是否有问题发生,所以只能靠自己想办法安全升级。

1)分项目阶梯升级

  在 4 个待升级的项目中,有 3 个是对外的项目,有 1 个是对内的项目。

  那么先升级对内项目的 Node 版本,这样有两个好处:

  1. 即使出问题了,影响范围也能最小。
  2. 响应也能最及时,因为有问题的话,在公司内部能马上反馈到我们组。

2)分环境阶梯升级

  我们每个项目都会有 3 套运行环境:测试、预发和生产。

  首先将测试环境升级,测试环境都是开发人员使用,影响最小,反馈最快。

  观察一段时间后,再升级预发,预发环境与生产环境最为接近,数据库采用的也是一套。

  最后才是生产,给真实用户使用,再获取反馈。

3)邀请内部人员体验

  首先升级的是那个内部项目,所以在飞书上建了个群,将各个组的负责人拉进来。

  邀请他们在预发环境体验各自的业务,再给出反馈。

  在验收时发现了时区的问题,纠正后,再让他们验收。

4)部署自动错误告警

  让人来验收,难免会有遗漏,所以让运维给加了个自动错误告警。

  每分钟有 5 个 500 以上的错误,就自动在飞书上发告警信息。

  这类规则比较适合接口,而定时任务的规则比较特殊。

  因为任务可能是 5 分钟运行一次,那么报错的频率不会那么高。

  因此改成 5 分钟内有一个错误就告警,免得告警太多,也比较烦人。

5)增加单元测试流程

  在将对内的项目升级完成后,公司员工在访问一个服务时报错。

  让运维查看后,发现是因为连接地址配置错了。

  为了避免这种问题的发生,就需要有地方可以测试服务连接是否异常。

  手动测试比较繁琐,最好的办法是在发布代码的流程中,加一环服务连接。

  若成功,那么就继续后面的流程,否则就中断。

  公司使用的是阿里云提供的发布系统,里面可以加一步单元测试。

  服务连接是测试的一个场景,未来可以再加其他各类测试,保证项目质量。

 

  从开始升级到全部项目升级完成,前前后后操作了 20 多天,因为在一个环境或项目升级后,就要观察几天,然后再升级另一个环境或项目。在升级完成后,还部署了阿里云提供的一款 Node 监控系统。


相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
2月前
|
监控 安全 Shell
防止员工泄密的措施:在Linux环境下使用Bash脚本实现日志监控
在Linux环境下,为防止员工泄密,本文提出使用Bash脚本进行日志监控。脚本会定期检查系统日志文件,搜索敏感关键词(如"password"、"confidential"、"secret"),并将匹配项记录到临时日志文件。当检测到可疑活动时,脚本通过curl自动将数据POST到公司内部网站进行分析处理,增强信息安全防护。
150 0
|
1月前
|
人工智能 JavaScript 前端开发
计算机node项目|nodejs网上书城设计与实现
计算机node项目|nodejs网上书城设计与实现
169 2
|
2月前
|
存储 数据采集 Kubernetes
一文详解K8s环境下Job类日志采集方案
本文介绍了K8s中Job和Cronjob控制器用于非常驻容器编排的场景,以及Job容器的特点:增删频率高、生命周期短和突发并发大。文章重点讨论了Job日志采集的关键考虑点,包括容器发现速度、开始采集延时和弹性支持,并对比了5种采集方案:DaemonSet采集、Sidecar采集、ECI采集、同容器采集和独立存储采集。对于短生命周期Job,建议使用Sidecar或ECI采集,通过调整参数确保数据完整性。对于突发大量Job,需要关注服务端资源限制和采集容器的资源调整。文章总结了不同场景下的推荐采集方案,并指出iLogtail和SLS未来可能的优化方向。
108 1
|
2月前
|
存储 JavaScript 前端开发
❤Nodejs 第十四章(node中间件multer的认识安装使用)
【4月更文挑战第14天】Multer是Node.js用于处理multipart/form-data的中间件,专注于文件上传。。基本用法包括设置存储引擎,如磁盘存储(DiskStorage)或内存存储(MemoryStorage),并指定处理单个或多个文件的方法。例如,`multer.single('file')`处理单个文件上传。存储引擎DiskStorage适合永久保存,而MemoryStorage适合临时处理。可以通过`limits`选项限制文件大小,实现不同类型的文件有不同的大小限制。
135 0
|
5天前
|
SQL 运维 监控
SLS 数据加工全面升级,集成 SPL 语法
在系统开发、运维过程中,日志是最重要的信息之一,其最大的优点是简单直接。SLS 数据加工功能旨在解决非结构化的日志数据处理,当前全面升级,集成 SPL 语言、更强的数据处理性能、更优的使用成本。
|
10天前
|
Web App开发 存储 JavaScript
前端如何学习Node.js及Node.js的主要用途
【7月更文挑战第16天】 学习Node.js对前端开发者至关重要,涉及理解其基于V8的运行时环境、JavaScript基础、安装与验证、核心模块(如fs、http、path)及npm管理。实践项目,如用Express建服务器,参与开源,深入学习异步编程和事件循环。Node.js用于服务器开发、构建工具、本地开发服务器和实时应用,提升全栈能力。借助官方文档和各种资源加速学习。
20 4
|
1月前
|
运维 安全 Java
SpringBoot运维篇(打包,多环境,日志)
SpringBoot运维篇(打包,多环境,日志)
|
1月前
|
JavaScript 前端开发 物联网
【Nodejs】从入门到精通 —— Node.js 基础知识与常用命令
【Nodejs】从入门到精通 —— Node.js 基础知识与常用命令
188 0
|
2月前
|
运维 Java Devops
云效产品使用报错问题之自定义环境构建没有日志,也没有报错,如何解决
本合集将整理呈现用户在使用过程中遇到的报错及其对应的解决办法,包括但不限于账户权限设置错误、项目配置不正确、代码提交冲突、构建任务执行失败、测试环境异常、需求流转阻塞等问题。阿里云云效是一站式企业级研发协同和DevOps平台,为企业提供从需求规划、开发、测试、发布到运维、运营的全流程端到端服务和工具支撑,致力于提升企业的研发效能和创新能力。
云效产品使用报错问题之自定义环境构建没有日志,也没有报错,如何解决
|
2月前
|
JavaScript 关系型数据库 MySQL
❤Nodejs 第二章(Node连接本地数据库)
【4月更文挑战第2天】本文介绍了如何使用Node.js连接本地MySQL数据库。首先,提到了在MySQL官网下载安装数据库和使用Navicat for MySQL进行数据库管理。接着,通过`yarn add mysql`在项目中安装数据库依赖。然后,创建`app.js`文件,设置数据库连接参数,并建立连接进行查询操作。遇到导入模块的错误后,修改导入方式为CommonJS语法。
81 1