勋章
我关注的人
粉丝
技术能力
- 容器
- Linux
暂时未有相关云产品技术能力~
v3u.cn
-
发表了文章 2023-01-21
使用Tornado配合七牛云存储api来异步切分上传文件
在做七牛云的文件上传时，很多人有一个误区，就是以为是前端先上传到后台服务器，然后后台服务器再将文件上传到七牛云，这个逻辑本身没有问题，但是会遇到一个问题，如果是后台对接七牛，出一个接口，前端调用接口，先将图片传到后台，然后后台再上传七牛云，用的过程中发现，文件小的情况下还好，文件一旦到了几十兆甚至几百兆的时候就很慢，前端上传图片到后台需要一定时间，后端上传到七牛又需要一段时间，很是麻烦，所以逻辑应该是前端直接上传七牛，而后台只承担生成token和存储七牛云返回的hash的任务。
-
发表了文章 2023-01-20
尝试开发微信公众号消息推送功能并且和小程序关联
之前写了几篇关于微信小程序的开发实践，总的来说没啥难度，感兴趣的请移步：[使用Mpvue配合Weui开发面试题题库微信小程序，并且发布到正式环境](https://v3u.cn/a_id_116),这一次我们来尝试开发一下微信公众号，那么公众号和小程序到底有什么区别呢？
-
发表了文章 2023-01-20
在半小时内从无到有开发并调试一款Chrome扩展（Chrome插件/谷歌浏览器插件）
就在不久之前，我们目前这个毕业班的班长那日同学和我说，他正在公司开发Chrome扩展，看起来很高大上的技术，实际开发却非常简单，这引起了我非常浓厚的兴趣，正所谓技不压身，检验自身技术的手段之一就是拥抱新事物，这一次我们尝试在半小时内开发一款Chrome扩展，因为之前我们做了一个[微信小程序的在线面试题题库](https://v3u.cn/a_id_116)的项目，所以正好利用这个题库将面试题平移到Chrome扩展上面。
-
发表了文章 2023-01-20
为美多商城(Django2.0.4)添加基于websocket的实时通信，主动推送，聊天室及客服系统
websocket是个啥？ webSocket是一种在单个TCP连接上进行全双工通信的协议 webSocket使得客户端和服务器之间的数据交换变得更加简单，允许服务端主动向客户端推送数据。在WebSocket API中，浏览器和服务器只需要完成一次握手，两者之间就直接可以创建持久性的连接，并进行双向数据传输
-
发表了文章 2023-01-20
在阿里云Centos7.6中部署nginx1.16+uwsgi2.0.18+Django2.0.4
一直以来想写一篇完整的在阿里云服务器上部署Django服务结合uwsgi，并且通过nginx做反向代理。因为网上的攻略鱼龙混杂，加上技术不断更新，一些年代久远的文章很容易让人在部署的过程中掉坑里，无法自拔，所以本篇文章以最新的阿里云服务器centos7.6为背景，完全阐述如何部署，亲测可用，其实要说难点完全没有，只要按部就班，就不会有问题。
-
发表了文章 2023-01-20
具体谈谈如何优化前端性能的总结
前端是庞杂的，包括 HTML、 CSS、 Javascript、Image 、Video等等各种各样的资源。前端优化是复杂的，针对方方面面的资源都有不同的方式。那么，前端优化的目的是什么 ? 从用户角度而言，优化能够让页面加载得更快、对用户的操作响应得更及时，能够给用户提供更为友好的体验。 从服务商角度而言，优化能够减少页面请求数、或者减小请求所占带宽，能够节省可观的资源。 总之，说白了，恰当的优化不仅能够改善站点的用户体验并且能够节省相当的资源利用，就是又让用户用的爽，又省了钱。
-
发表了文章 2023-01-19
在Mac上用手机抓包软件Charles抓取微信小程序中的高清无水印视频
手机抓包是一名测试工程师常备的技能，比如我想查看一个接口请求的参数、返回值，还有移动设备上的http请求、https请求，这一次的背景是我们想要在app端和小程序端抓取一些视频，这里用腾讯视频作为例子，使用mac系统的Charles软件（有点类似win系统中的fiddler，使用方式上大同小异）来进行视频接口与地址的抓包和嗅探。
-
发表了文章 2023-01-19
在阿里云Centos7.6上面配置Mysql主从数据库(master/slave)，实现读写分离
在之前的一篇文章中，阐述了如何在高并发高负载的场景下使用nginx做后台服务的负载均衡:[在阿里云Centos上配置nginx+uwsgi+负载均衡配置](https://v3u.cn/a_id_77),但是不要以为这样做了就是一劳永逸的，到了数据业务层、数据访问层，如果还是传统的数据结构，或者只是单单靠一台服务器负载，如此多的数据库连接操作，数据库必然会崩溃，数据库如果宕机的话，后果更是不堪设想。这时候，我们会考虑如何减少数据库的连接，一方面采用优秀的代码框架，进行代码的优化，采用优秀的数据缓存技术如：redis,如果资金丰厚的话，必然会想到架设mysql服务集群，来分担主数据库的压力。今天
-
发表了文章 2023-01-19
在阿里云Centos7.6上利用docker搭建Jenkins来自动化部署Django项目
一般情况下，将一个项目部署到生产环境的流程如下： 需求分析—原型设计—开发代码—内网部署-提交测试—确认上线—备份数据—外网更新-最终测试，如果发现外网部署的代码有异常，需要及时回滚。 整个过程相当复杂而漫长，其中还需要输入不少的命令，比如上传代码，git的拉取或者合并分支等等。
-
发表了文章 2023-01-19
在阿里云Centos7.6上面部署基于redis的分布式爬虫scrapy-redis
Scrapy是一个比较好用的Python爬虫框架，你只需要编写几个组件就可以实现网页数据的爬取。但是当我们要爬取的页面非常多的时候，单个服务器的处理能力就不能满足我们的需求了（无论是处理速度还是网络请求的并发数），这时候分布式爬虫的优势就显现出来。 而Scrapy-Redis则是一个基于Redis的Scrapy分布式组件。它利用Redis对用于爬取的请求(Requests)进行存储和调度(Schedule)，并对爬取产生的项目(items)存储以供后续处理使用。scrapy-redi重写了scrapy一些比较关键的代码，将scrapy变成一个可以在多个主机上同时运行的分布式爬虫。
-
发表了文章 2023-01-19
使用基于Vue.js和Hbuilder的混合模式移动开发打造属于自己的移动app
近几年，混合模式移动应用的概念甚嚣尘上，受到了一些中小型企业的青睐，究其原因，混合模式开发可以比传统移动开发节约大量的开发成本和人力成本。 Hybrid App（混合模式移动应用）是指介于web-app、native-app这两者之间的app，兼具“Native App良好用户交互体验的优势”和“Web App跨平台开发的优势”。
-
发表了文章 2023-01-18
使用Docker-compose搭建nginx-keepalived双机热备来实现高可用nginx集群
最近同学出去面试经常会被问到一个问题。 面试官：你说你们公司使用nginx反向代理tornado，部署了多少多少台机器，好像很牛逼的样子，但是我问你，如果主机也就是部署了nginx那台机器并发过大导致宕机了怎么办？ 答曰：不考虑带宽峰值的话，比较新的 CPU 跑 nginx 单核每秒能接近 2 万请求，而且nginx如果纯做 HTTP 转发的话，Nginx 的性能高到恐怖，会挂掉很不科学。。。。 面试官：好吧，算你会忽悠，那如果插头被扫地大妈踢掉了怎么办，因为没电导致服务器宕机 答曰：阿里云机房会断电。。。你特么在逗我吧。。
-
发表了文章 2023-01-18
使用Mpvue配合Weui开发面试题题库微信小程序，并且发布到正式环境
本次做的微信小程序项目是一个类似在线题库的功能，面试者可以通过小程序来检索笔试题，同时用户输入关键词时同步监听输入行为，不需要点击就可以获取知识要点，后台采用[tornado+mongodb+mortor的组合](https://v3u.cn/a_id_111)实现异步非阻塞的接口。
-
发表了文章 2023-01-18
使用Docker-compose来封装celery4.1+rabbitmq3.7服务，实现微服务架构
大家都知道，Celery是一个简单、灵活且可靠的,处理大量消息的分布式系统，在之前的一篇文章中：[python3.7+Tornado5.1.1+Celery3.1+Rabbitmq3.7.16实现异步队列任务](https://v3u.cn/a_id_99)详细阐述了如何进行安装部署和使用，但是过程太繁琐了，先得安装Erlang，再安装rabbitmq，然后各种配置，最后由于async关键字问题还得去修改三方库的源码，其实我们可以通过docker来将celery服务封装成镜像，如此一来，以后再使用celery或者别的系统依赖celery，我们只需要将该镜像以容器的形式跑服务即可，不需要繁琐的配
-
发表了文章 2023-01-18
利用CSS3自定义属性来为网站添加“暗黑模式”(暗色模式/DarkMode)
究竟什么是暗黑模式？这个概念起初来源于macOS系统，该系统的mojave版本为用户提供两个主题皮肤，即浅色和深色的皮肤。自从有了这个概念之后，很多网站和系统都会用户提供了相应的两套肤色，便于用户根据自己的习惯或爱好进行切换
-
发表了文章 2023-01-18
Python3的原生协程(Async/Await)和Tornado异步非阻塞
我们知道在程序在执行 IO 密集型任务的时候，程序会因为等待 IO 而阻塞，而协程作为一种用户态的轻量级线程，可以帮我们解决这个问题。协程拥有自己的寄存器上下文和栈。协程调度切换时，将寄存器上下文和栈保存，在调度回来的时候，恢复先前保存的寄存器上下文和栈。因此协程能保留上一次调用时的状态，即所有局部状态的一个特定组合
-
发表了文章 2023-01-18
mpvue1.0+python3.7+Django2.0.4实现微信小程序的支付功能
其实微信支付有很多种形式，刷脸，扫码，APP支付，小程序支付等，这边只说明小程序支付的实现，不过原理上都大同小异。 首先，需要注册微信公众号平台[https://mp.weixin.qq.com](https://mp.weixin.qq.com/)，并且开通微信支付功能，随后将你的小程序关联一个微信商户：pay.weixin.qq.com，这一系列申请下来之后，你手中需要有微信小程序appid，微信小程序秘钥，商户号，以及商户秘钥，这四个关键的支付配置变量。
-
发表了文章 2023-01-17
关于Tornado:真实的异步和虚假的异步
我们知道Tornado 优秀的大并发处理能力得益于它的 web server 从底层开始就自己实现了一整套基于 epoll 的单线程异步架构，其他 web 框架比如Django或者Flask的自带 server 基本是基于 wsgi 写的简单服务器，并没有自己实现底层结构。而tornado.ioloop 就是 tornado web server 最底层的实现。
-
发表了文章 2023-01-17
使用Redisearch实现的全文检索功能服务
“检索”是很多产品中无法绕开的一个功能模块，当数据量小的时候可以使用模糊查询等操作凑合一下，但是当面临海量数据和高并发的时候，业界常用 elasticsearch 和 lucene 等方案，但是elasticsearch对运行时内存有着最低限额，其运行时大小推荐 2G 以上的内存空间，并且需要额外的磁盘空间做持久化存储。
-
发表了文章 2023-01-17
使用flex弹性布局来为微信小程序写自适应页面
我们知道，写习惯了前端的人，一般切图后布局页面的话，上手最习惯的是基于盒子模型的浮动布局，依赖 display 属性 + position属性 + float属性，但是浮动布局有一些致命的小问题，比如垂直居中比较费劲，比如著名的[float坍塌问题](https://v3u.cn/a_id_18)，另外有些极端情况下，还得使用模型+clear:both来手动清除浮动，比较麻烦。
-
发表了文章 2023-01-17
在centos7.6上利用docker-compose统一管理容器和服务
众所周知，一个大型的Docker容器组成的微服务应用中，容器的数量是非常巨大的，如果依赖传统的人工配置方式进行维护，对于开发和运维来说简直就是噩梦。docker-compose的出现正是为了解决这个问题。 docker-compose是一个用于定义和运行多容器Docker应用的工具，只需要一个Compose的配置文件和一个简单的命令就可以创建并运行应用所需的所有容器。在配置文件中，所有容器通过services来定义，并使用docker-compose命令启动或停止容器以及所有依赖容器。
-
发表了文章 2023-01-17
2023年，真的需要Thrift这样一个RPC微服务框架来拯救一下传统HTTP接口(api)了
目前市面上类似Django的drf框架基于json的http接口解决方案大行其道，人们也热衷于在接口不多、系统与系统交互较少的情况下使用它，http接口的优点就是简单、直接、开发方便，门槛低，利用现成的http协议进行传输。
-
发表了文章 2023-01-17
使用基于mpvue的框架开发微信小程序（搭建环境）
美团很早就开源了mpvue这个项目，如此看来，美团可不仅仅是一家团购网站，真正的技术驱动型企业，使得我们多了一种用来开发微信小程序的框架选项。由于mpvue框架是完全基于Vue框架的（重写了其runtime和compiler），因此在用法上面是高度和Vue一致的（某些功能由于受限于小程序环境本身的原因而不能使用，但是瑕不掩瑜），这给使用过Vue开发Web应用的前端开发者提供了极低的门槛来开发小程序。
-
发表了文章 2023-01-16
使用Hexo建立一个轻量、简易、高逼格的博客
在之前的一篇文章中，介绍了如何使用Hugo在[三分钟之内建立一个简单的个人博客系统](https://v3u.cn/a_id_81)，它是基于go lang的，其实，市面上还有一款类似的静态页生成器，就是Hexo 读音/hækso/ ，它是基于node.js的，和Hugo一样，Hexo 正常来说，不需要部署到我们的服务器上，我们的服务器上保存的，其实是基于在hexo通过markdown编写的文章，然后hexo帮我们生成静态的html页面，然后，将生成的html上传到我们的服务器。简而言之：hexo是个静态页面生成、上传的工具。
-
发表了文章 2023-01-16
在centos7.6上部署前后端分离项目Nginx反向代理vue.js2.6+Tornado5.1.1，使用supervisor统一管理服务
这一次使用vue.js+tornado的组合来部署前后端分离的web项目，vue.js不用说了，前端当红炸子鸡，泛用性非常广，无论是单页应用，还是混合式开发app，亦或是微信小程序开发，样样得心应手，tornado最近的风头有点被新锐框架sanic抢走了，但是作为老牌的异步非阻塞框架，其内置了支持epoll/kqueue 等高效网络库，而具备了处理高并发的能力并且开发效率也不低，这一次tornado作为承载后端压力的角色。
-
发表了文章 2023-01-16
python3的单元测试模块mock与性能测试模块cProfile
我们知道写完了代码需要自己跑一跑进行测试，一个写好的程序如果连测试都没有就上到生产环境是不敢想象的，这么做的人不是太自信就是太无知。
-
发表了文章 2023-01-16
使用python将word文档和pdf电子书进行格式互转(兼容Windows/Linux)
一些重要文档格式之间的互转在目前显得尤为重要，pdf作为通用格式在现在各个平台上兼容性是最好的，所以写python脚本将这些word文档批量转换pdf是最好的解决方案。 由于windows系统对于word文档有天然的兼容性优势，所以转换起来很简单，普遍上是通过comtypes模块。
-
发表了文章 2023-01-16
用户认证(Authentication)进化之路：由Basic Auth到Oauth2再到jwt
用户认证是一个在web开发中亘古不变的话题，因为无论是什么系统，什么架构，什么平台，安全性是一个永远也绕不开的问题 在HTTP中，基本认证（Basic access authentication）是一种用来允许网页浏览器或其他客户端程序在请求时提供用户名和口令形式的身份凭证的一种登录验证方式。
-
发表了文章 2023-01-16
python3.7+Tornado5.1.1+Celery3.1+Rabbitmq3.7.16实现异步队列任务
在之前的一篇文章中提到了用[Django+Celery+Redis实现了异步任务队列](https://v3u.cn/a_id_54)，只不过消息中间件使用了redis，redis作为消息中间件可谓是差强人意，功能和性能上都不如Rabbitmq，所以本次使用tornado框架结合celery，同时消息中间件使用Rabbitmq来实现异步发邮件，并且使用flower来监控任务队列。
-
发表了文章 2023-01-16
利用基于Python的Pelican打造一个自己的个人纯静态网站
之前我曾经写过两篇相似的文章用来快速搭建个人网站,一款基于go lang:[利用基于Go Lang的Hugo配合nginx来打造属于自己的纯静态博客系统](https://v3u.cn/a_id_81)另外一款基于node.js:[使用Hexo建立一个轻量、简易、高逼格的博客](https://v3u.cn/a_id_93),这一次带来一款基于python的静态网页生成器Pelican，它是一位法国开发者开发的，非常好用，它的每一篇文章会事先渲染成HTML静态文件，访问速度非常快
-
发表了文章 2023-01-13
利用Docker挂载Nginx-rtmp(服务器直播流分发)+FFmpeg(推流)+Vue.js结合Video.js(播放器流播放)来实现实时网络直播
众所周知，在视频直播领域，有不同的商家提供各种的商业解决方案，其中比较靠谱的服务商有阿里云直播，腾讯云直播，以及又拍云和网易云的有偿直播服务，服务包括软硬件设备，摄像机，编码器，流媒体服务器等。但是其高昂的费用以及较高的准入门槛让许多个人和小型企业望而却步，本文要讲解的是如何使用nginx-rtmp搭建直播服务器，配合FFmpeg推流，在网页端vue.js作为载体利用video.js作为流播放器，打造一套可用的在线视频直播方案。
-
发表了文章 2023-01-13
利用基于Go Lang的Hugo配合nginx来打造属于自己的纯静态博客系统
Go lang无疑是目前的当红炸子鸡，极大地提高了后端编程的效率，同时有着极高的性能。借助Go语言我们 可以用同步的方式写出高并发的服务端软件，同时，Go语言也是云原生第一语言，Docker，Kubernetes等等著名的项目都是使用Go语言实现的。
-
发表了文章 2023-01-13
搞清楚系统到底怎样支撑高并发以及架构图的绘制（面试向）
大多数人面试的时候经常会被问到：你简历上有高负载高并发的经验，那到底你的系统是怎样设计的？ 如果没有过相关的项目经验，大多数同学被问到这个问题压根儿没什么思路去回答，不知道从什么地方说起，其实，就算没有相关的经验，只要事先编好话术，搞清楚架构图，回答此类问题也还是可以滴水不漏的。
-
发表了文章 2023-01-13
python花式读取大文件(10g/50g/1t)遇到的性能问题（面试向）
最近无论是面试还是笔试，有一个高频问题始终阴魂不散，那就是给一个大文件，至少超过10g,在内存有限的情况下（低于2g），该以什么姿势读它？
-
发表了文章 2023-01-13
彻底弄清楚session,cookie,sessionStorage,localStorage的区别及应用场景（面试向）
客户端状态保持是一个老生常谈的问题了，归根结底追踪浏览器的用户身份及其相关数据无非就是以下四种方式：session,cookie,sessionStorage,localStorage
-
发表了文章 2022-08-01
物无定味适口者珍，Python3并发场景(CPU密集/IO密集)任务的并发方式的场景抉择(多线程threading/多进程multiprocessing/协程asyncio)
一般情况下，大家对Python原生的并发/并行工作方式：进程、线程和协程的关系与区别都能讲清楚。甚至具体的对象名称、内置方法都可以如数家珍，这显然是极好的，但我们其实都忽略了一个问题，就是具体应用场景，三者的使用目的是一样的，话句话说，使用结果是一样的，都可以提高程序运行的效率，但到底那种场景用那种方式更好一点？ 这就好比，目前主流的汽车发动机变速箱无外乎三种：双离合、CVT以及传统AT。主机厂把它们搭载到不同的发动机和车型上，它们都是变速箱，都可以将发动机产生的动力作用到车轮上，但不同使用场景下到底该选择那种变速箱？这显然也是一个问题。
-
发表了文章
2024-05-15
无所不谈,百无禁忌,Win11本地部署无内容审查中文大语言模型CausalLM-14B
-
发表了文章
2024-05-15
遭遇DDOS攻击忍气吞声？立刻报警！首都网警重拳出击，犯罪分子无所遁形
-
发表了文章
2024-05-15
苹果AppleMacOs最新Sonoma系统本地训练和推理GPT-SoVITS模型实践
-
发表了文章
2024-05-15
自然语言开发AI应用,利用云雀大模型打造自己的专属AI机器人
-
发表了文章
2024-05-15
离线生成双语字幕,一键生成中英双语字幕,基于AI大模型,ModelScope
-
发表了文章
2024-05-15
Whisper对于中文语音识别与转写中文文本优化的实践(Python3.10)
-
发表了文章
2024-05-15
苹果AppleMacOs系统Sonoma本地部署无内容审查(NSFW)大语言量化模型Causallm
-
发表了文章
2024-05-15
龙蛇入笔,身不由己,码农出书以及无法控制的表达欲
-
发表了文章
2024-05-15
如何快速部署本地训练的 Bert-VITS2 语音模型到 Hugging Face
-
发表了文章
2024-05-15
如何在GitHub正确提PR(Pull Requests),给喜欢的开源项目贡献代码
-
发表了文章
2024-05-15
首次引入大模型!Bert-vits2-Extra中文特化版40秒素材复刻巫师3叶奈法
-
发表了文章
2024-05-15
字正腔圆,万国同音,coqui-ai TTS跨语种语音克隆,钢铁侠讲16国语言(Python3.10)
-
发表了文章
2024-05-15
Win11环境Mecab日语分词和词性分析以及动态库DLL not found问题(Python3.10）
-
发表了文章
2024-05-15
一键打包,随时运行,Python3项目虚拟环境一键整合包的制作(Venv)
-
发表了文章
2024-05-15
免费背景音人声分离解决方案MVSEP-MDX23,足以和Spleeter分庭抗礼
-
发表了文章
2024-05-15
Bert-vits2最终版Bert-vits2-2.3云端训练和推理(Colab免费GPU算力平台)
-
发表了文章
2024-05-15
中文语音识别转文字的王者,阿里达摩院FunAsr足可与Whisper相颉顽
-
发表了文章
2024-05-15
Bert-vits2-2.3-Final，Bert-vits2最终版一键整合包(复刻生化危机艾达王)
-
发表了文章
2024-05-15
Bert-vits2-v2.2新版本本地训练推理整合包(原神八重神子英文模型miko)
-
发表了文章
2024-05-15
云端开炉,线上训练,Bert-vits2-v2.2云端线上训练和推理实践(基于GoogleColab)
