yangyi_dba
yangyi_dba_个人页
yangyi_dba
文章
971
问答
0
视频
0
个人介绍
数据库相关技术专家
擅长的技术
-
发表了文章 2017-12-13
博客内容同步到云栖社区
我的博客即将入驻“云栖社区”，诚邀技术同仁一同入驻。
-
发表了文章 2017-10-04
【Python】python内置函数介绍
一 前言 在编写Python 程序或者工具脚本时，需要完成某个功能，可以选择编写一个具体的函数达到目的，当然也可以通过匿名/Python 内建函数来完成。本问讲述常见的Python匿名、内建函数---lambda,map,filter,reduce .二 例子2.1 Lambda 是一个匿名函数， 其语法为:lambda parameters:express parameters：可选,通常是逗号分隔的变量表达式形式，即位置参数。
-
发表了文章 2017-09-18
【MySQL】如何阅读死锁日志
一 前言 工欲善其事必先利其器，前面分析了很多死锁案例，并没有详细的介绍如何通过死锁日志来诊断死锁的成因。本文将介绍如何读懂死锁日志，尽可能的获取信息来辅助我们解决死锁问题。
-
发表了文章 2017-09-18
【MySQL】死锁案例之四
一 前言 死锁，其实是一个很有意思，也很有挑战的技术问题，大概每个DBA和部分开发同学都会在工作过程中遇见过 。关于死锁我会持续写一个系列的案例分析，希望能够对想了解死锁的朋友有所帮助。
-
发表了文章 2017-09-17
【MySQL】死锁案例之一
一 前言 死锁，其实是一个很有意思，也很有挑战的技术问题，大概每个DBA和部分开发同学都会在工作过程中遇见过 。关于死锁我会持续写一个系列的案例分析，希望能够对想了解死锁的朋友有所帮助。
-
发表了文章 2017-09-17
【MySQL】死锁案例之二
一 前言 死锁，其实是一个很有意思，也很有挑战的技术问题，大概每个DBA都会在工作过程中遇见过 。关于死锁我会持续写一个系列的案例分析，希望能够对想了解死锁的朋友有所帮助。
-
发表了文章 2017-09-05
【MySQL】浅谈一致性读
一 前言 MySQL 在不同的事务隔离级别下提供两种读模式 一致性读(非加锁), 当前读(加锁读)。当前读比较简单，本文主要研究一致性读取。 二 原理概念官方概念 "A consistent read means that InnoDB uses...
-
发表了文章 2017-08-27
【MySQL】使用innobackup 2.4遇到的问题
一 前言 Percona公司发布 innobackup 2.4 版本已经很久了，增加了新的特性比如xtrabackup支持非Innodb表备份，指定 --safe-slave-backup，增加备份的一致性，最重要的一点是支持5.7的备份，2.2是不能备份5.7 版本的。
-
发表了文章 2017-08-16
【MySQL】浅析interactive_timeout和wait_timeout
一 前言 这篇文章源于自己一个无知的提问，作为一个DBA 老鸟，实在汗颜 。如图，修改wait_timeout参数之后 并没有及时生效，于是乎去跑到技术支持群里问了。
-
发表了文章 2017-08-04
【MySQL】再说order by 优化
一 前言 为什么是再说呢？因为前面已经写过一篇blog，介绍order by 的基本原理以及优化。如果觉得对order by原理了解不透彻可以参考其他同行的文章《MySQL排序内部原理探秘》.本文是基于官网文档的二刷(基本翻译+测试验证),看完本文可以了解到什么样的select + order by 语句可以使用索引，什么样的不能利用到索引排序。
-
发表了文章 2017-07-30
【Python】模块 fileinput
一 简介 fileinput 是python 提供的一个可以快速遍历，修改一个或者多个文件的模块。我们可以使用该模块进行文本替换 并做文件备份。二 使用2.1 使用方法 fileinput.input (files=None, inplace=False, backup='', bufsize=0, mode='r', openhook=None) files 为要读入的文件 或者文件列表 files=1.txt files=['1.txt','2.txt'] inplace 是原地替换与否，为True时表示重写原文件。
-
发表了文章 2017-07-29
【Python】格式化字符串输出
一 简介 python 字符串输出格式化有两种方式 %[s,d,] ,python 2.6 版本提供了string.format()，其功能也相当强大。talk is cheap，show me the code .
-
发表了文章 2017-07-16
【Python】*args 和 **kwargs的用法
一 简介 *args 和 **kwargs 主要用于函数定义。 当我们需要定义的函数的传入参数个数不确定时，可以使用*args 和 **kwargs 代替不确定的参数个数。
-
发表了文章 2017-07-16
【Python】map函数
一 简介 Python 内置了很多非常有用的函数 比如map() ,reduce(),filter(),还有lambda。熟练应用这些函数可以在写python程序的时候构建精简的代码。
-
发表了文章 2017-07-15
【Shell】sort 笔记
写底层代码的时候，经常使用sort命令对文件或者文本进行排序，本文对sort做简单记录作为学习笔记。sort 的功能是将文件/文本的每一行作为一个单位，相互比较，比较原则是从首字符向后，依次按ASCII码值进行比较，最后将他们按升序输出。
-
发表了文章 2017-07-02
【Python】浅谈 multiprocessing
一前言 使用python进行并发处理多台机器/多个实例的时候，我们可以使用threading ，但是由于著名的GIL存在，实际上threading 并未提供真正有效的并发处理，要充分利用到多核CPU，我们需要使用多进程。
-
发表了文章 2017-06-10
【MySQL】数据安全性讨论思维导图
一 前言 和团队内部的同事一起沟通，讨论了MySQL 数据库系统数据安全性问题，主要针对MySQL丢数据库的场景 ，主从不一致的场景 ，还有业务层面使用不得当导致主备库数据结构不一样的情况，本文是基于以上的讨论和总结做的思维导图。
-
发表了文章 2017-06-10
【Python】基于pymysql的数据库操作类
一 简介 Python和MySQL交互的模块有 MySQLdb 和 PyMySQL(pymysql),MySQLdb是基于C 语言编写的，而且Python3 不在支持MySQLdb 。
-
发表了文章 2017-05-06
【Python】如何获取知乎最有价值的内容
一 前言 相信大部分能看到这篇blog的人都听说过知乎吧？如果你没有听说过，那么链接在这里 知乎 作为一个知乎er，为了更加深入的理解“xxx 是一种什么体验”（的图片），为了践行 “技术改变生活”（实则有些wuliao) ，使用requsets 爬取知乎中最优价值的内容，本文本着探索的精神，写一段获取内容的python程序。
-
发表了文章 2017-05-05
【工具】一款基于go语言的agent
一 介绍 在构建数据库自动化运维系统的时候，数据库服务器上必须要有一个agent来执行web服务器端发起的命令，我们研究了好几种技术Celery，Redis Queue 或者基于socket实现，当然还有自己写，因为之前有同事已经完成了一个agent---servant，在和同事沟通之后，我们决定复用servant,不用重复造轮子。
-
发表了文章 2017-05-01
【Python】浅谈装饰器
一 装饰器是什么 装饰器是一个用于封装函数或者类的代码工具，显式地将封装器作用于函数或者类上，达到程序运行时动态增加功能的目的。对于函数运行前处理常见前置条件(常见的web登陆授权验证)，或者在函数执行之后做善后工作(比如异常处理，记录log 等等)。
-
发表了文章 2017-04-23
【Python】基于Django Web开发清单
一 简介 最近在和 同事 一起开发一套数据库管理平台 ，该平台使用Django 作为web 框架。和大多数数据库管理平台一样 ，该平台提供 备份，恢复，申请实例，实例上下线 以及数据质量对比 等功能。
-
发表了文章 2017-04-21
【Python】浅谈python中的json
一 前言 最近一直在做开发相关的工作--基于Django的web 平台，其中需要从model层传输数据到view 层做数据展示或者做业务逻辑处理。我们采用通用的Json格式--Json(JavaScript Object Notation) 是一种轻量级的数据交换格式，易于阅读和程序解析。
-
发表了文章 2017-04-09
【MySQL】如何构建高性能MySQL系统
一 简介 最近在压测新的存储，正好把工作过程中积累的对高性能MySQL相关的知识体系构建起来，做成思维导图的方式。总结乃一家之言，有不妥之处，望给位读者朋友指正。
-
发表了文章 2017-03-11
【MySQL】varbinary 真的比varchar 更合适？
一 前言 在讨论数据表字段设计的时候，有同学提出使用vabinary 代替 varchar ,部分开发不明所以,其实我也是。两者之间具体有什么区别？使用vabinary 代替 varchar 对业务有何优势？本文尝试从性能,数据大小,查询,创建索引等对比功能等方面进行研究，有不妥或者不到位之处还请各位读者朋友提示。
-
发表了文章 2017-02-25
【工具】MySQL 安装利器---Sandbox
一 sandbox是什么？MySQL Sandbox是一个非常简单快捷的安装搭建MySQL实例的工具，它可以非常快速地满足我们对MySQL环境各种需求:单机实例，主从，一主多从等等架构(区别于自己安装MySQL 软件)。
-
发表了文章 2017-01-20
【MySQL】mydumper工具介绍
一 前言 大家对于MySQL的逻辑备份工具mysqldump应该都比较了解，相对于mysqldump，本文介绍一款由MySQL ,Facebook 等公司的开发维护另外一套逻辑备份恢复工具---mydumper/myloader目前已经开发到0.9.1 版本。
-
发表了文章 2017-01-10
【MySQL】Too many connections 案例一则
一 前言 DBA 运维就是填坑的过程，其他人挖坑，自己填；自己挖坑，自己填，说多了都是泪。好吧言归正传，今天凌晨忙碌了一个通宵做IDC 交互机维护改造以及升级数据库服务器的事情，需要重启服务器。
-
发表了文章 2017-01-08
【工具】sysbench 0.5 简介
一 前言 因为在准备做压力测试方面的工作，看到sysbench 目前最新的版本是0.5 ，相比之前的0.4的版本，最大的变化是 test 参数的改变，在压测MySQL时，新版本中test将取值为 lua脚本，该种方式给压测工作带来很大的灵活性。
-
发表了文章 2017-01-07
【MySQL】恢复误操作的方法
一 前言 本周接二连三的出现开发人员在测试环境和生产误操作导致数据库误删除/更新，对DBA而言，回滚数据着实是一件头疼的事情，凡涉及到恢复线上数据必然对应用带来一定的影响。
-
发表了文章 2017-01-05
【MySQL】InnoDB锁机制之二
一 前言 之前的文章《InnoDB锁机制之一》介绍了InnoDB锁中的三种锁:record lock, gap lock,next-key lock ，本文继续介绍另外两种锁 Insert Intention Locks和AUTO-INC Locks二 常见的锁类型2.
-
发表了文章 2017-01-04
【工作】蚂蚁金服招DBA
一 主要职责 1.负责数据库高可用体系建设，追求100%的服务持续可用、秒级故障恢复能力。 2.负责数据库成本优化，通过新技术、新产品、新方案全方位地优化系统性能。 3.负责数据库相关流程平台和工具产品的建设，持续改进业务研发和系统维护效率。
-
发表了文章 2016-12-25
【MySQL】undo,redo,2PC,恢复思维导图
一 前言 本来今天打算继续研究InnoDB 锁机制并完成第二篇文章，查找资料的时候忽悠想起来自己遗漏了之前的CSDN的公开课《深入理解MySQL中的undo，redo，mvcc》 。
-
发表了文章 2016-12-18
【MySQL】MyRocks 漫谈
一 前言 最近一两年，数据库技术尤其是MySQL方面的发展可谓百花齐放，TokuDB，MyRocks ，MySQL 5.7 GA,MySQL 8.0 doc release 其软件也在开发当中，ALiSQL 开源。
-
发表了文章 2016-12-17
【MySQL】InnoDB锁机制之一
一 背景 MySQL锁机制是一个极其复杂的实现，为数据库并发访问和数据一致提供保障。这里仅仅针对MySQL访问数据的三种锁做介绍，加深自己对锁方面的掌握。二 常见的锁机制 我们知道对于InnoDB存储引擎而言,MySQL 的行锁机制是通过在索引上加锁来锁定要目标数据行的。
-
发表了文章 2016-11-10
【Python】ConfigParser模块
一 前言 最近研究备份恢复MySQL数据库实例，老的数据配置和新的实例的my.cnf 配置不统一，依赖backup-my.cnf 来判断innodb_data_file_path 参数是否修改修改。
-
发表了文章 2016-11-03
【Python】supervisor 工具介绍
一 简介 Supervisor 是一款基于Python的进程管理工具，可以很方便的管理服务器上部署的应用程序。supervisor是C/S模型的程序，其server端是supervisord 服务,client 端是supervisorctl 命令 。
-
发表了文章 2016-09-06
【Python】轻量级分布式任务调度系统-RQ
一 前言 Redis Queue 一款轻量级的P分布式异步任务队列，基于Redis作为broker，将任务存到redis里面，然后在后台执行指定的Job。就目前而言有三套成熟的工具celery，huey ，rq 。
-
发表了文章 2016-09-04
【MySQL】5.7新特性之六
写在前面 本系列文章基于 5.7.12 版本讲述MySQL的新特性。从安装，文件结构，SQL ,优化 ，运维层面 复制，GITD等几个方面展开介绍 5.7 的新特性和功能。
-
发表了文章 2016-08-27
【MySQL】数据库系统中的“黑天鹅”
一 前言 纳西姆.尼古拉斯.塔勒布的经典著作《黑天鹅》中对“黑天鹅现象”的定义是 － 不可预测，人们事前往往低估其发生的可能性 － 造成极大影响 － 事后回头再看，又觉得此事发生的有理 二 分析 稳定性是一项衡量基础系统是否永续服务的绝对指标，作为资深DBA从业人员，相信大多数公司运维团队都会制定稳定性的SLA指标达到N个9，为用户提供Full-Time 服务。
-
发表了文章 2016-08-23
【招聘】杭州有赞招聘 MySQL DBA
写在前面 曾经给其他朋友 公司写了很多招聘广告，现在终于要为自己写一篇来招聘DBA了。本人花名 杨一 ，真名就是博客上面的名字啦 ，从毕业一直做DBA，在阿里工作四年半，经历阿里云，RDS DBA，外部去IOE项目组，阿里集团电商业务DBA，现在就职于杭州有赞科技有限公司. 有赞 ，是一家零售服务技术提供商，为商家提供全套移动电商产品服务方案。
-
发表了文章 2016-08-23
【MySQL】Tokudb安装测试初探
一 前言 TokuDB 是一个高性能、支持MVCC的MySQL 和 MariaDB 的存储引擎。TokuDB 的主要特点是数据压缩功能出色,对高写压力的支持,由美国TokuTek公司(http://www.tokutek.com/) 研发，该公司于2015年4月份被Percona收购,理所当然地提供了TokuDB版本的Percona Server。
-
发表了文章 2016-07-27
【MySQL】order by 原理以及优化
一 简介 偏向于业务的(MySQL)DBA或者业务的开发者来说，order by 排序是一个常见的业务功能，将结果根据指定的字段排序，满足前端展示的需求。然而排序操作也是经常出现慢查询排行榜的座上宾。
-
发表了文章 2016-07-07
【MySQL】5.7新特性之五
一 写在前面 本系列文章基于 5.7.12 版本讲述MySQL的新特性。从安装，文件结构，SQL ,优化 ，运维层面 复制，GITD等几个方面展开介绍 5.7 的新特性和功能。
-
发表了文章 2016-07-04
【MySQL】5.7新特性之四
写在前面 本系列文章基于5.7.12 版本讲述MySQL的新特性。从安装，文件结构，SQL ,优化 ，运维层面 复制，GITD等几个方面展开介绍5.7 的新特性和功能。
-
发表了文章 2016-06-27
【Python】模块之subprocess
一 简介 在使用Python 开发MySQL自动化相关的运维工具的时候，遇到一些有意思的问题，本文介绍Python的 subprocess 模块以及如何和MySQL交互具体操作，如启动 ，关闭 ，备份数据库。
-
发表了文章 2016-06-14
【Python】 模块之logging
前言 Python 的logging 模块定义的函数和类为应用程序和库实现了一个灵活的事件日志系统。该模块提供多种日志级别并且支持多种记录日志的方式比如 终端，文件等等。
-
发表了文章 2016-05-31
【脚本】如何确保应用程序的唯一性
简介 相信大家在开发脚本或者写程序的时候 ，大多会遇到如何判断已经有程序在运行的情况。比如设计备份binlog ，由于某个实例产生的binlog 数量大于备份的速度，在下一个时间点，会启动一个新的进程对binlog进行备份。
-
发表了文章 2016-05-25
【Redis】Redis 主从复制之一
前言 和关系型数据库一样，Redis也有自己的高可用属性，主从复制，相比而言 redis的主从复制的搭建过程更为简单。一 redis 主从复制的特点 1 同一个master可以拥有多个slaves。
-
发表了文章 2016-05-13
【MySQL】5.7新特性之三
写在前面 本系列文章基于5.7.12 版本讲述MySQL的新特性,从安装，文件结构，SQL ,优化 ，运维层面 复制，等几个方面展开介绍5.7 的新特性和功能，同时也建议大家跟踪官方blog和 文档 ，以尽快知悉其新的变化。
暂无更多信息
-
发表了文章
2017-12-13
博客内容同步到云栖社区
-
发表了文章
2017-10-04
【Python】python内置函数介绍
-
发表了文章
2017-09-18
【MySQL】如何阅读死锁日志
-
发表了文章
2017-09-18
【MySQL】死锁案例之四
-
发表了文章
2017-09-17
【MySQL】死锁案例之一
-
发表了文章
2017-09-17
【MySQL】死锁案例之二
-
发表了文章
2017-09-05
【MySQL】浅谈一致性读
-
发表了文章
2017-08-27
【MySQL】使用innobackup 2.4遇到的问题
-
发表了文章
2017-08-16
【MySQL】浅析interactive_timeout和wait_timeout
-
发表了文章
2017-08-04
【MySQL】再说order by 优化
-
发表了文章
2017-07-30
【Python】模块 fileinput
-
发表了文章
2017-07-29
【Python】格式化字符串输出
-
发表了文章
2017-07-16
【Python】*args 和 **kwargs的用法
-
发表了文章
2017-07-16
【Python】map函数
-
发表了文章
2017-07-15
【Shell】sort 笔记
-
发表了文章
2017-07-02
【Python】浅谈 multiprocessing
-
发表了文章
2017-06-10
【MySQL】数据安全性讨论思维导图
-
发表了文章
2017-06-10
【Python】基于pymysql的数据库操作类
-
发表了文章
2017-05-06
【Python】如何获取知乎最有价值的内容
-
发表了文章
2017-05-05
【工具】一款基于go语言的agent
滑动查看更多
暂无更多信息
暂无更多信息