扩容云中MySQL,通过Vitess和Kubernetes

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群版 2核4GB 100GB
推荐场景:
搭建个人博客
容器服务 Serverless 版 ACK Serverless,317元额度 多规格
简介: 本文讲的是扩容云中MySQL,通过Vitess和Kubernetes,【编者的话】本文作者Anthony Yeh是YouTube的软件工程师。文章主要阐述了YouTube如何使用Vitess和Kubernetes实现缩放MySQL的部署。
本文讲的是扩容云中MySQL,通过Vitess和Kubernetes 【编者的话】本文作者Anthony Yeh是YouTube的软件工程师。文章主要阐述了YouTube如何使用Vitess和Kubernetes实现缩放MySQL的部署。

一个新的网站可能会以指数级速度飞速发展。不久之后,你就要开始计划扩容来满足这种意想不到的需求。你当然可以通过不断地增加更多的前端服务器来解决问题,但最终,数据库会成为你的瓶颈,这会导致你:
  • 添加多个副本获得更好的读取吞吐量和数据耐久性
  • 引入分区来扩展你的写入吞吐量,并且让你的数据集增长超过单台机器
  • 创建相互分离的副本池给批作业和备份来实现实时流量与副本的隔离
  • 克隆整个部署到多个全世界范围内的数据中心中来满足灾难恢复和更低延迟的需求

在YouTube,我们完成了扩容MySQL的部署,它现在可以处理数以亿计的日常视频浏览量和每分钟300小时新视频的上传量。为了实现这些需求,我们开发了Vitess平台,它可以解决扩容挑战且隐藏相关来自于应用层复杂度。

Vitess是一个面向于缩放MySQL的存储平台。它优化了MySQL在专用的硬件上的运行效率,就像在云架构里一样。他结合了很多重要的MySQL里的特性和NoSQL数据库的扩展性。

Vitess是一个可用的开源项目,并且可以很好地运行在容器环境下。如果你使用Kubernetes和Google Container Engine作为你的的容器集群管理器,上手Vitess会变得非常简单。我们给Vitess创建了一个单点开发部署配置,使它可以运行在任何Kubernetes支持的平台上。

另外,为了更容易的部署容器集群,Vitess还充分利用了由容器集群管理器所带来的好处,特别是:
  • 水平扩展:通过运行更多的节点来增加能力而不是建一个巨大的节点
  • 动态布置:让集群管理器调度Vitess容器到任何位置
  • 声明规格:描述你想要的最终状态,然后让容器管理器去创建它
  • 自愈组件:机器失败自动恢复

在这个环境下,Vitess提供了一个MySQL存储层,包括提升持久性,扩展性和易管理性。

我们也只是刚刚开始这样的集成,但你已经可以运行Vitess在你自己的Kubernetes上。对于更多的关于Vitess的问题,请查询我们的网站,在论坛里提出问题,或者到GitHub上加入讨论。特别注意看一看我们的综述,去理解相比于NoSQL的解决方案和像Google Cloud SQL一样全面管理MySQL的解决方案,我们在Vitess所做的权衡。

Vitess活跃开发于2011年,目前被用于YouTube的MySQL基础设施的一个基础部分,服务于每台服务器成千上万的每秒查询率。如果你希望确定Vitess是否适合你的项目,请访问 vitess.io

原文链接:Scaling MySQL in the cloud with Vitess and Kubernetes(翻译:何炜)

原文发布时间为:2015-10-12
本文作者:hewei 
本文来自云栖社区合作伙伴DockerOne,了解相关信息可以关注DockerOne。
原文标题:扩容云中MySQL,通过Vitess和Kubernetes
相关实践学习
容器服务Serverless版ACK Serverless 快速入门:在线魔方应用部署和监控
通过本实验,您将了解到容器服务Serverless版ACK Serverless 的基本产品能力,即可以实现快速部署一个在线魔方应用,并借助阿里云容器服务成熟的产品生态,实现在线应用的企业级监控,提升应用稳定性。
容器应用与集群管理
欢迎来到《容器应用与集群管理》课程,本课程是“云原生容器Clouder认证“系列中的第二阶段。课程将向您介绍与容器集群相关的概念和技术,这些概念和技术可以帮助您了解阿里云容器服务ACK/ACK Serverless的使用。同时,本课程也会向您介绍可以采取的工具、方法和可操作步骤,以帮助您了解如何基于容器服务ACK Serverless构建和管理企业级应用。 学习完本课程后,您将能够: 掌握容器集群、容器编排的基本概念 掌握Kubernetes的基础概念及核心思想 掌握阿里云容器服务ACK/ACK Serverless概念及使用方法 基于容器服务ACK Serverless搭建和管理企业级网站应用
目录
相关文章
|
2月前
|
消息中间件 Kubernetes NoSQL
有状态软件如何在 k8s 上快速扩容甚至自动扩容
有状态软件如何在 k8s 上快速扩容甚至自动扩容
|
2月前
|
Kubernetes 关系型数据库 MySQL
实时计算 Flink版产品使用合集之在Kubernetes(k8s)中同步MySQL变更到Elasticsearch该怎么操作
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStreamAPI、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
2月前
|
Kubernetes 关系型数据库 MySQL
MySQL在Kubernetes上的高可用实现
【5月更文挑战第1天】
252 5
|
2月前
|
存储 Cloud Native 关系型数据库
云原生|kubernetes|部署MySQL一主多从复制集群(基于GTID的复制)
云原生|kubernetes|部署MySQL一主多从复制集群(基于GTID的复制)
80 0
|
2月前
|
Kubernetes Cloud Native 虚拟化
云原生|kubernetes|找回丢失的etcd集群节点---etcd节点重新添加,扩容和重新初始化k8s的master节点
云原生|kubernetes|找回丢失的etcd集群节点---etcd节点重新添加,扩容和重新初始化k8s的master节点
150 0
|
2月前
|
存储 关系型数据库 MySQL
猿创征文|云原生|kubernetes实务---部署MySQL--实战(一)
猿创征文|云原生|kubernetes实务---部署MySQL--实战(一)
60 0
|
1月前
|
Kubernetes Cloud Native 微服务
微服务实践之使用 kube-vip 搭建高可用 Kubernetes 集群
微服务实践之使用 kube-vip 搭建高可用 Kubernetes 集群
230 3
|
2天前
|
Kubernetes 应用服务中间件 调度
如何在Kubernetes集群中配置跨可用区的Pod调度
如何在Kubernetes集群中配置跨可用区的Pod调度
|
10天前
|
Kubernetes API 索引
|
17天前
|
存储 Kubernetes 监控
Kubernetes 集群的持续性能优化策略
【5月更文挑战第70天】 随着容器化技术的普及,Kubernetes 已成为管理微服务架构的首选平台。然而,在大规模部署和长期运行过程中,集群往往会遭遇性能瓶颈,影响服务的响应速度和稳定性。本文将探讨针对 Kubernetes 集群的性能优化策略,包括资源调度优化、网络延迟降低、存储效率提升及监控与日志分析等方面,旨在为运维工程师提供一套系统化的持续优化方法,确保集群性能的长期稳定。