【云吞铺子】数据库DTS搬站实践分享
《云吞铺子-搬站实战技术精讲》第3期重磅上线!本期我们继续聚焦数据迁移工具,阿里云技术专家三菜将分享数据库DTS工具在搬站实践中的使用心得,技术干货不可错过哦!【云吞铺子】相关课程:【系统篇】性能抖动剖析(一)性能抖动剖析(二)性能抖动剖析(三)【安全篇】CC防护分析【数据库篇】RDS for MySQL CPU性能问题分析(一)RDS for MySQL CPU性能问题分析(二)RDS for MySQL CPU性能问题分析(三)【网络篇】时延敏感业务超时问题分析(一)时延敏感业务超时问题分析(二)时延敏感业务超时问题分析(三)【数据迁移】OSS上云数据迁移(一)OSS在线迁移服务剖析数据库DTS搬站实践分享CDN域名接入流程CDN运维及管理【精品文章合集】性能抖动剖析CC防护分析RDS for MySQL CPU性能问题分析时延敏感业务低概率超时问题分析Ossimport 大数据量迁移方案总结OSS在线迁移服务剖析DTS 搬站的实战心得阿里云CDN搬站第一期 域名接入流程阿里云CDN搬站第二期 运维及管理
AnalyticDB PostgreSQL 构建多场景的 RAG 应用
AnalyticDB拥有自研高性能的向量检索引擎,支持百亿级向量数据检索,广泛应用于企业知识检索、智能客服、以图生图等典型场景。
非“典型”向量数据库AnalyticDB PostgreSQL及RAG服务实践
随着Al人工智能技术的迅猛发展和自然语言处理领域的研究日益深入,如何构建强大的大语言模型对企业来说愈发重要。为了进一步提升LLMs的性能和应用范国,数据库技术的融合显得尤为重要。 本期“墨天轮沙龙”由墨天轮社区联合阿里云瑶池数据库,围绕数据库技术如何增强AI大模型展开讨论,将深入分享非“典型”向量数据库AnalyticDB PostgreSQL及RAG服务实践,快来围观吧~
百炼融合AnalyticDB,10分钟创建网站AI助手
阿里云百炼是基于通义大模型、行业大模型以及三方大模型的一站式大模型开发平台。面向企业客户和个人开发者,提供完整的模型服务工具和全链路应用开发套件,预置丰富的能力插件,提供API及SDK等便捷的集成方式,高效完成大模型应用构建。 阿里云百炼结合AnalyticDB PostgreSQL版高性能向量检索引擎,使得企业可在平台上构建企业专属知识库,让大模型具备私域知识。 本课程将从一个企业开发者的角度出发,手把手带你用AnalyticDB for PostgreSQL的高效向量引擎与阿里云自主研发的通义大模型服务平台百炼,只需10分钟即可为您的网站添加一个AI助手。 实验地址:https://help.aliyun.com/zh/model-studio/use-cases/add-an-ai-assistant-to-your-website-in-10-minutes
如何定期清理数据库中的历史数据?
通过NineData的数据归档功能,企业可以轻松实现数据库空间的自动化运维管理,提升性能并节省成本。同时,还介绍了具体的配置方法和不同需求场景下的操作方式,以及为避免清理对在线业务产生影响而指定的执行时间段等细节。NineData致力于简化DBA的数据清理工作,提高数据库操作的合规性,为企业实现降本增效提供有力支持。
NineData: 实现MongoDB快速迁移,业务零中断
你是否曾为MongoDB迁移过程中的停机、数据丢失或损坏等问题而烦恼?现在,我们为你带来了解决方案——NineData,高效可靠的MongoDB迁移及同步利器!地址:https://www.ninedata.cloud/dbmigration NineData能够实现完全自动化的全量数据迁移和增量数据采集复制,从而大大提高迁移的效率和可靠性。它具有业务不停服、大数据量/大表迁移能力、数据一致性对比以及可观测可干预能力等多项优势。 使用NineData进行MongoDB迁移非常简单,只需花1分钟完成配置即可自动化完成数据的迁移及同步过程。通过选择对应的复制数据源、复制对象及复制类型,然后选择需要迁移的数据库和集合,点击“创建任务”即可快速启动MongoDB的全自动化迁移。 如果你正在为MongoDB迁移而烦恼,那么NineData将是你的最佳选择!立即关注我们的B站账号,获取更多关于NineData的详细信息和操作指南,让我们一起开启高效可靠的MongoDB迁移之旅吧!一键三连这个视频,让更多的人了解这个强大的工具!
从MySQL到Doris:NineData助力数据同步
你是否曾经遇到过这样的问题,你的业务发展迅速,MySQL已经无法满足你的需求,而Doris正是你所需要的分布式数据仓库,让我们来看看如何通过NineData将MySQL数据库快速同步到Doris。 NineData的数据同步技术可以确保MySQL数据实时同步到Doris,降低数据延迟。 500GB的数据传输仅用时40分钟! 无论你是数据小白还是专业人士,NineData为你提供了直观的图形化界面,让你轻松配置同步任务,无需编写繁杂的代码,降低了操作门槛和出错几率。 你可以通过NineData的数据一致性对比机制轻松发现同步过程发生的数据不一致的问题,并提供一键修复功能。 此外,同步任务可以根据业务需求进行灵活定制,选择全量同步或增量同步,满足不同场景的数据同步要求。
如何快速完成PostgreSQL数据迁移?
如何快速完成PostgreSQL数据迁移?PostgreSQL作为一种备受欢迎的关系型数据库,其丰富的功能和扩展能力使其在企业中广泛应用。然而,由于各种业务需求,如上云、跨云、下云、跨机房迁移、跨地域迁移、数据库版本升级和扩缩容等场景,需要进行PostgreSQL数据迁移。在迁移过程中,迁移时间、数据准确性和业务停机要求是关键考虑因素。传统的迁移方案存在停机时间长、可靠性不高、数据准确性难以保障以及大数据量迁移挑战等问题。因此,选择高效、安全、准确的迁移工具至关重要。今天,高速、业务不停机的NineData数据迁移方案是最佳选择。NineData是玖章算术旗下的云原生智能数据管理平台,为解决PostgreSQL迁移过程中的问题,提供了业务不停服的数据迁移能力。NineData实现了自动化的结构迁移和全量数据迁移,并提供了变更数据的实时复制能力。用户可以在迁移过程中正常提供服务,无需停服。
云原生数仓AnalyticDB PostgreSQL|向量引擎加持,构建企业大模型的云上数据大脑
云原生数仓AnalyticDB PostgreSQL|向量引擎加持,构建企业大模型的云上数据大脑
PolarDB for PostgreSQL 架构解读
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 阿里云 PolarDB 内核研发高级专家冯遵宝在沙龙上解读了 PolarDB for PostgreSQL的架构,他从PolarDB for PostgreSQL的云原生架构、HTAP架构、企业级特性和开源的情况这几个方面重点进行了介绍。他说,PolarDB 不仅设计研发了计算存储分离的架构,还在数据库的模块栈上进行了大量优化。相比于传统的 OLAP 系统,它是一个即时生效的系统,不需要做数据的重分布和重打散,在性能上有了巨大的提升。PolarDB 是 100% 兼容PostgreSQL 生态,我们希望 PolarDB 的发展是作为 PostgreSQL 的一个分支,目前所有的组件已全部开源,因为它是和生产环境代码共用一份代码,在公有云上已经被无数客户使用过之后再开源的,所以开源出去的代码会更稳定。
数据库风向标第十八期:阿里云MongoDB助力游戏行业客户应对业务变化
MongoDB是全球广受欢迎的数据平台,阿里云MongoDB借助云原生的优势,能够为用户提供更可靠、更安全、更有性价比的产品。本次数据库风向标将详细介绍阿里云云原生MongoDB产品特性,以及阿里云MongoDB是如何助力游戏行业客户快速迭代上线和应对业务变化的需求。
数据库风向标第六期:DBS云原生备份技术解读
这么多年备份一直是一个传统略带保守的领域,近年来国内外备份厂商和云厂商异常活跃,业界究竟发生了什么?DBS备份又有哪些与众不同?本期一起为大家解读。讲师/嘉宾简介衡铁刚(佩恩):阿里云数据库产品专家,十余年数据库运维与产品经历,现负责数据库备份DBS和数据库自治服务DAS产品。薛志辉(桓禹):阿里云数据库研发专家,现负责数据库备份DBS数据应用方向的研发。程实(时勤):阿里云数据库高级技术专家,现负责数据库备份DBS产品链路和存储方向的研发。傅翠云(延瑛):阿里云数据库资深技术专家,数据库备份DBS业务负责人。曾在Oracle Berkeley DB,从事数据库内核和分布式高可用研发;加入阿里后,创建数据流基础设施DRC,设计淘宝全球异地多活的数据流架构;曾负责创新一体化数据库检索ESDB,首次解决交易买卖家双11大热点延迟,并拓展日志检索的AIOps和流程挖掘。
PolarDB for PostgreSQL架构详解
PolarDB PostgreSQL是一款阿里云自主研发的企业级数据库产品,采用计算存储分离架构,兼容PostgreSQL与Oracle。PolarDB 的存储与计算能力均可横向扩展,具有高可靠、高可用、弹性扩展等企业级数据库特性。同时,PolarDB 具有大规模并行计算能力,可以应对OLTP与OLAP混合负载;还具有时空、向量、搜索、图谱等多模创新特性,可以满足企业对数据处理日新月异的新需求。讲师/嘉宾简介冯遵宝(花名北侠) - 阿里云PolarDB内核研发高级专家,现负责PolarDB HTAP。10年Linux后端高性能编程经验,参与研发过阿里搜索引擎内核,Erlang虚拟机内核优化,PolarStore分布式存储,PolarDB HTAP分布式计算引擎。
AnalyticDB for PG on DBStack架构详解
ADB PG是基于Greenplum基础上自研的分析型数据库,Greenplum是典型的shared-nothing架构,在线下金融证券行业应用广泛,那么是我们如何让客户能够在线下场景低成本的享有与公共云相同的产品能力呢?议题主要介绍DBStack For ADBPG产品的架构设计,详解我们是如何实现3台最小化部署的规模是的客户,可以使用上ADBPG产品的。讲师/嘉宾简介方锋华,现任阿里云ADB PG产品技术团队负责人,数据库产品技术高级技术专家。2016年加入阿里云专注数据库专注于容器技术在数据库领域的使用,主导和推动了阿里云数据的全面容器和K8S化的云原生管控系统的设计和开发,2020年开始负责ADBPG产品技术,推动ADBPG产品全面云原生,主导数据库混合云产品DBStack For ADBPG版本研发,在数据库、云计算领域有丰富的工作经验和技术积累。
深度解析阿里云RDS PostgreSQL
阿里云RDS是业界规模大且可靠的云数据库服务,广泛服务于互联网、电商、金融、SaaS、科技、以及物流等各个行业。本议题将介绍RDS PG的云原生架构演进之路,及其丰富的企业级能力。讲师/嘉宾简介彭祥,阿里云数据库事业部RDS产品负责人,有多年数据库研发经验。曾任职于AWS数据库部门,是Aurora团队早期成员之一,参与并负责了相关产品多个重大项目的落地;也曾在Oracle数据库部门从事查询优化器的研发工作。在数据库领域有多项发明专利。
阿里云RDS PostgreSQL在大版本升级产品化的技术解密和思考
分享阿里云RDS PostgreSQL在大版本升级产品化的技术解密和思考。讲师/嘉宾简介汪建明, 阿里云智能数据库产品事业部研发技术高级专家, 花名风移, RDS PostgreSQL管控负责人。
Apache Hudi 与 Apache Pulsar 联合 Meetup 杭州站
Apache Hudi 与 Apache Pulsar 联合 Meetup 杭州站来啦!本次 Meetup 由 StreamNative 联合阿里云组织发起,并邀请涂鸦智能、阿里云AnalyticDB数据仓库团队、Zoom等合作伙伴共同为大家呈现,Apache Hudi 技术专家、Apache Pulsar PMC 成员、贡献者、社区技术专家汇聚一堂,共同探讨 Apache Hudi 与 Apache Pulsar 社区发展、行业实践等话题。活动时间:8月30日(周一)14:00-14:05 主持人开场(具体议程详见「讲师及议题」)讲师及议题■ 王烨(萌豆) - 阿里云高级技术专家《阿里云基于Hudi构建Lakehouse实践》时间:14:05-14:40本议题将介绍阿里云如何使用 Hudi 和 OSS 对象存储构建 Lakehouse,将为大家分享什么是 Lakehouse,阿里云数据库 OLAP 团队如何构建 Lakehouse,也将介绍在构建 Lakehouse 时遇到的问题和挑战,以及如何解决这些问题和挑战。■ 翟佳-StreamNative 联合创始人、Apache Pulsar PMC 成员《Pulsar 2.8.0 功能特性概述及规划》时间:14:40-15:15Apache Pulsar 项目和社区正在快速成长之中,功能迭代也十分迅速。在本议题,将为大家分享 Apache Pulsar 社区正在推进关键功能的最新进展,并为大家介绍 Apache Pulsar 2.8.0 有哪些新特性。■ 毛志斌-Zoom资深数据开发《Zoom基于Apache Hudi的流批一体架构实践》时间:15:15-15:50本议题将介绍Zoom数据平台背景及初版架构,通过引入Hudi后基于Hudi实现流批一体数据湖架构以及带来的架构优化升级,以及Hudi实战经验干货分享。■ 高天赐-涂鸦智能云开发高级研发工程师《Pulsar 在涂鸦智能的大规模应用实践》时间:15:50-16:25本次分享包括Apache Pulsar 在涂鸦智能多场景应用与实践分享、在物联网云开发场景作为消息队列的应用与实践、与 Flink 结合在大数据场景的应用与实践,以及专有云场景应用与实践。■ 李少锋(风泽) - 阿里云技术专家《基于Apache Hudi的CDC数据入湖》时间:16:25-17:00本议题将介绍典型 CDC 入湖场景,以及如何使用 Pulsar/Hudi 来构建数据湖,同时将会分享 Hudi 内核设计、新愿景以及社区最新动态。■ 盛宇帆-StreamNative 软件工程师《基于 Flink 的全新 Pulsar Connector 的设计、开发和使用》时间:17:00-17:35对于 Flink 而言 Pulsar 是一个新鲜而又熟悉的老朋友,早在 19 年,我们就有计划给 Flink 社区提交 Pulsar Connector 的代码。随着 Pulsar 社区的壮大,对于流批一体化的实际,这一贡献进度翻开了全新的篇章。Pulsar 的小伙伴将基于全新的 Flink Source 和 Sink API 重新设计并开发了 Pulsar Connector,并将合并到 Flink 的代码仓库进行维护。本次演讲,我们将提前学习和理解当前的 Pulsar Connector 如何打通 Flink 和 Pulsar 之前的壁垒,以及如何使用全新的 Pulsar Connector 开发 Flink 应用来使用 Pulsar。
数据库大讲堂—面向人工智能“新基建”的知识图谱底座 - 阿里云图数据库GDB
DBA职业发展、 云数据库技术趋势、 最佳实践等,邀你每周四看直播,学习数据库前沿知识!戳我前往专题页看更多精彩内内容,更有阿里入职机会提供哦直播简介1、如何使用图数据库构建知识图谱2、如何深度融合行业多元异构数据3、如何帮助企业智能分析、科学决策讲师介绍杨哲超阿里云图数据库产品负责人工信部人工智能揭榜挂帅评委专家
数据库大讲堂—从技术专家到产品经理:解析数据库混合部署
【开发者优惠来了】全网最低价,阿里云爆款服务器低至8.1元/月,更有针对学生的专享福利全面升级,戳:http://click.aliyun.com/m/1000188819/【数据库大讲堂】阿里云数据库专家给你解读 DBA职业发展、 云数据库技术趋势、 最佳实践等,邀你每周四看直播,学习数据库前沿知识!戳我前往专题页看更多精彩内内容,更有阿里入职机会提供哦14年老兵分享技术专家到产品经理的职业发展从技术视角解析混合部署的技术基础从产品视角解析混合部署的价值讲师介绍行伍,阿里云高级产品专家
POLARDB 的 Oracle 兼容性实现剖析 | 第九届PostgreSQL中国技术大会云数据库专场
随着云时代的到来,越来越多的用户期望尝试云原生的数据库,以分享云技术高速发展所带来的红利。这其中就包括 Oracle 生态的众多用户。在这个议题中,我将对 POLARDB 的兼容性技术做一些阐述,说明 POLARDB 是如何做到 Oracle 全兼容的,使得 DBA 由 Oracle 迁移到 POLARDB 可以不修改一行代码。嘉宾介绍杜贵彬, 阿里巴巴 内核专家。拥有15年数据库内核从业经验,专注于数据库和分布式领域,对于分布式管理和分布式事务有深入的理解。是 X-DB、OceanBase、Teradata、KingbaseES 等知名数据库的核心开发人员。
阿里云-MongoDB战略合作发布会
MongoDB是业界最受欢迎的开源数据库软件之一,在中国拥有广泛的企业客户和大量开发者支持。阿里云与全球知名开源数据库软件公司MongoDB达成战略合作协议,阿里云将成为全球唯一可提供最新MongoDB服务的云厂商。本次战略合作发布会将与你共同展望MongoDB开源数据库的云上之路,见证从NoSQL到NewSQL的升级蜕变,重塑云数据库未来。届时还将有最新MongoDB 4.2版本的重磅发布,敬请期待!限时优惠即日起 - 2020年1月20日,新购MongoDB 4.2版本的实例,享月付8折,1年7折,2年6折,3年5折优惠联系95187-1可享更多优惠!详情链接讲师信息① 演讲人:李飞飞 - 阿里巴巴集团副总裁、阿里云智能数据库事业部总裁演讲议题:《重塑云数据库的未来》② 演讲人:Alan Chhabra - MongoDB全球合作伙伴及亚太区高级副总裁演讲人:苏玉龙 - MongoDB北亚区副总裁演讲议题:《MongoDB下一代数据库:一直被模仿,从未被超越》③ 演讲人:林涛 - MongoDB北亚区技术总监演讲议题:《洞悉MongoDB通用数据平台新能力》④ 演讲人:杨成虎(花名:叶翔)- 阿里云智能NoSQL数据库技术总监、资深技术专家演讲议题:《深入了解阿里云MongoDB云数据库》⑤ 演讲人:李汐 - 轻松筹联合创始人 & CTO刘旭宏 - 一起教育科技副总裁演讲议题:《全面上云最佳实践》
阿里云新品发布会第74期:云数据库RDS MySQL三节点新品发布会
查看产品:云数据库RDS MySQL 版快速了解:发布核心、场景、优势、接入、更多优惠活动:MySQL三节点版本多规格 首购首月2折点击了解:“阿里云新品发布会频道”立即订阅:阿里云新品发布会·周刊直播主题:云数据库RDS MySQL三节点新品发布会直播流程一、 15:00——15:10 《RDS MySQL三节点企业版产品介绍》本议题将会围绕企业级数据库的关键能力介绍RDS MySQL三节点企业版的核心优势,从数据安全、可用性、扩展性、性能等多个方面解读重要产品特性。演讲嘉宾:胜通 阿里巴巴数据库产品专家多年MySQL数据库产品管理经验,专注于MySQL数据库核心竞争力、产品设计实现,目前负责阿里云RDS for MySQL产品管理工作。二、 15:10——15:30 《RDS-5.7三节点企业版-管控技术分享》本议题将会从云上管控体系来介绍,基于RDS for MySQL 5.7三节点企业版的云上管控是如何来实现的,同时在管控链路上和Mysql5.7双节点的区别有哪些,以及如何从Mysql5.7双节点升级到三节点企业版。演讲嘉宾:感仰 阿里云技术专家多年双11的经验,有丰富的高可用技术架构方面经验,目前专注于云上RDS管控体系开发,致力于打造云上的数据库服务。三、 15:30-16:00 《RDS企业三节点技术分享》阿里云RDS for MySQL 5.7 企业三节点版本是基于AliSQL Cluster的技术打造的全新产品,在继承了AliSQL所有的特性之外提供了RPO为0的多副本强一致方案,本文剖析了企业三节点版本的基础架构以及背后的技术,让客户能够了解产品新特性背后的设计原理。演讲嘉宾:胡炜 阿里云资深技术专家多年阿里双十一数据库内核技术负责人,专注于MySQL技术生态,负责cluster以及存储引擎的技术发展。四、 16:00-16:30 《RDS 5.7三节点企业版在阿里巴巴集团的应用案例解析》结合着阿里巴巴集团数据库的发展痛点,说明RDS 5.7三节点企业版产生的必然性以及对应的优势。介绍了集团的通用部署模式以及适用场景,在此基础上同时重点阐述了国际化场景以及双十一大促场景下的落地实践案例。演讲嘉宾:郑旦,阿里云DBA高级运维专家十年数据库行业经验,精通多种数据库技术。参与并推动阿里巴巴多家子公司的“去IOE”,“异地容灾”等架构的演进。负责了高德,优酷等收购公司的数据库融合项目,有丰富的数据库架构和企业级数据库解决方案经验。钉钉扫码加入,数据开发者技术群,掌握第一手动态资料
分布式数据库Cassandra 一致性详解
讲解Cassandra 一致性 基本概念,内核原理,运维建议,适用场景直播嘉宾郭泽晖(索月),阿里云数据库 技术专家,Cassandra 社区贡献者课程回顾阿里云cassandra技术架构及内核实现
阿里云时序数据库InfluxDB® 版本商业化发布会
InfluxDB 是当前最流行,DBengine 排名第一开源时序数据库产品。阿里云时序数据库 InfluxDB® 版是一种免运维,稳定可靠,可弹性伸缩的在线时序数据库服务。广泛应用于互联网基础资源监控,容器监控,业务运营监控分析,物联网设备远程实时监控,工业安全生产监控,生产质量评估和故障回溯。提供时序数据自动化采集,压缩存储,类SQL查询,多维聚合计算和数据可视化分析能力。本次直播将详细解析阿里云时许数据库 InfluxDB® 版的核心功能,产品优势,使用场景,并深入解读阿里云针对InfluxDB 稳定性保证,性能优化,高可用方面的所做的技术探索和技术实践。直播议题《监控运维利器-阿里云时序数据库 InfluxDB 版产品介绍 》 凤豪 《全局Cache管控与Load Shedding-阿里云InfluxDB内存优化之路》 曲速《InfluxDB高可用架构探索和技术实践 》 福巴直播回顾阿里云InfluxDB必知必会更多精彩想继续了解InfluxDB®?请戳这里>>>InfluxDB®介绍现在还有限时免费体验时序数据库InfluxDB®️版活动!链接戳这里>>>时序数据库 InfluxDB® 版免费公测(注:需登录阿里云账号)
Java Spring Boot开发实战系列课程第3讲:SpringBoot2.0连接MySQL数据库
主讲人:徐雷(点击关注专家,掌握一手干货)阿里云大学讲师,与阿里P9叶翔主讲《阿里巴巴MongoDB高级实战课程》Java Spring Boot《阿里巴巴MongoDB认证》讲师阿里巴巴MongoDB大会讲师2017翻译《MongoDB实战》第2版吉林大学计算机学士,上海交通大学硕士直播内容:Java Spring Boot开发实战系列课程第3讲:SpringBoot2.0连接MySQL数据库直播地址:Java技术进阶群进群方式:钉钉扫码入群
大咖对话|阿里云数据库李飞飞:Gen-AI时代下的数据库发展趋势
大咖对话|阿里云数据库李飞飞:Gen-AI时代下的数据库发展趋势 Dr.Feifei Li: Alibaba Cloud Databases in the Gen-AI Era
阿里云PolarDB开发者大会首度召开,让数据库开发像“搭积木”一样简单
现场凝聚来自国内外的科技泰斗、知名企业领袖和开发者群体,高能干货内容倾情奉献,一起探索云原生数据库技术的发展现状、前沿趋势与最佳实践。# PolarDB
阿里云PolarDB开发者大会首度召开,让数据库开发像“搭积木”一样简单
1月17日,阿里云PolarDB开发者大会首次召开,盛会已经圆满结束。在现场汇集了众多行业专家和优秀开发者的智慧和经验,现场火爆的氛围充满了热情和创造力。阿里云始终坚持“让数据库开发像‘搭积木’一样简单”。
2023 云栖大会精华视频|多模数据库Lindorm:打造AI时代的一体化数据平台
随着互联网、物联网、AI的发展,企业面临海量半结构化、非结构化数据的处理挑战,过往数据架构中多个系统组合使用的复杂低效成为应用的核心痛点。Lindorm致力打造一个简单高效的多模数据平台,实现多模数据在线+离线+AI+向量的一体化处理,提供一个高效、低成本的方案,满足大数据处理和AI应用需求,让海量数据处理像MySQL一样简单。
2023 云栖大会精华视频|云原生数据库的技术演进和最佳实践 #PolarDB #Lindorm
2023 云栖大会阿里云瑶池数据库精彩演讲视频合集:《PolarDB最新进展、技术演进和未来展望》、《云原生时代的新PG: PolarDB PG特性解析及最佳实践》、《一路伴随成长:PolarDB分布式版集中分布式一体化能力详解》、《阿里云多模态大模型+Lindorm全方位支持自动驾驶数据闭环》、《一起玩转PolarDB新特性》
PolarDB-X CDC多流原理与实践
为了解决超大规模集群、超高并发场景下Binlog生成、传输、消费的链路性能瓶颈,PolarDB-X在全局Binlog的基础上,推出了多流Binlog。本期分享将介绍多流Binlog的研发背景和实现原理,并演示多流Binlog的使用方法。
SQL智能诊断优化产品SQLess蚂蚁最佳实践
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 蚂蚁高级技术专家王建超为大家带来《SQL智能诊断优化产品SQLess蚂蚁最佳实践》,他从SQL优化体系及方法论、SQL智能诊断优化产品、基于OceanBase在蚂蚁最佳实践、SQLess 核心技术等多个方面分享了SQLess实践经验。他说,SQL关系着业务的性能、吞吐和稳定性,蚂蚁业务场景对数据库稳定性的极致要求,孵化了这款覆盖SQL生命周期的诊断优化产品SQLess,包含SQL防控体系、SQL应急体系、SQL优化体系三道防线。
高性能PolarDB一体机解决方案
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 中启乘数科技创始人唐成为大家带来《高性能PolarDB一体机解决方案》,他围绕PolarDB的特点、高性能一体机的核心技术、使用场景三个方面来分享了一体机CData的解决方案。他说,CData是将数据库的最佳实践与快速发展的硬件相结合,把计算能力、网络能力、存储能力等各方面做到最佳优化,提供一套高性能、高可靠,最佳性价比的数据库平台,它的使用场景也包括高可用、强一致性、大容量的场景。
Oracle VS PostgreSQL/PolarDB 技术大比拼
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 CUUG负责人、PG中文社区委员、Oracle金牌讲师陈卫星为大家带来主题分享《Oracle VS PostgreSQL/PolarDB功能大比拼》。他从实例结构、数据库体系架构、备份恢复、性能调优、高可用解决方案五个方面进行了对比分享。他说,在PolarDB的体系架构中,计算节点和存储节点分离,存储节点有优势,也就是共享存储。随着用户业务数据量越来越大,业务越来越复杂,传统数据库系列面临巨大挑战,PolarDB 在技术上做了很多优化,如只复制Meta、页面回放优化、DDL锁回放优化,通过这些技术上的突破,极大的降低了复制延迟,实现了读写分离、高可用和稳定性。
超大型保险金融企业如何进行数据库搬迁?
今天国内大部分金融机构的核心业务仍然运行在国外的数据库上,这是一个我们无法回避的现实,但数据库的替换不仅是一个产品的替换,替换的目的不单纯为了“国产”两个字,更重要的是:技术必须进步。这些年对数据库替换的分析和畅想很多,但是面对实际大规模、复杂的核心应用系统的技术平台替换,过程中还有很多事前想不到的问题,尤其对于现有运行环境的各种适配和兼容,对应用的友好性等方面。关于这些,本次迁移实践走出了坚实的一步,积累了弥足珍贵的经验,希望能为今后的国产进程给出很好的示范效应。
数据库风向标第十六期:RDS PostgreSQL Saas行业数据库解决方案
随着云计算行业的蓬勃发展,SaaS(Software as a Service,软件即服务)的概念正在全世界范围内成为热点话题,与此同时国内企业级SaaS的市场也在云服务的加持下进入快速扩张的阶段。针对SaaS多租户架构,资源复用的特点,SaaS类客户对于云数据库的能力也会产生更多,更差异化的需求。而作为企业级SaaS市场数据库服务的有力竞争者,今天我们就来聊一聊RDS PostgreSQL对于这一热点行业,提供了哪些具有竞争力的解决方案。嘉宾介绍杨珂凡(凡珂):阿里云数据库研发工程师,目前主要负责RDS OpenAPI,控制台以及售卖体验相关研发工作。吴晓芳(子塘):阿里云数据库产品专家,目前负责RDS PostgreSQL、RDS MariaDB产品工作。刘宗喜(道奇):阿里云数据库解决方案架构师,具备多年的数仓、数据中台实践经验,主要负责泛互联网行业的客户数据库上云,架构优化,诊断调优等方面的工作。刘钊:金蝶中国DBA,主要负责金蝶小微产品数据库架构设计与优化。实践经验丰富,长于数据库诊断、性能调整与SQL优化等,多年ORACLE/MySQL/PostgreSQL数据库运维经验。汪建明(风移):阿里云数据库高级研发专家,RDS PostgreSQL管控负责人。
阿里云NoSQL数据库峰会“化繁为简,大数至简,Lindorm解读与发展”
阿里云NoSQL数据库峰会化繁为简,Lindorm多模融合能力解读大数至简,Lindorm从容应对海量历史保单沈春辉 阿里云数据库事业 Lindorm产品研发负责人马铭 国泰产险数据库专家
数据库风向标第十三期:孪生全空间数据库Ganos V5.0解读
从室外空间到室内外一体化空间,从地上空间到地上下一体化空间,以全空间为载体的位置服务将随时在、随地在、随身在。为迎接全空间位置智能时代的到来,数据库需要原生存储、查询与分析处理大规模全空间多模多态数据,应对来自数字孪生、自动驾驶/车联网、5G空间计算等前沿位置相关技术领域新数据新场景挑战。今天就来聊一聊Ganos V5.0面向孪生全空间能力的重磅升级,是如何解决全空间位置大数据使用流程复杂、使用门槛高、应用效率低等问题。嘉宾/讲师宋震(凡玺) 阿里云数据库产品事业部高级产品专家,负责Ganos的产品管理、功能设计与方案规划工作。肖斐(箕伯) 阿里云达摩院数据库与存储实验室技术专家,长期从事时空云计算与遥感大数据管理与应用方面的研究,负责Ganos时空数据库引擎中栅格引擎的研发工作。范振华(焕智) 阿里云数据库产品事业部Ganos时空引擎技术专家,负责Ganos 三维空间计算,致力于打造空间数字孪生的基础设施。曾志明(攀爬) 阿里云行业解决方案研发部资深技术专家,负责DataQ空间数据中台的规划和研发工作 。
数据库风向标第十二期:PolarDB Serverless V2 — 将数据库云原生带入新时代
PolarDB是业内首创支持跨机ScaleUp和跨机ScaleOut Serverless 服务的云数据库,为解决 Serverless 形态下普遍存在的上限规格过低限制,PolarDB 突破了无感秒切和高性能全局一致性两大技术难点,实现了跨机无感弹升和强一致横向线性弹升,使得上限规格突破了 1000 核以上,将业内数据库Serverless带到了新的高度,让我们一起来聊聊PolarDB Serverless的产品、技术和应用情况。讲师/嘉宾姜帅(云壤):阿里云数据库高级产品专家,具备多年云计算数据库相关产品经验,负责PolarDB-MySQL的产品管理、方案设计和特性规划工作。章颖强(江疑):阿里云资深技术专家,PolarDB 多主架构/Serverless/事务引擎 研发负责人。薛华威(争辉):高级开发工程师, PolarDB-MySQL HTAP、PolarDB-MySQL Serverless管控主要开发人员,目前负责PolarDB-MySQL Serverless 管控相关的研发和维护工作。程涵 易仓科技数据库业务负责人,资深DBA,对各种数据库技术、运维有丰富的经验和深刻的理解,目前负责易仓科技所有数据库业务的研发和维护工作。
数据库风向标第九期:多模数据库Lindorm的车联网轨迹数据处理技术与应用解析
随着万物互联时代的到来,汽车企业开始了实践数字化转型且部分企业已经初见成效,新兴的自动驾驶公司也如雨后春笋般冒出,车联网行业面临了前所未有的海量数据挑战,以及时序,时空等多种类型数据融合处理分析的需求,其中车联轨迹数据处理就是一种常见的业务诉求。而Lindorm做为一款阿里云自研的多模超融合数据库,其有着弹性快、成本低、简单易用等多种优势。今天我们来聊聊,Lindorm是如何应对车联网中海量车辆轨迹数据处理的挑战,同时也会分享Lindorm在车联网领域应用的真实案例。庞少婷(栖无):阿里云数据库产品经理,现负责阿里云自研的多模融合数据库Lindorm的功能设计、产品管理等工作。杨文龙(正研):阿里云数据库高级技术专家,Apache HBase Committer&PMC成员,云原生多模数据库Lindorm宽表引擎研发负责人。王方(秦疏):阿里云数据库研发专家,现负责Lindorm Ganos时空引擎,同时参与PolarDB Ganos时空引擎以及PolarDB PG内核研发工作。孟庆义(天引):多年从事HBase、Phoenix、Kafka等NoSQL数据库研发工作,现Lindorm 流引擎研发负责人。
AnalyticDB PostgreSQL数据共享
随着精细化运营的深入,企业内多业务间的数据关联分析越来越复杂,比如数据在业务上下游之间传递,或者一份公共数据被多个业务共用。为确保各自业务的隔离性和资源独享,企业倾向在云上创建多业务实例并独立管理。那么想要进行同一份数据的流转,就需要将数据在实例间进行多次复制,极大的降低了企业分析效率并增加数据运维的复杂度。在数据移动的过程中,也会出现数据冗余,数据不一致,数据缺乏实效性,甚至数据正确性的问题。由于复杂的数据流转成本,企业迟迟无法真正打破数据孤岛。AnalyticDB PostgreSQL版率先在国内推出数据共享能力,使构建在ADB PG上的数仓可以安全、快速的构建实例间的实时数据共享,无需任何数据移动。数据共享能力缓解了企业为避免数据隔离而进行的架构的过度设计,现在企业可以面向业务进行Serverless的资源创建,而当业务需要进行关联数据分析时,可快速创建数据共享,秒级实现数据的打通,彻底解决数据规划难,流转难,运维难的问题,从平台层助力打破数据孤岛。
AnalyticDB云原生架构技术揭秘
ADB PG是基于Greenplum基础上自研的分析型数据库,Greenplum是典型的shared-nothing架构,在线下金融证券行业应用广泛,如何基于云上资源池化能力,把shared-nothing架构改造成存储计算分离,存储计算独立按需扩缩的云原生架构,并保留它的事务能力,以及周边工具生态兼容的能力,ADB PG云原生架构给出一种新的实践。讲师/嘉宾简介陆元飞,花名翰明,2006年毕业于华南理工大学应用数学学院,原华为主任工程师,作为华为分布式数据库taurus核心研发,2018年加入阿里后,负责ADB向量版,产品在个性化推荐,图搜,安防领域得到大规模应用,研究成果发布在VLDB;2020年开始负责ADB PG云原生架构,实现存储计算分离,产品在公有云上线实现从零到一。
数据库大讲堂—MyBase实战 — MySQL 上云之路
【数据库大讲堂】阿里云数据库专家给你解读 DBA职业发展、 云数据库技术趋势、 最佳实践等,邀你每周四看直播,学习数据库前沿知识!戳我前往专题页看更多精彩内内容,更有阿里入职机会提供哦直播简介数据迁移上云的挑战有哪些数据上云迁移至MyBase方案详解讲师简介:胡林森(应帆)阿里云数据库事业部技术专家目前负责阿里云数据库备份恢复业务研发,7年数据库行业从业经验,擅长数据库备份与恢复
数据库
数据库领域前沿技术分享与交流