蚂蚁聚宝虫洞,数据传输的桥梁

本文涉及的产品
数据传输服务 DTS,数据同步 small 3个月
推荐场景:
数据库上云
数据传输服务 DTS,数据迁移 small 3个月
推荐场景:
MySQL数据库上云
数据传输服务 DTS,数据同步 1个月
简介: 本文PPT来自蚂蚁金服财富线终端技术高级技术专家赵占胜于10月14日在2016年杭州云栖大会上发表的演讲,分享主题为《蚂蚁聚宝虫洞项目技术方案介绍——云与端之间数据传输的桥梁》。

本文PPT来自蚂蚁金服财富线终端技术高级技术专家赵占胜于10月14日在2016年杭州云栖大会上发表的演讲,分享主题为《蚂蚁聚宝虫洞项目技术方案介绍——云与端之间数据传输的桥梁》。

资讯新闻如何能实现随时随地秒开?SYNC协议的应用场景不断增多?如何最大的节约流量?传输协议如何优化整合?总之,如何实现实时、高效、省流量一直考验着我们的技术人员。今天,蚂蚁金服财富线终端技术高级技术专家赵占胜和我们分享蚂蚁聚宝虫洞项目解决这一系列问题的成果。

虫洞是在云端一体架构下,云与端之间控制的纽带,数据的桥梁。整体围绕数据、链路、控制进行设计与优化。可以提高用户体验,节省用户流量。它具有三大功能:统一客户端数据服务、自适应网络信息传输和智能化场景数据推送。目前虫洞已经具备的能力有:预加载,统一数据模型客户端统一数据服务,业务场景策略配置,业务场景识别,数据策略控制。适用于存在预加载需求信息类数据,如:新闻,股票日、周,月K线相关要闻等场景。具体到数据策略,以新闻场景为例:WIFI环境下,列表全部推送;4G环境下,列表全部推送;3G环境下,仅推送分页后15条;2G环境下,仅推送列表后10条。在实现方面,虫洞系统的整体架构主要分为三大层:APP业务层、APP基础层和虫洞服务端。服务端虫洞引擎又分为场景处理器、RPC请求处理器、数据发送处理器三大部分。

现在,虫洞已成为云与端数据传输的桥梁。在未来,虫洞将是实现云端一体的重要组成部分。7500b7abcd5a8f662e70ffda8e12d59f61308635a42f4e5c3c6124521165fe1484a4bb0c5d9677aa3698386113ee6990fb310f55e3a7e3febd1c15bd3b871e934350c3079ebc6b29af9925ca9e6928ed22c3ea6d841e17ca1f6a1465172fc196a43ddf6f3f12a3723c0f18489be18d4c20615de5b9a32a9d37ad2b1757a0ca84889c4df44caaf179d3cd8fb700bef40158e4df068b4cb33430b555d67c769a8ba2fce6ce04a832d454854591aabe0a2362a39e1a436df19dee06b54a69cd93271e75d2ab19210dac9073ef0cba3053bb2a23425ceedeff8e61df9e89ff0c35bbaabfbcd4720cf26d4799ef6632c0a05b246e04a666682d8a76c21307fc998eb99d8a33bb5dca1ddfdf7ba8dd46c40366273df85c5cf57541

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
Sqoop 企业级大数据迁移方案实战
Sqoop是一个用于在Hadoop和关系数据库服务器之间传输数据的工具。它用于从关系数据库(如MySQL,Oracle)导入数据到Hadoop HDFS,并从Hadoop文件系统导出到关系数据库。 本课程主要讲解了Sqoop的设计思想及原理、部署安装及配置、详细具体的使用方法技巧与实操案例、企业级任务管理等。结合日常工作实践,培养解决实际问题的能力。本课程由黑马程序员提供。
相关文章
|
5月前
|
SQL 分布式计算 监控
在数据传输服务(DTS)中,要查看每个小时源端产生了多少条数据
【2月更文挑战第32天】在数据传输服务(DTS)中,要查看每个小时源端产生了多少条数据
61 6
|
5月前
|
存储 SQL NoSQL
数据传输DTS同步问题之同步失败如何解决
数据传输服务(DTS)是一项专注于数据迁移和同步的云服务,在使用过程中可能遇到多种问题,本合集精选常见的DTS数据传输问题及其答疑解惑,以助用户顺利实现数据流转。
|
5月前
|
Cloud Native NoSQL 关系型数据库
数据传输DTS校验问题之校验报错如何解决
数据传输服务(DTS)是一项专注于数据迁移和同步的云服务,在使用过程中可能遇到多种问题,本合集精选常见的DTS数据传输问题及其答疑解惑,以助用户顺利实现数据流转。
|
5月前
DTS数据传输延迟可能有多种原因
【1月更文挑战第16天】【1月更文挑战第79篇】DTS数据传输延迟可能有多种原因
264 2
|
5月前
|
NoSQL Redis 数据库
数据传输DTS中金融云跨账号同步Redis,增量校验报错了
【1月更文挑战第16天】【1月更文挑战第80篇】数据传输DTS中金融云跨账号同步Redis,增量校验报错了
105 1
|
2月前
|
存储 安全 关系型数据库
跨越地域的数据传输大冒险!如何轻松更换DTS实例地域,全面攻略揭秘!
【8月更文挑战第15天】在数字时代的浪潮中,数据传输服务(DTS)是企业跨地域扩张的重要桥梁。然而,更换DTS实例地域就像是一场冒险旅程,充满了未知和挑战。本文将带你踏上这场跨越地域的数据传输大冒险,揭示如何轻松更换DTS实例地域的秘密。无论你是追求速度的迁移高手,还是成本敏感的手动操作者,这里都有你需要的答案。让我们一起探索这个神秘的世界,解锁数据传输的无限可能!
41 0
|
2月前
|
关系型数据库 MySQL OLAP
数据传输DTS是什么?
【8月更文挑战第30天】数据传输DTS是什么?
136 3
|
4月前
|
关系型数据库 MySQL 分布式数据库
PolarDB操作报错合集之当使用DTS(数据传输服务)同步的表在目标库中进行LEFT JOIN查询时遇到异常,是什么导致的
在使用阿里云的PolarDB(包括PolarDB-X)时,用户可能会遇到各种操作报错。下面汇总了一些常见的报错情况及其可能的原因和解决办法:1.安装PolarDB-X报错、2.PolarDB安装后无法连接、3.PolarDB-X 使用rpm安装启动卡顿、4.PolarDB执行UPDATE/INSERT报错、5.DDL操作提示“Lock conflict”、6.数据集成时联通PolarDB报错、7.编译DN报错(RockyLinux)、8.CheckStorage报错(源数据库实例被删除)、9.嵌套事务错误(TDDL-4604)。
|
5月前
|
存储 Java 关系型数据库
数据传输DTS数据问题之数据写入异常如何解决
数据传输服务(DTS)是一项专注于数据迁移和同步的云服务,在使用过程中可能遇到多种问题,本合集精选常见的DTS数据传输问题及其答疑解惑,以助用户顺利实现数据流转。
数据传输DTS数据问题之数据写入异常如何解决
|
5月前
|
SQL 数据库
在数据传输服务(DTS)中,当SQL数据迁移报告对象名 'dbo.VQD_Rpt_Report' 无效时
【2月更文挑战第32天】在数据传输服务(DTS)中,当SQL数据迁移报告对象名 'dbo.VQD_Rpt_Report' 无效时
52 1