数据仓库需要的不是退出历史舞台

简介: 本文讲的是数据仓库需要的不是退出历史舞台【IT168 评论】国内最受关注的数据库技术盛会——2017第八届中国数据库技术大会(DTCC2017)于2017年5月11-13日如约而至。本届大会以“数据驱动?价值发现”为主题,汇集来自互联网、电子商务、金融、电信、政府、行业协会等20多个领域的120多位技术专家,共同探讨Oracle、MySQL、NoSQL、云端数据库、智能数据平台、区块链、数据可视化、深度学习等领域的前瞻性热点话题与技术。

本文讲的是数据仓库需要的不是退出历史舞台【IT168 评论】国内最受关注的数据库技术盛会——2017第八届中国数据库技术大会(DTCC2017)于2017年5月11-13日如约而至。本届大会以“数据驱动?价值发现”为主题,汇集来自互联网、电子商务、金融、电信、政府、行业协会等20多个领域的120多位技术专家,共同探讨Oracle、MySQL、NoSQL、云端数据库、智能数据平台、区块链、数据可视化、深度学习等领域的前瞻性热点话题与技术。  

数据仓库需要的不是退出历史舞台

  (更多大会精彩:http://tech.it168.com/topic/2017/5-10/DTCC2017/)

在大会的分会场上,来自酷客数据的联合创始人兼CEO简丽荣来了《云端数据仓库HashData的设计与实现》的精彩分享。

谈到数据仓库,有些人认为在大数据时代,已经是一种黄昏技术,传统的数据仓库假设主题是较少变化的,其应对变化的方式是对数据源到前端展现的整个流程中的每个部分进行修改,然后重新加载数据,甚至重新计算数据,导致其适应变化的周期较长,但这种模式比较适合对数据质量和查询性能要求较高、而不太计较预处理代价的场合。

而在简丽荣看来,数据仓库需要的不是退出历史舞台,而是根本性的改变。酷客数据正在做的就是这件事。据了解,酷客数据由Apache HAWQ创始团队于2016年成立,专注于SQL-on-Cloud云端数据仓库服务,核心团队由来自Pivotal,Teradata,IBM,Yahoo!等公司资深的分布式数据库、云计算和Hadoop专家组成。

随着信息技术的迅速发展,各行各业正产生和积累爆炸式的数据。但是,尽管近年来大数据处理相关的工具和产品不断涌现,传统部署模式下的大数据分析软硬件前期投入巨大、实施周期漫长、运维复杂,加上艰难的IT资源规划等原因,导致企业进行大数据分析的门槛依然很高。

简丽荣认为,云计算的快速发展,特别是云端数据的爆炸式增长,使得数据仓库上云成为大势所趋;同时,云计算平台也为企业解决传统数据仓库面临的挑战提供了坚实的基础。不仅云计算的规模经济和按需收费的模式大大降低了企业的前期投入成本,同时,计算、存储和网络资源的API化使得软硬件近一步融合,让数据仓库系统的自动化运维甚至是智能化运维成为可能。

酷客数据的核心产品——HashData数据仓库,是一个高性能、完全托管的PB级数据仓库服务,让企业用户能够更轻松地分析海量数据。通过使用HashData,企业用户无需购买、配置和管理庞大的服务器集群,按使用量付费,没有任何前期投入,使得数据存储和分析的成本不到传统解决方案的十分之一。另外,HashData数据仓库兼容标准的JDBC和ODBC,无缝集成企业内部已有的ETL和BI工具。这意味着HashData数据仓库使用起来跟部署在企业内部数据中心的传统数据仓库一样自然方便。

可以说,HashData提供了丰富的分析功能,并通过灵活、高速的数据连接器,实现与云平台其他数据服务的互联互通,有效缓解客户面临的数据孤岛问题。另外,拥抱开源也是HashData的一个特点,消除数据绑架的风险。

值得一提的是,HashData数据仓库可以按需启动数据仓库集群,不需要DBA介入,在线升级和扩缩容,支持独立的元数据服务,并且对象存储服务提供几乎无限的存储容量,以及数据多版本控制。根据不同的工作负载启动不同配置的集群,同时,开发、测试和生产环境能够完全一致。

随着企业将越来越多的应用部署在云平台上面,产生和积累了爆炸性增长的数据,云端大数据分析势在必行,而与时具进的数据仓库解决方案则是降低大数据分析门槛的重中之重。

原文发布时间为:2017-05-13

本文作者:张存

本文来自云栖社区合作伙伴IT168,了解相关信息可以关注IT168

原文标题:数据仓库需要的不是退出历史舞台

目录
相关文章
|
6天前
|
存储 关系型数据库 分布式数据库
PostgreSQL 18 发布,快来 PolarDB 尝鲜!
PostgreSQL 18 发布,PolarDB for PostgreSQL 全面兼容。新版本支持异步I/O、UUIDv7、虚拟生成列、逻辑复制增强及OAuth认证,显著提升性能与安全。PolarDB-PG 18 支持存算分离架构,融合海量弹性存储与极致计算性能,搭配丰富插件生态,为企业提供高效、稳定、灵活的云数据库解决方案,助力企业数字化转型如虎添翼!
|
17天前
|
弹性计算 关系型数据库 微服务
基于 Docker 与 Kubernetes(K3s)的微服务:阿里云生产环境扩容实践
在微服务架构中,如何实现“稳定扩容”与“成本可控”是企业面临的核心挑战。本文结合 Python FastAPI 微服务实战,详解如何基于阿里云基础设施,利用 Docker 封装服务、K3s 实现容器编排,构建生产级微服务架构。内容涵盖容器构建、集群部署、自动扩缩容、可观测性等关键环节,适配阿里云资源特性与服务生态,助力企业打造低成本、高可靠、易扩展的微服务解决方案。
1327 7
|
5天前
|
存储 人工智能 Java
AI 超级智能体全栈项目阶段二:Prompt 优化技巧与学术分析 AI 应用开发实现上下文联系多轮对话
本文讲解 Prompt 基本概念与 10 个优化技巧,结合学术分析 AI 应用的需求分析、设计方案,介绍 Spring AI 中 ChatClient 及 Advisors 的使用。
300 129
AI 超级智能体全栈项目阶段二:Prompt 优化技巧与学术分析 AI 应用开发实现上下文联系多轮对话
|
4天前
|
监控 JavaScript Java
基于大模型技术的反欺诈知识问答系统
随着互联网与金融科技发展,网络欺诈频发,构建高效反欺诈平台成为迫切需求。本文基于Java、Vue.js、Spring Boot与MySQL技术,设计实现集欺诈识别、宣传教育、用户互动于一体的反欺诈系统,提升公众防范意识,助力企业合规与用户权益保护。
|
16天前
|
机器学习/深度学习 人工智能 前端开发
通义DeepResearch全面开源!同步分享可落地的高阶Agent构建方法论
通义研究团队开源发布通义 DeepResearch —— 首个在性能上可与 OpenAI DeepResearch 相媲美、并在多项权威基准测试中取得领先表现的全开源 Web Agent。
1396 87
|
4天前
|
JavaScript Java 大数据
基于JavaWeb的销售管理系统设计系统
本系统基于Java、MySQL、Spring Boot与Vue.js技术,构建高效、可扩展的销售管理平台,实现客户、订单、数据可视化等全流程自动化管理,提升企业运营效率与决策能力。
|
5天前
|
人工智能 Java API
AI 超级智能体全栈项目阶段一:AI大模型概述、选型、项目初始化以及基于阿里云灵积模型 Qwen-Plus实现模型接入四种方式(SDK/HTTP/SpringAI/langchain4j)
本文介绍AI大模型的核心概念、分类及开发者学习路径,重点讲解如何选择与接入大模型。项目基于Spring Boot,使用阿里云灵积模型(Qwen-Plus),对比SDK、HTTP、Spring AI和LangChain4j四种接入方式,助力开发者高效构建AI应用。
298 122
AI 超级智能体全栈项目阶段一:AI大模型概述、选型、项目初始化以及基于阿里云灵积模型 Qwen-Plus实现模型接入四种方式(SDK/HTTP/SpringAI/langchain4j)
|
5天前
|
弹性计算 安全 数据安全/隐私保护
2025年阿里云域名备案流程(新手图文详细流程)
本文图文详解阿里云账号注册、服务器租赁、域名购买及备案全流程,涵盖企业实名认证、信息模板创建、域名备案提交与管局审核等关键步骤,助您快速完成网站上线前的准备工作。
232 82
2025年阿里云域名备案流程(新手图文详细流程)