• 关于

    dw数据库的删除更新

    的搜索结果
  • Elasticsearch模块——CRUD

    ElastICsearch的基本操作:增删改查,有必要了解,以备不时之需.增删改查是数据库的基础操作方法。ES 虽然不是数据库,但是很多场合下,都被人们当做一个文档型 NoSQL 数据库在使用,原因自然是因为在接口和分布式架构层面的相似性。虽然在 Elastic Stack 场景下,数据的写入和查...

    文章 ritit 2017-09-11 1405浏览量

  • 一种对数据仓库友好的数据库设计

    系统可以分为两种:一种是 联机交易系统(OLTP),一种是在线分析系统(OLAP)。OLTP用来收集数据,然后把数据同步到OLAP,在OLAP中进行分析数据。 OLAP可以减少OLTP的负载,提高对数据的利用率。 数据同步方法 将数据从OLTP同步到OLAP,有两种方法:全量同步和增量同步。 ...

    文章 黑风寨1号 2017-03-14 3716浏览量

  • 《BI那点儿事》ETL中的关键技术

    原文:《BI那点儿事》ETL中的关键技术 ETL(Extract/Transformation/Load)是BI/DW的核心和灵魂,按照统一的规则集成并提高数据的价值,是负责完成数据从数据源向目标数据仓库转化的过程,是实施数据仓库的重要步骤。 ETL过程中的主要环节就是数据抽取、数据转换和加工、...

    文章 杰克.陈 2014-12-10 1064浏览量

  • 万券齐发助力企业上云,爆款产品低至2.2折起!

    限量神券最高减1000,抢完即止!云服务器ECS新用户首购低至0.95折!

    广告

  • 《Greenplum企业应用实战》一第3章 Greenplum实战3.1 历史拉链表

    本节书摘来自华章出版社《Greenplum企业应用实战》一书中的第3章,第3.1节,作者 何勇 陈晓峰,更多章节内容可以访问云栖社区“华章计算机”公众号查看 第3章 Greenplum实战 从本章开始我们结合实际需求,阐述一下日常项目开发中如何结合Greenplum的特性进行高效的开发,展现出Gr...

    文章 华章计算机 2017-07-03 2797浏览量

  • 数据库"负载均衡,备份,异地容灾"设计

    数据库"负载均衡,备份,异地容灾"设计Author: DigoalPS - 纯属个人看法,仅供参考.1. 数据对象按分类放到不同的SCHEMA  为了方便实施数据库层面的备份和容灾,必须将数据对象按内容进行逻辑分类设计.  例如:  (某下载系统)    1.tbl_app_info 表 - 存储...

    文章 德哥 2016-03-31 2480浏览量

  • SSIS 优化设计1:数据源的提取和使用暂存

    在使用SSIS Package处理海量数据时,必须精心设计Package的各个Task组件,“锱铢必较”,以最快的速度和最小的资源消耗,完成既定的数据处理任务。在处理数据源提取时,数据的大小由两个方面决定:数据行的宽度和数据行的数量,为了减少ETL运行的时间,可以从源数据的提取上做优化设计,从数据...

    文章 长征6号 2014-07-10 550浏览量

  • 《数据虚拟化:商务智能系统的数据架构与管理》一 2.5 商务智能系统的数据存储

    2.5 商务智能系统的数据存储 在商务智能系统中可以找到下列形式的数据存储:数据仓库数据集市数据中转区可操作数据存储个人数据存储 2.5.1 数据仓库 就像引擎需要汽油来驱动,报表工具和分析工具也需要数据来操作。没有数据,这些产品就没有价值。所以这些工具需要访问将数据收集起来的生产数据库,因为大多...

    文章 华章计算机 2017-09-08 1243浏览量

  • 数据仓库和OLAP(概念)

    联机分析处理 简写为OLAP,随着数据库技术的发展和应用,数据库存储的数据量从20世纪80年代的兆(M)字节及千兆(G)字节过渡到现在的兆兆(T)字节和千兆兆(P)字节,同时,用户的查询需求也越来越复杂,涉及的已不仅是查询或操纵一张关系表中的一条或几条记录,而且要对多张表中千万条记录的数据进行数...

    文章 skyme 2016-05-04 2902浏览量

  • 11g新特性:Streams同步捕获

    11g中引入了新的Streams特性:Synchronous Capture同步捕获。不同于传统Streams的捕获机制,Synchronous Capture同步捕获不基于归档日志或者在线重做日志来捕捉数据库中的变化。取而代之,同步捕获使用另一种内部机制来捕捉数据库中的变化并对这些捕获的变化实施...

    文章 科技小能手 2017-11-12 740浏览量

  • 大数据环境下该如何优雅地设计数据分层

    发个牢骚,搞大数据的也得建设数据仓库吧。而且不管是传统行业还是现在的互联网公司,都需要对数据仓库有一定的重视,而不是谈一句自己是搞大数据的就很厉害了。数据仓库更多代表的是一种对数据的管理和使用的方式,它是一整套包括了etl、调度、建模在内的完整的理论体系。现在所谓的大数据更多的是一种数据量级的增大...

    文章 隐林 2017-07-20 38193浏览量

  • SQL Server 2005群集更换存储

    为什么写这篇文章,主要是因为考虑到群集上更换存储的情况,例如原来的存储发生过小故障,担心数据丢失,必须将群集中的存储换成一个新的存储。于是就搭了个实验环境验证一下实施过程。本环境是基于Windows server 2003+SQL Server 2005的环境。后面会上一篇Windows Serv...

    文章 技术小胖子 2017-11-13 829浏览量

  • 数据系统架构——Lambda architecture

    传统系统的问题 “我们正在从IT时代走向DT时代(数据时代)。IT和DT之间,不仅仅是技术的变革,更是思想意识的变革,IT主要是为自我服务,用来更好地自我控制和管理,DT则是激活生产力,让别人活得比你好”——阿里巴巴董事局主席马云。 数据量从M的级别到G的级别到现在T的级、P的级别。数据量的变化,...

    文章 永不言弃01 2016-07-21 7496浏览量

  • 突破自我—一文看尽DataWorks全新升级以及在城市大脑的广泛应用

    在2018年云栖大会·深圳峰会的专有云专场中,来自阿里云的大数据专家张辉(士诚)为现场的听众带来了题为《DataWorks全新升级以及在城市大脑的广泛应用》的技术分享。在本次分享中,士诚重点阐述DataWorks概述、DataWorks核心能力升级和DataWorks在城市大脑中的应用三个方面。 ...

    文章 笑傲江湖lcx 2018-05-07 5940浏览量

  • Sqoop导入关系数据库到Hive

    Sqoop 是 apache 下用于 RDBMS 和 HDFS 互相导数据的工具。本文以 mysql 数据库为例,实现关系数据库导入到 hdfs 和 hive。 1. 安装 Sqoop 使用 rpm 安装即可。 yum install sqoop sqoop-metastore -y 安装完之...

    文章 skyme 2016-05-05 2033浏览量

  • Sqoop导入关系数据库到Hive

    Sqoop 是 apache 下用于 RDBMS 和 HDFS 互相导数据的工具。本文以 mysql 数据库为例,实现关系数据库导入到 hdfs 和 hive。 1. 安装 Sqoop 使用 rpm 安装即可。 yum install sqoop sqoop-metastore -y 安装完之...

    文章 雨客 2016-04-08 2183浏览量

  • 数禾云上数据湖最佳实践

    作者:程俊杰,当前在数禾科技大数据部担任大数据架构师的职位,负责阿里云平台产品的架构开发和维护,曾在1号店、拍拍贷、2345从事大数据平台架构方面的工作。目录1. 数禾科技 2. 云上自建CDH 3. 云上混合架构 4. 阿里云第一代数据湖 4.1. 什么是数据湖 4.2. 阿里云数据湖设计 4....

    文章 阿里云E-MapReduce团队 2021-02-07 200浏览量

  • 数禾云上数据湖最佳实践

    作者:程俊杰,当前在数禾科技大数据部担任大数据架构师的职位,负责阿里云平台产品的架构开发和维护,曾在1号店、拍拍贷、2345从事大数据平台架构方面的工作。 目录 1. 数禾科技2. 云上自建CDH 3. 云上混合架构4. 阿里云第一代数据湖4.1. 什么是数据湖4.2. 阿里云数据湖设计 4.2....

    文章 阿里云E-MapReduce团队 2021-01-18 2492浏览量

  • 数禾云上数据湖最佳实践

    本文所涉及最佳实践 EMR弹性低成本离线大数据分析最佳实践:https://bp.aliyun.com/detail/36 单账户下企业分账最佳实践 https://bp.aliyun.com/detail/168 RI和SCU全链路使用实践:https://bp.aliyun.com/deta...

    文章 最佳实践小文 2021-01-19 188浏览量

  • 深度 | 面向云原生数据湖的元数据管理技术解析

    背景数据湖当前在国内外是比较热的方案,MarketsandMarkets市场调研显示预计数据湖市场规模在2024年会从2019年的79亿美金增长到201亿美金。一些企业已经构建了自己的云原生数据湖方案,有效解决了业务痛点;还有很多企业在构建或者计划构建自己...

    文章 stromal 2021-03-30 1548浏览量

  • Transact-SQL编程规范<转

    1.  概述1.1. 基本原则 以大小写敏感编写SQL语句。 尽量使用Unicode 数据类型。 优先使用连接代替子查询或嵌套查询。 尽量使用参数化SQL查询代替语句拼接SQL查询。 禁止使用[拼音]+[英语]的方式来命名SQL对象或变量。 尽量使用存储过程代替SQL语句。1.2. 基本规范 建议...

    文章 科技小毛 2017-08-18 1150浏览量

  • Transact-SQL编程规范<转

    1.  概述1.1. 基本原则 以大小写敏感编写SQL语句。 尽量使用Unicode 数据类型。 优先使用连接代替子查询或嵌套查询。 尽量使用参数化SQL查询代替语句拼接SQL查询。 禁止使用[拼音]+[英语]的方式来命名SQL对象或变量。 尽量使用存储过程代替SQL语句。1.2. 基本规范 建议...

    文章 科技小毛 2017-09-21 894浏览量

  • Transact-SQL编程规范

    1.  概述1.1. 基本原则 以大小写敏感编写SQL语句。 尽量使用Unicode 数据类型。 优先使用连接代替子查询或嵌套查询。 尽量使用参数化SQL查询代替语句拼接SQL查询。 禁止使用[拼音]+[英语]的方式来命名SQL对象或变量。 尽量使用存储过程代替SQL语句。1.2. 基本规范 建议...

    文章 技术mix呢 2017-12-18 1134浏览量

  • 手把手教你NumPy来实现Word2vec

    本文为 AI 研习社编译的技术博客,原标题 : An implementation guide to Word2Vec using NumPy and Google Sheets 作者 | Derek Chia 翻译 | mui 校对 | 酱番梨       整理 | 菠萝妹...

    文章 雷锋网 2018-12-27 230浏览量

  • 开源项目 Kettle 介绍

    1 ETL基本概念    1.1 ETL的定义 ETL分别是“Extract”、“ Transform” 、“Load”三个单词的首字母缩写也就是“抽取”、“转换”、“装载” ,但我们日常往往简称其为数据抽取。ETL是BI/DW(商务智能/数据仓库)的 核心和灵魂,按照统一的规则集成并提高数据的价...

    文章 航空母舰 2016-05-12 2915浏览量

  • 都在说实时数据架构,你了解多少?

    作者:刘大龙@唯品会 随着互联网的发展进入下半场,数据的时效性对企业的精细化运营越来越重要, 商场如战场,在每天产生的海量数据中,如何能实时有效的挖掘出有价值的信息, 对企业的决策运营策略调整有很大帮助。此外,随着 5G 技术的成熟、广泛应用, 对于工业互联网、物联网等数据时效性要求非常高的行业,...

    文章 阿里云实时计算Flink 2020-04-28 1447浏览量

  • Linux开发工具的使用

      1.   Linux开发工具的使用 Vim编译的使用 Gdb调试工具的使用 Makefile的编写 linux跟踪调试 SSH的使用 subversion的使用     1.   Linux开发工具的使用 Vim编译的使用 Ibm的Vim 实用技术 http://www.ibm.co...

    文章 double2li 2015-06-03 1006浏览量

  • Spring 3整合Quartz 2实现手动设置定时任务:新增,修改,删除,暂停和恢复----每一个你不满意的当下,都有一个你不曾努力的过去

      摘要:在项目的管理功能中,对定时任务的管理有时会很常见。但一般定时任务配置都在xml中完成,包括cronExpression表达式,十分的方便。但是如果我的任务信息是保存在数据库的,想要动态的初始化,还有就是任务较多的时候不是得有一大堆的xml配置?或者说我要修改一下trigger的表达式...

    文章 developerguy 2017-06-23 1146浏览量

  • Linux 知识地图

    1. 概述:   极客时间发表了 linux 知识体系的知识图谱,在参照其地图整理学习 linux 过程中,对原内容做了整理修改,并增加了容器篇等内容,图谱不少内容抄自原地图,分享一下: 2. 基础篇 2.1 Linux常见发行版本 Red Hat Ubuntu CentOS Debian Fe...

    文章 joezxh 2019-11-01 2611浏览量

  • 使用DynamoShake从dynamodb迁移到mongodb

    去年和今年年初,我们开源了MongoShake和RedisShake分别用于MongoDB和Redis的迁移、同步、备份等多种需求。最近,我们的shake系列又进一步壮大,我们推出了一款dynamodb迁移的工具:dynamo-shake(又名nimo-shake)。目前支持从dynamodb迁移...

    文章 烛昭 2019-09-05 1529浏览量

  • 带你读《ONAP技术详解与应用实践》之三:ONAP架构设计

    点击查看第一章点击查看第二章 第3章 ONAP架构设计本章首先介绍ONAP架构在设计之初的目标与理念,包括要解决什么问题、需要具备哪些核心能力、相应的架构设计理念和设计原则是什么等。对于模型驱动等重要设计原则,还辅以具体示例,包括ONAP的实现流程与模型定义示例。理解这些设计理念与原则后,再一步步...

    文章 温柔的养猫人 2019-11-07 987浏览量

1 2 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT