• 关于

    gp数据库系统时间

    的搜索结果
  • 《Greenplum5.0 最佳实践》 系统参数 (二)

    《Greenplum 数据库最佳实践 》 系统参数配置 系统配置 本章主要描述在Greenplum部署之前,系统参数的配置 文件系统 (File System) 推荐使用XFS作为Greenplum默认文件系统, 目前redhat,Centos 7.0 都开始使用XFS作为默认文件系统如果系统不支...

    文章 whatcat 2017-10-21 2593浏览量

  • 《Greenplum5.0 最佳实践》 内存与资源队列 (四)

    避免内存错误和GPDB资源问题 内存管理对GPDB集群具有重要的性能影响。大多数环境推荐使用默认设置。不要去改变默认设置,除非你真的理解了自己系统的需求。 解决内存溢出错误 内存不足错误绘制出遇到内存不足错误的GPDB的段数据库,节点,进程信息例如: Out of memeory ( seg27...

    文章 whatcat 2017-10-27 2330浏览量

  • Greenplum:你不可不知的实施与维护最佳实践

    近两年,国内的大数据市场逐渐成熟,有真实的大数据处理需求的企业数量呈现爆炸性的增长,从传统的数据库产品往MPP数据库转型的增长势头十分迅猛。Greenplum作为MPP产品的领头羊,具有较低的学习成本,得到了国内大量客户的青睐。 目录 GP实施之道 1、前期规划的重要性 2、数据模型设计的重...

    文章 努力酱 2017-05-02 1398浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 玩转Greenplum集群主备机替换

      1驱动因素  Greenplum集群内部segment host因硬件(主板、硬盘、电源等)故障或是其他原因导致计算节点主机不可用情况下,以备用主机替代原segment host,快速恢复GP集群至正常状态,避免集群异常期间镜像节点主机因承载压力增加而产生新问题。   2具体方案与实施流...

    文章 努力酱 2017-05-02 1718浏览量

  • 阿里云HybridDB for PostgreSQL内存与负载管理(resource queue)实践

    标签 PostgreSQL , Greenplum , 阿里云HybridDB for PostgreSQL , 内存管理 , OOM , 操作系统内核参数 , 资源队列 , 数据库内存保护参数 背景 Greenplum是一个重计算和重资源的MPP数据库,可谓有多少资源就能消耗多少资源,带来的...

    文章 德哥 2017-08-26 2372浏览量

  • PostgreSQL、Greenplum 日常监控 和 维护任务

    标签 PostgreSQL , Greenplum , Recommended Monitoring and Maintenance Tasks , 监控 , 维护 背景 Greenplum的日常监控点、评判标准,日常维护任务。 展示图层 由于一台主机可能跑多个实例,建议分层展示。 另外,即...

    文章 德哥 2017-09-17 6818浏览量

  • Greenplum在企业生产中的最佳实践(下)

    前篇Pivotal大中华区数据资深架构师任振中向我们介绍了Greenplum在搭建过程中软硬件的选择及部署建议,给出了多种影响企业性能的情景,结合具体的案例探讨并给出了具体的解决方式。 今天,我们将分享国内客户在使用GP时遇到的问题及相关建议。同时,架构师就大家经常遇到的技术问题进行了细致的说明,...

    文章 闻术苑 2017-08-02 2969浏览量

  • 收藏!一张图帮你快速建立大数据知识体系

    前言 最早提出“大数据”时代到来的是全球知名咨询公司麦肯锡,麦肯锡称:“数据,已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”数据,让一切有迹可循,让一切有源可溯。我们每天都在产生数据,创造大数据和使用大数据...

    文章 茶什i 2020-06-11 9477浏览量

  • MPP分布式数据库性能评估方法 - 阿里云HybridDB for PostgreSQL最佳实践

    背景 通常评估一个数据库的性能,可以选择工业标准测试,或者根据业务模型,建模进行测试。 例如PostgreSQL pgbench支持的tpc-b测试,以及自定义模型测试。 benchmarksql支持的tpc-c测试。 gp_tpch支持的tpc-h测试等等。 参考文档如下 《TPC-H测试 - ...

    文章 德哥 2017-07-29 5224浏览量

  • Tpc-h测试greenplum性能

    Tpc-h测试greenplum性能 集群环境 主机名 ip 内存 磁盘 Node1 192.168.71.11 2G 80G Node2 192.168.71.12 1.5G 80G No...

    文章 仔仔930628 2018-07-06 3340浏览量

  • 大规模数据存储集群数据存放的设计,分布式shardid的生成 - 如何指定范围随机数, 分组随机数

    标签 PostgreSQL , 分组ID生成 , 生成哈希映射 , sharding , shard 背景 在一些分布式数据库系统中,通常会有多个数据节点,用户的数据分布策略通常有一致性哈希、按列哈希、随机分布等。 除了随机分布,其他的分布方法数据和数据节点是一对一的关系。 上当节点数变得特别...

    文章 德哥 2017-07-13 2584浏览量

  • [转载]聊聊Greenplum的那些事

    原文   http://dbaplus.cn/news-21-341-1.html 聊聊Greenplum的那些事 李巍 2016-04-01 14:15:00 1024   开卷有益——作者的话    有时候真的感叹人生岁月匆匆,特别是当一个IT人沉浸于某个技术领域十来年后,蓦然回首,...

    文章 德哥 2016-07-11 6937浏览量

  • Greenplum在企业生产中的最佳实践(上)

    本文章转自Pivotal公众号,在此感谢任振中和Pivotal公司的分享,希望对更多的朋友有帮助~ 一、GP搭建过程当中硬件的选择和部署建议 GP是一个分布式X86架构,是把多台X86服务器组合成一起做一个大的集群。相比传统单机版的Oracle和MySQL,它的特点是使用比较多的服务器做海量数...

    文章 闻术苑 2017-07-29 4609浏览量

  • 《Greenplum5.0 最佳实践 》SQL 转换

    改变 SQL 查询 Greenplum 数据库是基于代价的查询优化,查询优化器会选择代价最小的作为执行计划。像其他的 RDBMS 优化器一样, Greenplum的查询优化器也会考虑如下因素,例如做连接操作涉及的记录数量,索引是否可用,访问数据的字段基数。查询优化器还要考虑数据的具体位置,尽可能的...

    文章 whatcat 2017-12-06 2263浏览量

  • 热议话题回顾:数据上云和迁移中可能会遇到哪些问题-曾文旌

    数据上云和迁移中可能会遇到哪些问题 发布者:曾文旌-阿里数据库专家,关注PostgreSQL相关技术 大家在使用云上数据产品时,免不了要把线下数据迁移上云,或在云上各数据产品之间移动数据。在这个过程中,可能会遇到各种问题,比如在迁移上T的数据或在交易库与分析库之间迁移数据时,往往会无从下手。 我...

    文章 聚小编 2016-11-21 2668浏览量

  • ACL2016最佳论文:用于口语对话系统策略优化的在线自动奖励学习

    用于口语对话系统策略优化的在线自动奖励学习 联合编译:陈圳,章敏,高斐 摘要 计算正确奖励函数的能力对于通过加强学习优化对话系统十分的关键。在现实世界的应用中,使用明确的用户反馈作为奖励信号往往是不可靠的,并且收集反馈花费也十分地高。但这一问题可以有所减轻,如果能提前知道用户的意图或是数据能预先训...

    文章 青衫无名 2017-08-01 1041浏览量

  • 数据库SQL开发的一些要点

    前段时间做一个项目,其中涉及到报表部分编写了大量复杂的SQL,比如其中的一个存储过程就有700多行。项目上线过后,进入维护阶段,发现大量的SQL很难维护。于是总结点经验教训: 设计 一、数据库命名遵循一些通用规范。 数据库命名规范是个基本的命名标准,每个团队都有自己的命名规范,我们做项目中以全大写...

    文章 深蓝居 2016-05-09 2392浏览量

  • Greenplum 6.1 安装部署

    一系统环境及硬件1.系统版本 centos 7.7 2.硬件 cpu :>= 8核16线程 根据实际并发量来考量,比如 8 并发,每个seg里面有2个数据节点,那么cpu应该是 8*2*2=20核32线程,如果都是小查询,核心数 可以适当降低 内存 :>= 1...

    文章 romantic_rome 2020-06-25 404浏览量

  • 数据库SQL开发的一些要点

    前段时间做一个项目,其中涉及到报表部分编写了大量复杂的SQL,比如其中的一个存储过程就有700多行。项目上线过后,进入维护阶段,发现大量的SQL很难维护。于是总结点经验教训: 设计 一、数据库命名遵循一些通用规范。 数据库命名规范是个基本的命名标准,每个团队都有自己的命名规范,我们做项目中以全大写...

    文章 浣熊干面包 2015-01-24 631浏览量

  • 【PostgreSQL 创新营】第六课:PostgreSQL复制原理及高可用集群 答疑汇总

    Q1:刘海清,如何在从库备份,选择什么软件或者命令 1)生产建议使用从库进行备份。数据备份的方式有:pg_dump、pg_dumpall、pg_rman、barman、pg_basebackup等 2)日志备份可以通过:从库设置archive_mode = always方式实现日志记录。linux...

    文章 stromal 2021-01-27 135浏览量

  • 数据库案例集锦 - 开发者的《如来神掌》

    标签 PostgreSQL , PG DBA cookbook , PG Oracle兼容性 , PG 架构师 cookbook , PG 开发者 cookbook , PG 应用案例 背景 「剑魔独孤求败,纵横江湖三十馀载,杀尽仇寇,败尽英雄,天下更无抗手,无可柰何,惟隐居深谷,以...

    文章 德哥 2017-06-09 13851浏览量

  • 阿里云HybridDB for PG 空间紧张的解法 - 冷热分离、空间锁定、分区、压缩

    标签 PostgreSQL , Greenplum , HybridDB for PG 背景 数据库空间不够用怎么办? HDB PG是分布式数据库,空间不够用,扩容呗。但是用户如果不想扩容呢?还有哪些处理方法? 例子 1 查看当前已使用空间 查看数据库空间使用,表的空间使用,索引的空间使用...

    文章 德哥 2018-09-15 2170浏览量

  • 详解开源大数据引擎Greenplum的架构和技术特点

    Greenplum的MPP架构 Greenplum(以下简称GPDB)是一款开源数据仓库。基于开源的PostgreSQL改造,主要用来处理大规模数据分析任务,相比Hadoop,Greenplum更适合做大数据的存储、计算和分析引擎。 GPDB是典型的Master/Slave架构,在Greenplu...

    文章 boxti 2017-07-03 1938浏览量

  • PgSQL · 会议见闻 · PgConf.Russia 2016 大会总结

    大会概况 2月3号到5号,受邀去莫斯科参加了PgConf.Russia大会,这里介绍一下大会的一些见闻。 此次大会的新闻报道见此链接。此次会议有多达600多人参加,聚集了俄罗斯地区的PG相关厂商、DBA和开发者。大会邀请了20多位来自俄罗斯之外的国际演讲者,包括PG核心开发团队的大佬Bruce M...

    文章 db匠 2016-05-23 1325浏览量

  • AnalyticDB for PostgreSQL使用资源队列进行负载管理与隔离

    背景 对于一个数据库实例来说,CPU和内存资源是有限的,而这些资源又极大地影响着数据库的查询性能。因此,当数据库负载高到一定程度的时,各个查询之间可能会相互竞争CPU和内存资源,造成整体的查询性能低下。这对于那些延迟敏感的业务来说,是不可忍受的情况。在AnalyticDB for PostgreS...

    文章 ChengWen 2019-07-17 5527浏览量

  • Greenplum 资源隔离的原理与源码分析

    背景 Greenplum是一个MPP的数据仓库系统,最大的优点是水平扩展,并且一个QUERY就能将硬件资源的能力发挥到极致。 但这也是被一些用户诟病的一点,因为一个的QUERY就可能占光所有的硬件资源,所以并发一多的话,query相互之间的资源争抢就比较严重。 Greenplum资源隔离的手段...

    文章 德哥 2016-07-18 8089浏览量

  • GPDB · 特性分析 · Segment事务一致性与异常处理

    事务一致性 这篇月报Primary和Mirror同步机制讲了Primary和Mirror之间各种数据和文件的同步过程。这些数据和文件的同步,看似彼此独立。那么如何保证某个时间点Mirror的所有数据是一致的,即任何时间点发生HA切换,Mirror都能达到一致性状态并对外提供服务?正如我们前面提到的...

    文章 db匠 2016-05-23 1385浏览量

  • 带你读《Python数据分析与数据化运营(第2版)》之一:Python和数据化运营

    点击查看第二章点击查看第三章Python数据分析与数据化运营(第2版) 宋天龙 著 第1章 Python和数据化运营 数据化运营是提高利润、降低成本、优化运营效率、最大化企业财务回报的必要课题。Python作为数据科学界的关键工具之一,几乎可以应用于所有数据化运营分析和实践的场景。本章将首先介绍...

    文章 温柔的养猫人 2019-11-08 1394浏览量

  • GPDB · 特性分析 · Segment事务一致性与异常处理

    事务一致性 这篇月报Primary和Mirror同步机制讲了Primary和Mirror之间各种数据和文件的同步过程。这些数据和文件的同步,看似彼此独立。那么如何保证某个时间点Mirror的所有数据是一致的,即任何时间点发生HA切换,Mirror都能达到一致性状态并对外提供服务?正如我们前面提到的...

    文章 db匠 2016-04-21 1557浏览量

  • greenplum 介绍

    一般地,greenplum的每个segment节点对应一个网口NIC,一个物理CPU,一个磁盘控制器,以便同机器的多个segment之间互不影响。 greenplum的备份,提供了gp_dump做并行备份,master和segment节点同时执行备份操作,另外gp_crondump会定期执行备份操...

    文章 yangyi_dba 2010-07-02 1397浏览量

1 2 3 4 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT