• 关于

    数据库 计算crc值

    的搜索结果
  • MySQL非主从环境下数据一致性校验及修复程序

    1. 简介 项目地址:https://github.com/seanlook/px-table-checksum 主从环境下数据一致性校验经常会用 pt-table-checksum 工具,它的原理及实施过程之前写过一篇文章:生产环境使用 pt-table-checksum 检查MySQL数据一致...

    文章 seanlook 2016-11-21 3641浏览量

  • redis笔记

    redis笔记 什么是redis 意大利的老司机内部用mysql不能满足高并发的请求,为了解决问题,该司机申请的内部项目,诞生了redis,用C语言开发的高性能的键值对缓存数据服务~ 支持的数据结构 string Set Hash sortSet List redis目的 数据据库缓存集群,保...

    文章 史努彪 2017-01-03 1515浏览量

  • memcached的分布式算法-Consistent Hashing

    前言: 我们知道以往资料要放到 M 台服务器上,最简单的方法就是取余数 (hash_value % M) 然后放到对应的服务器上,那就是当添加或移除服务器时,缓存重组的代价相当巨大。 添加服务器后,余数就会产生巨变,这样就无法获取与保存时相同的服务器, 从而影响缓存的命中率。 下面这篇文章写的非常...

    文章 杨粼波 2017-10-09 868浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 生产环境使用 pt-table-checksum 检查MySQL数据一致性

    公司数据中心从托管机房迁移到阿里云,需要对mysql迁移(Replication)后的数据一致性进行校验,但又不能对生产环境使用造成影响,pt-table-checksum 成为了绝佳也是唯一的检查工具。 pt-table-checksum 是 Percona-Toolkit 的组件之一,用于检测...

    文章 seanlook 2016-05-18 3103浏览量

  • 艾伟:memcached全面剖析–4. memcached的分布式算法

    本系列文章导航 memcached完全剖析–1. memcached的基础 memcached全面剖析–2.理解memcached的内存存储 memcached全面剖析–3.memcached的删除机制和发展方向 memcached全面剖析–4. memcached的分布式算法 memcached...

    文章 狼人2007 1970-01-01 750浏览量

  • Redis Cluster原理初步

    Redis Cluster原理初步.pdf 目录 目录 1 1. 前言 1 2. 槽(slots) 1 3. 路由配置(node.conf) 1 4. 总slots数(cluster.h:16384) 2 5. key的路由 2 6. 将key转成整数...

    文章 一见蓝天 2016-05-16 859浏览量

  • ubuntu 中安装memcache,并给出一个简单的实例·

    Memcache分为两部分,Memcache服务端和客户端。Memcache服务端是作为服务来运行的,所有数据缓存的建立,存储,删除实际上都是在这里完成的。客户端,在这里我们指的是PHP的可以调用的扩展。1)安装Memcache服务端sudo apt-get install memcached安装...

    文章 wensongyu 2015-07-14 823浏览量

  • 舞动的桥 阿里云首个百万IOPS云盘的背后

    1940年11月7日,竣工才4个月的塔科马海峡大桥在微风中大幅度舞动,桥上的汽车急速滑动,很快就戏剧性的垮塌。这件事故给建筑工程行业造成极大的震惊,很违反直觉,很低的风速居然会吹垮一座钢铁建造的大桥,在此之前所有的桥梁专家都没有意识到这个问题,事实上若干年后桥梁结构学与空气动力学得到极大发展,人类...

    文章 阿里云头条 2018-02-01 3663浏览量

  • 带你读《计算机网络问题与解决方案: 一种构建弹性现代网络的创新方法》之二:数据传输中的问题与解决方案

    点击查看第一章点击查看第三章 第2章 Computer Networking Problems and Solutions: An Innovative Approach to Building Resilient, Modern Networks 数据传输中的问题与解决方案 学习目标阅读完本章,...

    文章 被纵养的懒猫 2019-11-07 399浏览量

  • No.1 - Apache IoTDB 随笔 - Time Series DBMS 综述(文末彩蛋)

    “这是一篇无法一口气读完的、文字过万[正文字数14390]的长文,这是一个无法中途不上厕所就看完的、关于时序数据库的视频[时长111分钟]分享...” 观看视频 大家好,很开心能够和大家一起交流时序数据库的相关的内容:) 【文末有彩蛋】 首先还是简单自我介绍一下,我是 孙金城,花名 金竹。我是20...

    文章 6ypzuriaojqge 2020-12-17 430浏览量

  • 基于redis(key分段,避免一个key过大) 和db实现的 布隆过滤器(解决hash碰撞问题)

    1.计算出key的哈希值。 根据hash值和固定段大小取模计算出偏移位offset。 根据固定前置+hash值/固定段大小计算出所处段的bitKey。 根据bitKey和offset判断是否存在。 如果存在然后调用containsFromDb判断是否存在。 将redis setbit进行分段可以...

    文章 sixliu666 2017-08-11 5058浏览量

  • Redis集群的一点一滴

    本文并非介绍如何搭建一个集群,也不是介绍集群如何使用,重点是分享一些大家在使用集群过程中经常遇到的,经常提出来的问题: 问题一 Exception: Could not get resource from pool    使用jedis客户端,无论缓存是以集群模式还是单点模式部署,凡是遇到这种问...

    文章 51open 2016-07-27 2426浏览量

  • 当数据库遇见FPGA:X-DB异构计算如何实现百万级TPS?

    前言 X-Engine 是集团数据库事业部研发的新一代存储引擎,是新一代分布式数据库X-DB的根基。为了达到10倍MySQL性能,1/10存储成本的目标,X-DB从一开始就使用了软硬件结合的设计思路, 以充分发挥当前软件和硬件领域最前沿的技术优势。而引入FPGA加速是我们在定制计算领域做出的第一个...

    文章 技术小能手 2018-04-09 17347浏览量

  • MySQL离线分析工具innochecksum

    介绍 innochecksum打印InnoDB文件的校验和。此工具读取InnoDB表空间文件,计算每个页面的校验和,将计算的校验和与存储的校验和进行比较,并报告不匹配,这表明页面已损坏。它最初是为了在停电后加快验证表空间文件的完整性而开发的,但也可以在文件复制后使用。由于校验和不匹配导致InnoD...

    文章 powdba 2019-04-26 1433浏览量

  • 【大数据干货】数据进入阿里云数加-分析型数据库AnalyticDB(原ADS)的N种方法

    免费开通大数据服务:https://www.aliyun.com/product/odps 数据进入AnalyticDB(原ADS)的N种方法   分析型数据库(AnalyticDB)是阿里巴巴自主研发的海量数据实时高并发在线分析(Realtime OLAP)云计算服务,用户可以在毫秒级针对千亿级...

    文章 隐林 2016-12-30 7636浏览量

  • NvmStore:第二届数据库大赛比赛记录

    前段时间因兴趣使然,参加了第二届阿里数据库大赛,并成功冲入决赛。本届数据库大赛的题目是在Intel提供的持久化内存(Persistent Memory)上实现一套KV Store。持久化内存一直是数据库研究的一个新兴研究方向,十分高兴这次有机会在真正的持久化内存上实现系统并测试。这里是我们参赛作品...

    文章 chasezh 2020-12-19 40浏览量

  • 数据进入阿里云数加-分析型数据库AnalyticDB(原ADS)的N种方法

    从  https://yq.aliyun.com/articles/68208?spm=0.0.0.0.HEVojb&do=login  转载。 数据进入AnalyticDB(原ADS)的N种方法   分析型数据库(AnalyticDB)是阿里巴巴自主研发的海量数据实时高并发在线分析(R...

    文章 卡特 2016-12-30 10806浏览量

  • 匠心之作 | 厉害了!阿里云自研存储引擎X-Engine又发顶会啦

    1、What is X-Engine X-Engine是阿里云自研OLTP数据库存储引擎,已经广泛应用于包括钉钉、核心交易、阿里妈妈在内的阿里巴巴核心业务,在提供高性能的同时大幅降低了存储开销。 经过阿里双十一等高压场景的考验与打磨,RDS MySQL(X-Engine)版即将在阿里云上向外部客户...

    文章 Roin123 2019-12-27 864浏览量

  • 《Hadoop实战第2版》——1.6节Hadoop数据管理

    1.6 Hadoop数据管理前面重点介绍了Hadoop及其体系结构与计算模型MapReduce,现在开始介绍Hadoop的数据管理,主要包括Hadoop的分布式文件系统HDFS、分布式数据库HBase和数据仓库工具Hive。 1.6.1 HDFS的数据管理HDFS是分布式计算的存储基石,Hadoo...

    文章 华章计算机 2017-08-01 1246浏览量

  • Binlog详解

    Mysql binlog是二进制日志文件,用于记录mysql的数据更新或者潜在更新(比如DELETE语句执行删除而实际并没有符合条件的数据),在mysql主从复制中就是依靠的binlog。可以通过语句“show binlog events in 'binlogfile'”来查看binlog的具体事...

    文章 彦帧要努力 2018-07-14 1199浏览量

  • 分布式数据缓存中的一致性哈希算法

    一致性哈希算法在分布式缓存领域的 MemCached,负载均衡领域的 Nginx 以及各类 RPC 框架中都有广泛的应用,它主要是为了解决传统哈希函数添加哈希表槽位数后要将关键字重新映射的问题。 本文会介绍一致性哈希算法的原理及其实现,并给出其不同哈希函数实现的性能数据对比,探讨Redis 集群的...

    文章 程序员历小冰 2019-05-13 1152浏览量

  • 面向云数据库,超低延迟文件系统PolarFS诞生了

    随着国内首款Cloud Native自研数据库POLARDB精彩亮相ICDE 2018的同时,作为其核心支撑和使能平台的PolarFS文件系统的相关论文"PolarFS: An Ultra-low Latency and Failure Resilient Distributed File Sys...

    文章 桐碧2018 2018-09-03 2947浏览量

  • 面向云数据库,超低延迟文件系统PolarFS诞生了

    背景 如同Oracle存在与之匹配的OCFS2,POLARDB作为存储与计算分离结构的一款数据库,PolarFS承担着发挥POLARDB特性至关重要的角色。PolarFS是一款具有超低延迟和高可用能力的分布式文件系统,其采用了轻量的用户空间网络和I/O栈构建,而弃用了对应的内核栈,目的是充分发挥R...

    文章 技术小能手 2018-05-28 4065浏览量

  • 基于Token的身份验证——JWT

    原文:基于Token的身份验证——JWT 初次了解JWT,很基础,高手勿喷。 基于Token的身份验证用来替代传统的cookie+session身份验证方法中的session。 JWT是啥? JWT就是一个字符串,经过加密处理与校验处理的字符串,形式为: A.B.C A由JWT头部信息head...

    文章 杰克.陈 2017-12-11 1114浏览量

  • 基于Token的身份验证——JWT

    初次了解JWT,很基础,高手勿喷。 基于Token的身份验证用来替代传统的cookie+session身份验证方法中的session。 JWT是啥? JWT就是一个字符串,经过加密处理与校验处理的字符串,形式为: A.B.C A由JWT头部信息header加密得到 B由JWT用到的身份验证信息...

    文章 lovedan 2016-08-20 1031浏览量

  • Redis Cluster 的数据分片机制

    上一篇《分布式数据缓存中的一致性哈希算法》文章中讲述了一致性哈希算法的基本原理和实现,今天就以 Redis Cluster 为例,详细讲解一下分布式数据缓存中的数据分片,上线下线时数据迁移以及请求重定向等操作。 Redis 集群简介 Redis Cluster 是 Redis 的分布式解决方案,...

    文章 程序员历小冰 2019-05-25 1402浏览量

  • No.1-时序数据库随笔 - Time Series DBMS 综述

    大家好,很开心能够和大家一起交流时序数据库的相关的内容首先还是简单自我介绍一下,我是 孙金城,花名 金竹。我是2011年加入阿里,在2016年之前一直做公司内部的研发工作,包括阿里郎,Blink等平台。从2016年...

    文章 孙金城 2021-03-09 540浏览量

  • MySQL优化技巧

    目录 MySQL的特点数据类型优化整型类型小数类型字符串类型时间类型主键类型的选择特殊类型的数据索引优化一个使用Hash值创建索引的技巧前缀索引多列索引聚簇索引覆盖索引重复索引和冗余索引不使用的索引索引使用总结查询优化查询慢的原因重构查询的方式杂七杂八参考书本文的内容是总结一些MySQL的常见使用...

    文章 优惠券发放 2019-04-03 687浏览量

  • 使用Redis搭建持久化K-V存储

    最近在项目中需要在多机之间共享一些集合,Hash等有类型的数据结构,如果基于Mysql来存储的话需要预先定义一系列表结构并维护表结构和数据结构的一致性,后续还需要根据时间对数据库做旧数据清理工作,所以开始调研一些能满足下列需求的存储引擎。 具有高可用,持久化的特性。 数据可以设置失效时间,方便自动...

    文章 泓远 2016-10-28 4109浏览量

  • C/C++中榨干硬件性能的N种并行姿势初探

    1. 前言 关于并行计算介绍参见https://computing.llnl.gov/tutorials/parallel_comp/下面主要就部分单进程中常见的几种并行优化技术和相应的框架做一些简单的整理和分析对比,并且主要偏重于端,不涉及多节点多进程! 2. 并行计算结构分类 目前常见的是分类...

    文章 许凡 2016-12-30 3736浏览量

1 2 3 4 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT