• 内核的忙碌生活

    有很多事情不一定立刻要做,比如说有的任务要求在内存里分配个地方,我的办法是让他觉得“貌似”已经分配完了就可以了,至于真正开辟内存空间,还是等他用到这块空间的时候再说吧,一个小小的缺页异常处理可以搞定...
    文章 2017-10-25 839浏览量
  • [干货]手把手带你了解实时看板(50PPT)

    3)真正的实时处理,使用复杂事件处理和连续的流数据挖掘。从方法进化到分析法 传统:从联机事务处理系统,企业资源计划系统等里提取数据,利用ETL工具(如SSIS)来转换然后加载到企业的数据仓库。现在:从多种多样...
    文章 2017-05-02 1695浏览量
  • 《Cacti实战》——1.3 Cacti的架构与原理

    盗圣、八大派左护法、同福客栈大跑堂白展堂——Poller程序白展堂跟掌柜的关系最好,俩人配合最紧密,掌柜要他干啥,他绝没二话,不过老白最核心的任务只有一个——跑堂,即把客人都迎进来,听听客人要吃点啥、喝点啥...
    文章 2017-07-03 2285浏览量
  • 如何从 0 到 1 设计、构建移动分析架构

    根据数据处理场景要求不同,可以划分为离线、实时处理、即席查询等等。在这个部分,可能也是要分两个部分:基础组件和业务流程。基础组件有较大共性,而业务流程因为不同的业务团队而差异较大,从而有不同的设计和...
    文章 2019-05-09 2935浏览量
  • 5W1H(六何分析法)全景洞察大数据

    在线实时数据清洗,一般是用sparkstreaming或者strom/jstorm直接处理实时流过来的数据,清洗完成,因为实时化,所以一般会接到在线的数据存储上,比如rds、mogodb、redis、hbase等。数据存储服务 基本来讲,hadoop...
    文章 2018-11-05 2036浏览量
  • 【云周刊】第124期:实时计算来临!阿里新一代实时...

    因此,阿里巴巴需要研发世界一流的流式计算引擎,实时处理海量数据,提供在线统计、学习和预测能力,本期头条就为大家分享最新一代阿里巴巴实时计算引擎Blink,点击查看 【云栖大会】现场没去成、直播不方便看?没事...
    文章 2017-05-31 6602浏览量
  • 夯实Java基础系列10:深入理解Java中的异常体系

    而如果使用异常,那就不必在方法调用处进行检查,因为异常机制将保证能够捕获这个错误,并且,只需在一个地方处理错误,即所谓的异常处理程序中。这种方式不仅节约代码,而且把“概述在正常执行过程中做什么事”的...
    文章 2019-09-28 1764浏览量
  • 5W1H(六何分析法)全景洞察大数据

    在线实时数据清洗,一般是用sparkstreaming或者strom/jstorm直接处理实时流过来的数据,清洗完成,因为实时化,所以一般会接到在线的数据存储上,比如rds、mogodb、redis、hbase等。数据存储服务基本来讲,hadoop...
    文章 2016-06-30 9896浏览量
  • AI 和机器学习如何改善用户体验?

    ML 和 AI 现在被被广泛用作数据收集的工具:处理来自传感器、应用程序和其他来源的数据流。收集客户数据可能具有侵入性,并且在道德上存在问题,所以当你建立对客户的理解时,请确保他们同意并且不会损害他们的隐私...
    文章 2020-03-17 277浏览量
  • 阿里内部分享:大数据业务平台两年发展历程

    这个时候需要有个Storm集群,storm集群干啥事情呢?就一件事情,分析数据,这个集群来接收刚才提到的JMS系统发送出来的消息,然后按照指定的规则进行逻辑合并等计算,把计算的结果保存在数据库中,这样的话,流动的...
    文章 2017-04-03 1907浏览量
  • 从JAVA多线程理解到集群分布式和网络设计的浅析

    总的来说,其实几乎每时每刻写的代码都是多线程的,只是很多事情容器帮助我们完成了,即使编写本地的AWT、SWING,也在很多控制处理中式异步的,只是这种异步相对较少,更多的异步可以程序去编写,自定义的多线程...
    文章 2011-04-29 1904浏览量
  • 电商平台实战经验:电商中的Hadoop生态系统应用

    实际上如果大家对高可用、高并发、高性能的系统设计有兴趣,从这方面有很多部分可以谈:从硬件到软件、从程序到SQL、从分布式缓存到CDN,从中间件优化到JVM调优,直到最后我们发现,高可用、高并发、高性能依靠的不是...
    文章 2016-07-28 3854浏览量
  • 大厂也在用的 6种 数据脱敏方案,严防泄露数据的...

    一脸傲娇的转过头,面带微笑稍显谄媚:老婆你听我说,我真的也没,你要相信我!啪~ 过后揉揉脸细想想,肯定是哪个不道德的网站,又把我的个人信息给卖了,现在的人上网都处于一个裸奔的状态,个人信息已不再属于...
    文章 2020-12-09 2710浏览量
  • C语言为何不会过时?你需要掌握多少种语言?

    虽然Java运行时自动执行内存管理,但一些较新的应用程序可以解决这个问题。例如,Apache Spark部分地通过使用绕过JVM的自定义内存管理代码来优化内存中处理。C vs.C#和.Net 在推出近二十年后,C#和.Net 框架仍然是...
    文章 2020-05-20 648浏览量
  • 技术流乱入拜年帖-小鸡吉吉和小象(PostgreSQL)Pi吉的...

    吉吉是个环保主义者,它在很多地方部署了很多传感器,可以实时的获取雾霾指数、河流、湖泊的水质、天气的变化、土壤的指标。它把这些实时的数据交给了大象哥哥。吉吉想知道这些数据是不是正常的,不正常的时候吉吉要...
    文章 2017-01-20 4679浏览量
  • 程序的健壮性——就看Redis

    其实AOF也不一定是完全实时的备份操作命令,在redis.conf 我们可以配置选择 AOF的执行方式,主要有三种:always、everysec和no AOF是追加更改命令文件,那么大家想下一直追加追加,就是会导致文件过大,那么Redis是...
    文章 2020-09-16 853浏览量
  • PgSQL·乱入拜年·小鸡吉吉和小象Pi吉(PostgreSQL)的...

    吉吉是个环保主义者,它在很多地方部署了很多传感器,可以实时的获取雾霾指数、河流、湖泊的水质、天气的变化、土壤的指标。它把这些实时的数据交给了大象哥哥。吉吉想知道这些数据是不是正常的,不正常的时候吉吉要...
    文章 2017-03-08 2727浏览量
  • 一文看懂 kafka 机制

    如果这个consumer group里面consumer的数量大于topic里面partition的数量,多出的consumer thread就会闲着也不,因为一个partition不可能被两个consumer thread去处理。如果producer的流量增大,当前的topic的...
    文章 2018-07-09 7665浏览量
  • 参加2015年TOP100会议的零散笔记

    对比了同时9点开讲的5个报告,我选中了美国微软胡鲁辉的《大数据实时处理系统实现及其设计》,油田的勘探大数据一直不知道如何落地,我想从中找点灵感,另外主要是想看看油田的录井实时数据有没有什么解决方案。...
    文章 2017-11-20 1366浏览量
  • 【干货】徐葳:如何用大数据和人工智能让云更聪明?

    分析出了日志中的结构信息就好办了,可以用各种机器学习方法来处理这些文本。处理大量的文本不是问题,我们是做大数据的,每天处理几十亿行的文本日志毫无压力,通过处理这些海量数据,能分析出机器里到底哪里出了...
    文章 2017-04-03 926浏览量
  • 5种JVM垃圾收集器特点和8种JVM内存溢出原因

    就比如妈妈在家打扫卫生的时候,肯定不会边打扫边让儿子往地上乱扔纸屑,否则一边制造垃圾,一遍清理垃圾,这活时候也不完。如下是 Serial 收集器和 Serial Old 收集器结合进行垃圾收集的示意图,当用户线程都...
    文章 2019-08-16 2624浏览量
  • 清华徐葳:如何用大数据和人工智能让云更聪明?

    分析出了日志中的结构信息就好办了,可以用各种机器学习方法来处理这些文本。处理大量的文本不是问题,我们是做大数据的,每天处理几十亿行的文本日志毫无压力,通过处理这些海量数据,能分析出机器里到底哪里出了...
    文章 2017-05-02 1432浏览量
  • 互联网架构的三板斧

    数据更新热点,更新问题除了前面介绍的热点隔离和排队处理之外,还有些场景,如对商品的lastmodifytime字段更新会非常频繁,在某些场景下这些多条SQL是可以合并的,一定时间内只执行最后一条SQL就行了,可以减少对...
    文章 2016-06-11 10959浏览量
  • 朱晔的互联网架构实践心得S1E5:不断耕耘的基础中间件

    其实细想一下,SQL因为并不是直接扔到数据库执行,这里的可能性就太多了,想干啥可以。实现上一般需要做下面几件事情: 有一个高性能的网络模型,一般基于高性能的网络框架实现,毕竟Proxy的网络方面的性能不能...
    文章 2018-09-15 1314浏览量
  • 【云周刊】第161期:阿里云ET城市大脑入驻国家博物馆...

    那么有没有一种高效的实时计算平台,只要会写SQL并且可视化的操作就可以快速完成实时计算的业务开发呢?点击查看 如何提升测试环境的稳定性?来看看阿里内部的实践总结 视频直播常见问题与解决办法汇总【系列一】 ...
    文章 2018-03-07 9012浏览量
  • 一个好的组件应该是什么样的?

    试想下,你的 README 中如果出现一段:点击立即体验,跳转过去后可以在线编辑实时看到效果,那对于任何看到你组件的同学来说都是一种享受 组件参数/Props 要收集这部分数据就比较复杂了,我们需要深入分析 ...
    文章 2020-04-24 791浏览量
  • 《Node.js入门》Windows 7下Node.js Web开发环境搭建...

    最近想尝试一下在IBM Bluemix上使用Node.js创建Web应用程序,所以需要在本地搭建Node.js Web的开发测试环境。这里讲的是Windows下的搭建方法,使用CentOS 的小伙伴请参考:《Node.js入门》CentOS 6.5下Node.js Web...
    文章 2016-01-17 920浏览量
  • 系统架构-性能篇章2(系统拆分2-问题)

    说到socket就是编写程序比较麻烦,双方调用和接受都需要编写单独的程序去通信,要求传输的内容都可以被序列化,写的一方有点类似于写文件,读的一方有点类似读文件,不过它也是使用IO本身的一种方法去通信;很多程序...
    文章 2011-11-15 1445浏览量
  • 阿里内核月报2014年2月

    Linux内核就允许这个程序使用X32兼容模式运行,在这种模式下用户既可以继续享受64位x86带来的更多寄存器等便利,又可以使用32位指针来减少内存开销-当然,这时您可以索引的地址空间也只有4GB了。为了配合这种模式下...
    文章 2017-06-05 1921浏览量
  • QA seven's blog

    PreEmptive Dotfuscator 是.NET 模糊处理程序和压缩程序,有助于防止程序遭遇反向工程,同时使程序更小更高效。开发过程中改进代码质量 标准 描述 设计和代码的检查准则 提供若干帮助进行设计和代码检查的技术,通过...
    文章 2017-07-03 1208浏览量
1 2 3 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化