• 【干货】徐葳:如何数据和人工智能让云更聪明?

    首先,系统监控一定要做,如果觉得它太贵,我们可以详细优化每一个细节,是不是做了压缩,是不是做了所有可能的事情,来减少数据采集的开销。第二系统监控数据,系统跟你说的话不是自然语言,这些语言不是给你分析的...
    文章 2017-04-03 927浏览量
  • 清华徐葳:如何数据和人工智能让云更聪明?

    首先,系统监控一定要做,如果觉得它太贵,我们可以详细优化每一个细节,是不是做了压缩,是不是做了所有可能的事情,来减少数据采集的开销。第二系统监控数据,系统跟你说的话不是自然语言,这些语言不是给你分析的...
    文章 2017-05-02 1437浏览量
  • 数据采集新形态-全球加速

    日志服务提供30+种开箱即用的数据采集手段,包括直接和云产品打通的日志、移动端、服务端、程序、SDK、网页、嵌入端等。在之前的一篇全方位数据采集中,我们对各种日志采集方式进行了全方位的介绍。概括起来,这些...
    文章 2018-07-30 2962浏览量
  • [Hadoop]chukwa的简单介绍

    这一点也可以从它的架构中看出来.chukwa 是什么 上一节说了很多 chukwa 不是什么,下面来看下 chukwa 具体是干什么的一个系统呢?具体而言,chukwa 致力于以下几个方面的工作:1.总体而言,chukwa 可以用于监控大规模...
    文章 2016-04-07 1706浏览量
  • 数据录入问题分析(1)

    从师范学院提高班的教务系统已经有好几年了,每学期都会有数据采集(我自己经历过两次)每次都是重新开始,并没有之前留下的什么东西给负责具体数据采集的人员,唯一可以利用一下的就是数据录入说明。这说明从这件...
    文章 2014-12-27 1092浏览量
  • 技本功丨甲方大人来了之运维数据分析平台搭建实战

    坚持看到这里就是真爱了,贴上一张系统架构图,图中左方是数据采集层,easymanager是公司自研的自动部署神器(不用想了,没有开源),右边是数据展示端,把应用、主机、数据库、日志数据统一展示在一张大屏上,废话...
    文章 2018-12-28 2371浏览量
  • 什么才是真正的大数据征信?

    让公众能够及时了解到企业最新的信用信息,也就是说在大数据征信机制下,企业或个人的征信状况是动态变化的,比如11315全国企业征信系统通过互联网技术采集企业信用数据,每每分钟就能对系统数据进行一次更新,这...
    文章 2017-07-03 1849浏览量
  • 物联网建设中通讯互联层的终极解决方案

    有人会问,那你正式工作是干什么的?在某集团公司工业版块负责大数据建设的相关工作。在没有大数据、云服务概念的时候,做过远程E服务相关的项目。说实话,对于传统行业来讲,是很困难的一件事。但是作为企业来讲,...
    文章 2016-12-15 553浏览量
  • 我是如何在SQLServer中处理每天四亿三千万记录的

    系统数据正确性要求极其变态,要求从底层采集系统到最上层的监控系统,一条数据都不能差 我们的系统架构如下,可以看到,其中数据库压力非常之大,尤其在LevelA节点: 硬件配置如下:CPU:英特尔® 至强® 处理器 E5...
    文章 2017-10-09 1306浏览量
  • 面试官:说出八种消息队列的应用场景。...

    胖滚猪看了看官方架构图,咦,又有熟悉的消息队列,原来消息队列也可以用来数据采集呀!所有主流的采集工具,都支持落地到Kafka等消息队列。也就是说,消息队列在数据采集这一块,也有举足轻重的作用。当然了,也...
    文章 2020-05-23 1295浏览量
  • 【干货】王建民:大数据与智能制造

    日本福岛核电站用的就是三一工的装备,能够实现遥控五公里之外的遥控装备,在这个过程当中用了装备操作数据来改进它遥控器的质量和稳定性。在金风科技怎么样利用矫正风机偏航呢?风机上有一个测风仪,这个是解决风机...
    文章 2017-04-03 944浏览量
  • 面向未来的数据库体系架构思考:把数据库装入容器

    我们在这上面做了一些改进,本来Memcached plugin插件有一些支持数据的类型限制,包括对一些索引类型支持不太好,所以我们做了改进,这个大家都可以用的,如果用这个方式的话基本上很多缓存系统是不需要的。...
    文章 2017-07-03 1161浏览量
  • 数据中心在医院的落地,需如何去做集成融合与利用

    另外一些的确是在模板、临床上不适合去采集,也扩大一些随访,在微信端,比如骨科微信上传一些康复数据上来,结合EDC多中心的采集系统一起做,提高临床科研的智能化水平。另外就是大家讨论比较多的分级诊疗,离不...
    文章 2017-10-25 1249浏览量
  • 阿里下一代数据库技术:把数据库装入容器不再是神话

    我们在这上面做了一些改进,本来Memcached plugin插件有一些支持数据的类型限制,包括对一些索引类型支持不太好,所以我们做了改进,这个大家都可以用的,如果用这个方式的话基本上很多缓存系统是不需要的。...
    文章 2017-05-24 12394浏览量
  • 干货&神图:数据分析师的完整流程与知识结构体系

    Omniture中的Prop变量长度只有100个字符,在数据采集部署过程中就不能把含有大量中文描述的文字赋值给Prop变量(超过的字符会被截断)。在Webtrekk323之前的Pixel版本,单条信息默认最多只能发送不超过2K的数据。当...
    文章 2018-10-29 1372浏览量
  • 【干货】手把手教你21天搭建推荐系统

    推荐系统的搭建是个复杂工程,涉及到实时计算、离线计算,以及各种数据采集、流转等,对自建推荐系统来说,1人年是跑不掉的。阿里云推出一大利器-推荐引擎,初衷是为了帮助阿里云的客户、创业者、中小网站,让他们...
    文章 2019-08-05 1724浏览量
  • 【双11背后的技术】永不停止的脚步——数据库优化之路

    最终完成了第二代全量SQL采集系统。在ODPS上,我们可以进行全面的SQL分析计算,如10分钟内有多少用户连续下单等问题。在AliRocks上,我们可以精准的给出SQL直方图,如TOP SQL问题。2016年双11当天,我们打开了集团...
    文章 2017-01-12 5346浏览量
  • 数据中台全景架构及模块解析!一文入门中台架构师!

    数据采集安全:包括数据源鉴别以及记录等 数据传输安全:包括数据传输加密等 数据存储安全:包括存储介质安全、数据备份恢复等 数据处理安全:包括数据脱敏等 数据交换安全:包括数据共享安全、导入导出安全等 数据...
    文章 2020-05-20 2361浏览量
  • 什么说阿里巴巴本身是云上数据中台的最佳实践

    为其他部门Web或App端开发规范和数据采集的数据埋点和采集系统;甚至还有为阿里云的用户实现敏捷报表开发的QuickBI产品…,哎呀呀,什么生意参谋、quickBI,Dataphin、FBI、可视化埋点、品牌银行、企业参谋,数据...
    文章 2019-10-15 2904浏览量
  • 智能的过去和未来,谢耘演讲实录

    谢耘认为,大数据引发了对智能的无限遐想,“大家觉得了云计算成本可以降低,其实这个话可以倒过来说,因为成本降低了今天才可以云计算的方式提供这种服务。云计算本质是产业服务层面的变化,不是有了云计算技术...
    文章 2017-05-02 1084浏览量
  • 养鸡也能如此炫酷?阿里云MVP刘洪峰讲述IoT平台养鸡...

    另外,物联网本身的链条很长,传感器把数据采集完以后需要传到网关,从网关再到云端,到了云端需要做一些Web上应用或者APP,这一整个长链条的应用如果自己来做非常复杂,自从有了阿里云物联网平台的一体化支持,...
    文章 2019-08-01 1813浏览量
  • 【百川云栖分享】离青&冰撤:云时代下,如何应对运维...

    可靠的是我们用的工具或系统是从这个角度而言的,数据采集是不是比较高效,分析数据的话,数据分析是不是足够实,再一个是可靠性问题,关键时刻会不会掉链子。可控是最根本的要素,只有做到了可控才能说在宏观上面...
    文章 2016-11-03 2298浏览量
  • [免费]手把手,阿里算法专家教你21天搭建推荐系统

    “展现”部分不仅要负担展现,还是数据采集的窗口,用户在展现系统的所有行为通过日志录入,采集到的数据经过算法子系统的计算,可以得到用户的偏好或者个性化兴趣,然后回过头来指导“展现”部分怎样做的更聚焦。...
    文章 2017-05-02 2018浏览量
  • 工业大数据驱动中国新工业革命

    我们今天讲的工业大数据,大数据通过我们的传感器和设备的采集,采集了各类数据采集完了之后通过我们的移动互联网,通过移动互联网物联网传递到云计算平台上,来作为计算分析来支撑我们的智能制造体系。...
    文章 2016-12-08 2447浏览量
  • 与“十“俱进 阿里数据库运维10年演进之路

    我在阿里快十年了,前五年做一些分布式系统开发相关的工作,参与的系统包括TFS/Tair/OceanBase,后五年聚焦在数据库运维平台及服务的建设,从搭建数据库集群、数据采集等底层运维到外部客户服务、POC支持等都有所...
    文章 2019-01-11 2643浏览量
  • AI赋能DevOps:数据驱动的全栈工程师实践

    我们上网的时候,用的最多的工具是什么?是搜索引擎,搜索可以帮我们尽情探索数据中的价值。原来我们到机器上搜索日志,数据在文件中是是有序的存储的。而在采集的过程中,为了性能的考虑,会以乱序的形式存储下来,...
    文章 2019-11-04 9326浏览量
  • 如何在一分钟内实现微服务系统下的架构可视化

    手工经常的事情,就有追求效率的同学使用计算机系统带来的自动化手段帮助自己做这件事情,比如我们常常看到的基于数据埋点的微服务可视化解决方案,这类架构可视化手段通常在分布式追踪、APM等监控领域使用较多,...
    文章 2018-11-28 4336浏览量
  • 在AWS上的架构部署与设计

    2)制造:最核心的首先要做好数据采集,要把人、设备机器、产品、流程串接起来,做好数据采集、做好数据分析、做好数据决策,最后通过一个平台执行下去,还能不断的修正它,比如说制造行业要做数据采集、数据分析、...
    文章 2021-08-19 1751浏览量
  • 长虹软件与服务中心总经理刘东:大数据在制造企业的...

    另外一个比较典型的案例,收视率统计,我们大概能够有效采集的样本是300多万的终端,可以看出同一时间不同的地点收看某一电视栏目的比率问题,我们拿到这些数据干什么?我们的数据分析和查询现在的速度是一集的数据...
    文章 2017-07-03 1958浏览量
  • 【云栖大会】真实的科幻大片:杭州开始人工智能ET...

    拥有数据资源后,城市大脑还需要五大系统才能高效运转——超大规模计算平台、数据采集系统、数据交换中心、开放算法平台、数据应用平台。城市大脑计算平台采用飞天操作系统。城市大脑涉及的数据量巨大,仅视频摄像头...
    文章 2016-10-13 10237浏览量
1 2 3 4 ... 13 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化