• 关于

    数据流分析问题怎么解决

    的搜索结果
  • 一文告诉你什么是边缘流数据分析

    云栖号快速入门:【点击查看更多云产品快速入门】不知道怎么入门?这里分分钟解决新手入门等基础问题,可快速完成产品配置操作! 流数据分析 是一种使用流的方法快速实时处理数据的计算方式。边缘计算中的 流数据分析 ,继承了物联网平台的 流数据分析 能力。 在物联网平台创建流数据分析任务,并将该任务下发到边...

    文章 小生生 2020-06-11 402浏览量

  • CPU多线程处理,一种隐藏传输时间方法

    在使用CUDA进行编程时,遇到提速时间达不到效果时往往会用CUDA自带的visual profiler进行算法运行时间的分析; 在分析时,总会遇到数据流从向显存传输时的时间在算法中多于实际你的算法处理你要解决问题的算法的时间。 如你在传输时花70%的时间,而你处理你的问题时只花30%的时间,这...

    文章 night李 2016-10-31 1060浏览量

  • 大数据的未来掌控于数据集成

    大数据,即用于数据分析帮助商业等方面决策的大数据集,已经发展成熟,然而它的发展速度却丝毫没有减慢的迹象。虽然大数据能够让你在问题变得不可收拾之前,帮助你发现痛点、解决问题并增进对客户的了解,但是与此同时,大数据本身也带来了一些问题和挑战。 大数据为企业和机构在商业分析,市场营销,商业决策等方面提供...

    文章 知与谁同 2017-08-01 679浏览量

  • 云数据库新人专场

    MySQL年付低至19.9,其它热门产品1元起购!

    广告

  • 数据仓库、数据湖、流批一体,终于有大神讲清楚了!

    作者:蒋晓伟(量仔) 阿里云研究员金晓军(仙隐) 阿里云高级技术专家摘要:数据仓库,数据湖,包括Flink社区提的流批一体,它们到底能解决什么问题?今天将由阿里云研究员从解决业务问题出发,将问题抽丝剥茧,从技术维度娓娓道来:为什么你需要数据湖或者数据仓库解决方案?它的核心难点与核心问题在哪?如果...

    文章 May-Hologres 2020-05-14 1343浏览量

  • 业务异常只能瞅着数据库崩溃?别慌,数据库自治服务DAS的自动SQL限流功能来了!

    作者:云矶,阿里云数据库高级开发工程师 01、背景 随着技术的发展,尤其是云数据库的普及,数据库系统变得越来越稳定,运维工作也越来越轻松,版本升级、实例迁移等都可以自动完成,上层业务不会有太大的感知。即使硬件设备或者网络出现故障,巡检系统也可以快速迁移、及时重启,保证服务稳定。 但现有的这些手段几...

    文章 Roin123 2020-04-08 654浏览量

  • 数据仓库、数据湖崛起后,下一个应该是什么?

    作者:蒋晓伟(量仔) 阿里云研究员金晓军(仙隐) 阿里云高级技术专家 一、业务背景 1.1 典型实时业务场景 首先我们来看一个典型的实时业务场景,这个场景也是绝大部分实时计算用户的业务场景,整个链路也是一个典型的流计算架构:把用户的行为数据或者数据库同步的Binlog,写入至kafka,再通过...

    文章 May-Hologres 2020-05-14 15671浏览量

  • Facebook专家:Hadoop不足以处理大数据

    文章讲的是Facebook专家:Hadoop不足以处理大数据,随着大数据在各个业务领域的发展和应用,相关的技术和工具也层出不穷,其中Hadoop框架受到更多的关注和应用。Facebook分析主管Ken Rudin最近在纽约举行的一个Strata+Hadoop世界大会发表主题演讲时表示,不要小看关系...

    文章 青衫无名 2017-09-01 1244浏览量

  • 面向对象的系统分析和系统设计的区别是什么?

      《面向对象设计UML实践》:   “分析模型不同于设计模型,它不涉及要开发系统的任何特性,而是力求捕捉“现实世界”中的业务的某些方面和特性。   通常,分析模型描述应用中处理的数据和处理数据的各种过程。在传统的分析方法中,这些模型用图表示,如逻辑数据模型和数据流图。值得注意的是,使用分析模型描...

    文章 技术小阿哥 2017-11-27 971浏览量

  • ApsaraDB云数据库助力优驾产品升级和架构变革

    2017云栖大会POLARDB专场,广州通易科技有限公司技术负责人刘锬带来ApsaraDB云数据库助力优驾产品升级和架构变革的演讲。本文主要先介绍了优驾产品,接着介绍了应用需求与技术架构,最后分享了上云之路和使用云数据库的体会。 以下是精彩内容分享:   优驾产品 我们做的产品是车联网的产品,最...

    文章 场景研读 2017-10-27 1873浏览量

  • 双11数据大屏背后的秘密:大规模流式增量计算及应用

    更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data;此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps。 摘要:回顾大数据技术领域大事件,最早可追溯到06...

    文章 场景研读 2017-03-13 5959浏览量

  • 双11数据大屏背后:大规模流式增量计算及应用(附资料)

    首先从理解什么是数据流开始今天的分享,其实在真实的世界中,大部分的数据都是连续产生的数据流,比如手机上产生的GPS信号、用户在互联网上的行为、在线搜索、用户的点击、社交网络分享、即时通信以及一些传感器和物联网设备采集的日志信息等,这些数据都是连续产生的,自然就形成了数据流,在这些数据流产生以后,在...

    文章 小旋风柴进 2017-05-22 1581浏览量

  • 从 Storm 迁移到 Flink,美团外卖实时数仓建设实践

    作者:朱良 本文主要介绍一种通用的实时数仓构建的方法与实践。实时数仓以端到端低延迟、SQL 标准化、快速响应变化、数据统一为目标。 在实践中,我们总结的最佳实践是:一个通用的实时生产平台 + 一个通用交互式实时分析引擎相互配合同时满足实时和准实时业务场景。两者合理分工,互相补充,形成易于开发、易于...

    文章 阿里云实时计算Flink 2020-10-21 6277浏览量

  • Delta Lake - 数据湖的数据可靠性

    今天笔者将分享一位大神关于 Delta Lake 的演讲内容。这位是 Apache Spark 的 committer 和 PMC 成员,也是 Spark SQL 的最初创建者,目前领导 Databricks 团队,设计和构建 Structured Streaming 和 Databricks D...

    文章 开源大数据EMR 2020-03-05 1507浏览量

  • 美团外卖实时数仓建设实践

    作者:朱良 本文主要介绍一种通用的实时数仓构建的方法与实践。实时数仓以端到端低延迟、SQL 标准化、快速响应变化、数据统一为目标。 在实践中,我们总结的最佳实践是:一个通用的实时生产平台 + 一个通用交互式实时分析引擎相互配合同时满足实时和准实时业务场景。两者合理分工,互相补充,形成易于开发、易于...

    文章 开发者小助手 2020-11-17 232浏览量

  • 大数据应用时代,我们需要什么样的数据产品服务

    大数据分析和应用渐成趋势 据相关报告显示,自2014年以来,越来越多的企业正在把大数据分析运用在新型产品的功能实现和数字营销上,大数据分析的重要性也从第8位升高至第3位。超出一大半的受访者表示,他们的企业使用数据分析来实现与创新有关的多种目的,包含识别新领域、为构思设计理念提供投入、揭露市场前景、...

    文章 梦蝶数据 2019-04-10 774浏览量

  • 什么是物联网数据分析?

    云栖号快速入门:【点击查看更多云产品快速入门】不知道怎么入门?这里分分钟解决新手入门等基础问题,可快速完成产品配置操作! 物联网数据分析LA(Link Analytics)是阿里云为物联网开发者提供的设备智能分析服务,全链路覆盖了设备数据采集、管理(存储)、清洗、分析等环节,有效降低了数据分析门槛...

    文章 小生生 2020-05-09 525浏览量

  • 开发效率提升15倍!批流融合实时平台在好未来的应用实践

    摘要:本文由好未来资深数据平台工程师毛祥溢分享,主要介绍批流融合在教育行业的实践。内容包括两部分,第一部分是好未来在做实时平台中的几点思考,第二部分主要分享教育行业中特有数据分析场景。大纲如下: 背景介绍 好未来 T-Streaming 实时平台 K12 教育典型分析场景 展望与规划 1...

    文章 阿里云实时计算Flink 2021-01-07 2539浏览量

  • 云杉网络亓亚烜:用SDN打造安全可控的云数据中心网络

    2016年6月2日,“2016全球SDNFV技术大会”进入了第二天。作为连续举办三届的SDN/NFV技术与产业盛会,本届大会着眼于SDN/NFV的实践应用与部署,从SDN/NFV在运营商网络、企业网、云数据中心、测试解决方案等多个场景的应用出发,深入解析产业部署现状及面临的挑战与发展趋势。 云杉...

    文章 行者武松 2017-09-02 1230浏览量

  • 如何用SPSS和Clementine处理缺失值、离群值、极值

    一、什么是预处理、预分析? 高质量数据是数据分析的前提和分析结论可靠性的保障。尽管在获取数据源时数据分析师格外谨慎,耗费大量的时间,但数据质量仍然需持续关注。不管是一手还是二手数据源,总是会存在一些质量问题。同时,为了满足数据分析、挖掘的实际需要,对噪声数据如何处理,是丢弃还是补充,或者重新计算...

    文章 nieson 2015-01-05 1882浏览量

  • 从小数据分析到大数据平台,这十几年来大数据开源技术是如何演进的?

    首先,介绍两个使用案例。 第一个是OLTP流程,主要指的是整个商业应用和流程。我们会收集交易数据,在业务过程当中收集数据,比如要销售一些网上产品,可能希望把每一单都能够记录下来。 第二个主要案例是OLAP,主要指的是分析数据,我们让所有收集的数据能够有意义,可以帮助我们生成报告,根据数据分析,进行...

    文章 玄学酱 2017-07-05 1125浏览量

  • 突破Java面试(26)-说说如何应对缓存雪崩以及穿透问题

    1 面试题 了解什么是Redis的雪崩和穿透吗?Redis崩溃之后会怎么样?系统该如何应对这种情况?如何处理Redis的穿透? 2 考点分析 缓存必问题,因为缓存雪崩和穿透,是缓存最大的两个问题,要么不出现,一旦出现就是致命的! 3 缓存雪崩 3.1 发生的现象 3.2 缓存雪崩的解决方案 ...

    文章 javaedge 2019-07-08 15167浏览量

  • 专访佰腾科技大数据团队,谈专利大数据领域的挑战与实践

    11+大数据行业应用实践请见https://yq.aliyun.com/activity/156,同时这里还有流计算、机器学习、性能调优等技术实践。此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps;...

    文章 百遇 2017-02-20 4999浏览量

  • 使用Databricks作为分析平台

    Spark等引擎都是作为工具被开发者使用的,而我们使用这些工具的最终目的是搭建合适的平台提供给业务方。以下是YipitData‘s Platform的相关介绍。 一、为什么要用到平台 (Why a platform) ? YipitData是一家咨询公司,其客户主要是投资基金以及财富五百强中的一些...

    文章 KB小秘书 2020-07-21 704浏览量

  • 开源大数据的过去、现在及未来

    首先,介绍两个使用案例。 第一个是OLTP流程,主要指的是整个商业应用和流程。我们会收集交易数据,在业务过程当中收集数据,比如要销售一些网上产品,可能希望把每一单都能够记录下来。 第二个主要案例是OLAP,主要指的是分析数据,我们让所有收集的数据能够有意义,可以帮助我们生成报告,根据数据分析,进行...

    文章 玄学酱 2017-07-05 1189浏览量

  • Intel研究院院长吴甘沙演讲全文:大数据分析师的卓越之道(32PPT)

    亲爱的各位同仁,各位同学,早上好。讲到大数据,就要问数据分析师应该做什么?所以我今天的标题是大数据分析师的卓越之道。这里不一定讲的对,讲的对的我也不一定懂,所以请大家以批评式的方式去理解。 这是一个典型的数据分析的场景,下面是基础设施,数据采集、存储到处理,左边是数据处理,右边价值输出。连接...

    文章 小旋风柴进 2017-05-02 1129浏览量

  • Flink大数据计算的机遇与挑战

    作者: 王绍翾(大沙) 本文来自于王绍翾在2018年08月11日Flink China Meetup。王绍翾,花名“大沙”,加州大学圣迭戈分校计算机工程的博士,Apache Flink Commiter。目前在阿里负责Flink平台以及生态的一些工作。 本文内容如下: 流计算核心技术 Flink是...

    文章 Ververica 2019-04-25 657浏览量

  • 直播疑难杂症排查(4)— 延时高

    1. 延时的测量 一般测量延时最简单的方法,就是推流端和播放端对着同一个时钟,然后用播放端显示的时间减去推流端显示的时间,就得到了粗略的直播延时。 2. 延时高问题分析 首先,我们看看可能产生延时的模块有哪些: - 图像处理延时,比如画面剪裁、美颜、特效处理 - 视频编码/解码延时 - 网...

    文章 技术小阿哥 2017-11-27 1170浏览量

  • 大咖丨昆仑数据陈晨:工业大数据真正要做的是智能分析和智能决策

    “真正的大数据不是有了数据,把这些数据接入之后存起来就可以了,真正要做的事情是智能分析和智能决策,通过在两化融合的基础上构建的智能分析优化系统“工业大脑”,进行相应的智能决策。” 近年来,工业大数据逐渐从概念走向落地阶段,数据基础较好的一些细分工业领域,已经在利用新兴的大数据等技术创造价值。昆仑数...

    文章 技术小能手 2018-01-08 2558浏览量

  • 数据分析师常见的十个问题

    1、如何做好数据分析? 分析师成长是通过“干”、"思"、“熬”出来的。干:多做。哪些是临时需求。你要做各种各样的分析;思:你在边干的过程中,要边思考,边总结,只有这种你才能沉淀。熬:通过时间的积累,你的商业意识、数据分析思维、技能得到提升,广积粮,缓称王,实现厚积而薄发。   2、如何做好数据挖...

    文章 行者武松 2017-07-04 1004浏览量

  • 企查查支撑8000万+企业数据的大数据平台技术选型与实现

    11+大数据行业应用实践请见https://yq.aliyun.com/activity/156,同时这里还有流计算、机器学习、性能调优等技术实践。此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps;...

    文章 百遇 2017-02-23 5663浏览量

1 2 3 4 ... 59 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT