• 关于

    大数据 流式技术

    的搜索结果
  • 【译】使用Apache Kafka构建流式数据平台(1)

    前言:前段时间接触过一个流式计算的任务,使用了阿里巴巴集团的JStorm,发现这个领域值得探索,就发现了这篇文章——Putting Apache Kafka To Use: A Practical Guide to Building a Stream Data Platform(Part 1)。在...

    文章 杜琪 2016-06-07 3201浏览量

  • 效率提升50倍,轻松处理大数据

    阿里云流计算正式上线——新用户免费试用一个月 日前,阿里云宣布流计算(Aliyun StreamCompute,Powered by Blink)正式发布商业化版本。阿里云流计算是运行在阿里云平台上的流式大数据分析平台,提供给用户在云上进行流式数据实时化分析工具,实现对网站数据、...

    文章 若有-若无 2018-06-21 4957浏览量

  • 为什么Flink会成为下一代大数据处理框架的标准?

    导读:本文将告诉你Flink是什么,以及为什么Flink会成为下一代大数据处理框架的标准。 01 什么是Flink? 在当前数据量激增传统的时代,不同的业务场景都有大量的业务数据产生,对于这些不断产生的数据应该如何进行有效地处理,成为当下大多数公司所面临的问题。 随着雅虎对Hadoop的开源,越来...

    文章 初商 2019-09-21 1105浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • 宜信数据中台全揭秘(一)数据中台整体介绍|分享实录

    内容来源:宜信技术学院第11期技术沙龙|宜信数据中台全揭秘(一)数据中台整体介绍 主讲人:宜信数据中台解决方案架构师 裴国强PPT下载:链接: https://pan.baidu.com/s/1eSkSdUo6FmYFmcE4xg0vjw 密码: 99uh 一、数据中台定位 1.1 ADX整体...

    文章 宜信技术学院 2020-06-11 403浏览量

  • storm概念学习及流处理与批处理的区别

    在过去10 年中,随着互联网应用的高速发展,企业积累的数据量越来越大,越来越多。随着Google MapReduce、Hadoop 等相关技术的出现,处理大规模数据变得简单起来,但是这些数据处理技术都不是实时的系统,它们的设计目标也不是实时计算。毕竟实时的计算系统和基于批处理模型的系统(如Hado...

    文章 松伯 2016-01-10 1068浏览量

  • 实时计算 Flink> 产品定价——业务流程

    在使用阿里云实时计算 Flink前,对流式数据处理整体全链路有初步的认识可以极大方便您梳理业务流程,制定相应的系统设计方案。下面将简单介绍阿里云实时计算全流程系统架构。 数据采集  广义的实时数据采集指: 用户使用流式数据采集工具将数据实时地采集并传输到大数据Pub/Sub系统,该系统将...

    文章 李博 bluemind 2018-11-14 1997浏览量

  • 权威解读:阿里云实时计算究竟对Apache Flink™️做了哪些‘改造’?

    关于实时计算 实时计算LOGO 实时计算(Alibaba Cloud Realtime Compute,原阿里云流计算)是一套基于Apache Flink™️构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等多种场景。实时计算主要应用于实时互联...

    文章 KB小秘书 2019-07-24 862浏览量

  • 【精彩活动预告】第十二届 BigData NoSQL Meetup (北京站)大咖云集,与你畅聊BigData NoSQL

    点击报名 云栖开发者沙龙介绍​ 阿里云栖技术沙龙是“云栖社区”主办的线下技术沙龙品牌,希望通过技术干货分享来打通线上线下专家和开发者的连接。沙龙每期将定位不同的技术方向,逐步覆盖 云计算,大数据,前端,PHP,android,AI,运维,测试 等技术领域,并会穿插一些特别专场(开源专场,女性开...

    文章 hbase小能手 2019-06-06 15786浏览量

  • 基于 Flink 的实时数仓生产实践

    数据仓库的建设是“数据智能”必不可少的一环,也是大规模数据应用中必然面临的挑战。在智能商业中,数据的结果代表了用户反馈、获取数据的及时性尤为重要。快速获取数据反馈能够帮助公司更快地做出决策,更好地进行产品迭代,实时数仓在这一过程中起到了不可替代的作用。 如何更好的建设实时数仓、有哪些优秀的生产实...

    文章 阿里云实时计算Flink 2019-11-18 4157浏览量

  • 如何让机器读懂视频| 开发者必读(135期)

    最炫的技术新知、最热门的大咖公开课、最有趣的开发者活动、最实用的工具干货,就在《开发者必读》! 每日集成开发者社区精品内容,你身边的技术资讯管家。 每日头条 如何让机器读懂视频 主要详细介绍了多模态在视频分类算法中的应用探索及视频分类算法中的层次化分类器的设计。 最强干货 Go 开发关键技术...

    文章 KB小秘书 2020-01-10 235浏览量

  • 连载:阿里巴巴大数据实践—实时技术

    前言:-更多关于数智化转型、数据中台内容请加入阿里云数据中台交流群—数智俱乐部 和关注官方微信公总号(文末扫描二维码或点此加入) -阿里云数据中台官网 https://dp.alibaba.com/index 来源:数智化转型俱乐部 数据价值是具有时效性的,在一条数据产生的时候,如果不能及时处...

    文章 数据中台君 2020-08-19 1417浏览量

  • 【译】Databricks使用Spark Streaming和Delta Lake对流式数据进行数据质量监控介绍

    原文链接:https://databricks.com/blog/2020/03/04/how-to-monitor-data-stream-quality-using-spark-streaming-and-delta-lake.html 在这个一切都需要进行加速的时代,流数据的使用变得越来越普...

    文章 开源大数据EMR 2020-03-08 745浏览量

  • 数据采集

    本页目录 数据采集 数据采集 所有的大数据分析系统都基于一个前提,即数据需要采集进入大数据系统。为最大化利用您现有的流式存储系统,阿里云实时计算 Flink对接了多种上游的流式存储,让您可以不用进行数据采集、数据集成,即可享受现有的数据流式存储。 阿里云实时计算 Flink支持...

    文章 李博 bluemind 2018-11-14 2330浏览量

  • 图文详解:DataHub产品概述

    云栖号快速入门:【点击查看更多云产品快速入门】不知道怎么入门?这里分分钟解决新手入门等基础问题,可快速完成产品配置操作! 产品概述 DataHub基本介绍阿里云流数据处理平台DataHub是流式数据(Streaming Data)的处理平台,提供对流式数据的发布 (Publish),订阅 (Sub...

    文章 小生生 2020-06-11 559浏览量

  • 走向成熟!2017年大数据发展趋势五大预测

    2016年已经过去,这一年中大数据领域风云变幻,亦留下众多趋性迹象供我们探究与参考。 以此为基础,我们整理出2017年的五项大数据发展趋势与预测结论。 1.云端大数据成为主流 2016年是云计算全面普及的一年。尽量初期企业客户曾就隐私与安全等问题选择观望,但随着云环境在可用性、使用成本以及性能表现...

    文章 晚来风急 2017-08-02 1019浏览量

  • Druid:实时处理时序数据的OLAP数据库

    大数据分析和Druid 大数据一直是近年的热点话题,随着数据量的急速增长,数据处理的规模也从GB 级别增长到TB 级别,很多图像应用领域已经开始处理PB 级别的数据分析。大数据的核心目标是提升业务的竞争力,找到一些可以采取行动的洞察(Actionable Insight),数据分析就是其中的核心技...

    文章 高广超 2018-05-12 1586浏览量

  • 精彩回顾 | 大数据+AI Meetup 2020 第二季 ·上海站(附PPT下载)

    11月1日,大数据+AI Meetup 第二季·上海站成功举办!来自阿里巴巴、DellEMC、Databricks、滴滴、bilibili、StreamNative、上海力萌的9位技术专家齐聚魔都,集中解读上半年大数据的热门话题。 开源届前浪后浪全员凶猛,合体也成为主流。此次 Meetup 干货满...

    文章 阿里云实时计算Flink 2020-11-01 2140浏览量

  • 精彩回顾 | 大数据+AI Meetup 2020 第二季 ·上海站(附PPT下载)

    11月1日,大数据+AI Meetup 第二季·上海站成功举办!来自阿里巴巴、DellEMC、Databricks、滴滴、bilibili、StreamNative、上海力萌的9位技术专家齐聚魔都,集中解读上半年大数据的热门话题。 开源届前浪后浪全员凶猛,合体也成为主流。此次 Meetup 干货满...

    文章 阿里云E-MapReduce团队 2020-11-03 951浏览量

  • 走向成熟!2017年大数据发展趋势五大预测

    2016年已经过去,这一年中大数据领域风云变幻,亦留下众多趋性迹象供我们探究与参考。 以此为基础,我们整理出2017年的五项大数据发展趋势与预测结论。 1.云端大数据成为主流 2016年是云计算全面普及的一年。尽量初期企业客户曾就隐私与安全等问题选择观望,但随着云环境在可用性、使用成本以及性能表现...

    文章 轩墨 2017-08-22 946浏览量

  • 带你读《Flink原理、实战与性能优化》之一:Apache Flink介绍

    大数据技术丛书点击查看第二章点击查看第三章Flink原理、实战与性能优化 张利兵 著第1章 Apache Flink介绍本章对Apache Flink从多个方面进行介绍,让读者对Flink这项分布式处理技术能够有初步的了解。1.1节主要介绍了Flink的由来及其发展历史,帮助读者从历史的角度了解...

    文章 温柔的养猫人 2019-11-01 4550浏览量

  • 开源大数据周刊-第22期

    阿里云E-Mapreduce动态 E-Mapreduce团队 1.5.0版本(正在研发) 增加集群整体运行情况的仪表盘 访问OSS不需要写id、key,增强安全性 集群其中后,可以重启、修改配置及安装软件 1.6.0版本 交互式查询(支持hive、spark) 资讯 在大数据时代,每家公...

    文章 开源大数据EMR 2016-09-13 2413浏览量

  • 双11数据大屏背后的秘密:大规模流式增量计算及应用

    更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data;此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps。 摘要:回顾大数据技术领域大事件,最早可追溯到06...

    文章 场景研读 2017-03-13 5955浏览量

  • 什么是流式输出?

    作者 | 幽霄来源 | 阿里技术公众号一 名词理解1 流式流式(Stream)亦称响应式,是一种基于异步数据流研发框架,是一种概念和编程模型,并非一种技术架构,目前在各技术栈都有响应式的技术框架,前端的React.js、RxJs,服务端以RxJava、Reactor,Android端的RXJa...

    文章 开发者小助手_LS 2021-01-12 928浏览量

  • 大数据近实时数据投递MaxCompute

    1.场景描述 本文介绍离线大数据场景使用MaxCompute构建云上近实时数仓,打通云下数据上云链路,解决数据复杂类型支持和动态分区问题,满足高级数据处理需求的最佳实践。 2.解决问题 混合云环境下,现有业务系统零改造,打通数据上云链路。 使用UDF实现复杂数据类型转换和数据动态分区。 使用Da...

    文章 SRE团队技术小编-小颖 2020-10-26 1531浏览量

  • 技术与架构,解析如何将大数据最快落地到实践

    免费开通大数据服务:https://www.aliyun.com/product/odps 直播回顾: https://yq.aliyun.com/webinar/history?spm=5176.8067841.wnold.1.rLvSkQ 3月9日14点,业内首个结合技术与应用的在线大数据...

    文章 隐林 2017-03-06 5239浏览量

  • 《Apache Flink官方文档》 Apache Flink介绍

    下面是关于Apache Flink(以下简称Filnk)框架和流式计算的概述。为了更专业、更技术化的介绍,在Flink文档中推荐了一些“概念性”的文章。 1、无穷数据集的持续计算 在我们详细介绍Flink前,复习一下当我们计算数据选择运算模型时,很可能会遇到的一个更高级别的数据集类型。下面有两个...

    文章 青衫无名 2017-05-18 3199浏览量

  • 开源大数据周刊-第101期

    资讯 微软、SAP和Adobe“结盟”提出开放数据计划很多企业无法更好地研究自己客户的用户行为,这是因为重要的客户信息都被中介和第三方服务商所掌控,被困在很多信息孤岛之中,这限制了这些企业从中获取更有价值的用户行为信息。 手握 5G + AI 两张王牌的高通,将如何实现无线边缘的拓展?智能手...

    文章 开源大数据EMR 2018-09-27 1166浏览量

  • ZIP 也能边下载边解压?流式解压技术揭秘!

    打开网络上的 ZIP 文件需要几步?下载,解压,拿到所有文件。面对一个 ZIP,能不能「边下边播」、「按需下载」? 今年 6 月,优酷绘本技术团队开发出新的解压方式——ZIP 流式解压技术,并成功应用在优酷绘本秒开项目中,30M+ 绘本平均加载时长只需 0.91s,加载耗时比传统的解压方式降低了 ...

    文章 茶什i 2020-09-09 1328浏览量

  • 专访阿里云高级技术专家吴威:Kafka、Spark和Flink类支持流式计算的软件会越来越流行

    杭州·云栖大会将于2016年10月13-16日在云栖小镇举办,在这场标签为互联网、创新、创业的云计算盛宴上,众多行业精英都将在这几天里分享超过450个演讲主题。 为了帮助大家进一步了解这场全球前言技术共振盛会的内容,云栖社区采访了各个论坛的大咖,以飨读者。 以下为正文: 吴威,阿里云高...

    文章 身行 2016-09-21 4912浏览量

  • 开源大数据周刊-第102期

    资讯 重磅:Cloudera、Hortonworks 合并 ! 两家大数据先驱Cloudera和Hortonworks今天宣布了它们所谓的相对平等的合并,声称将把两家公司合并成一家年收入达7.2亿美元的新实体。 互联网之父开源「去中心化平台 Solid」,让用户掌控数据控制权 万维网之父 Tim ...

    文章 开源大数据EMR 2018-10-12 1377浏览量

1 2 3 4 ... 46 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT