• 也用C#做个视频监控客户端来玩玩

    一般C++下我们进行网络传输模块开发,会采用结构体来封装组织通信报文,那采用C#开发的媒体客户端程序需与服务端媒体通信,就会碰到怎么把一个结构体转成一个byte数组,以及如何把收到的byte数组数据还原成结构体...
    文章 2017-05-09 1371浏览量
  • 李浩:无限节点的CDN架构演进

    为了达到更高的放大比,客云节点订阅直播流的一部分信息,SDK需要并行从多个客云节点获取编码的切片数据然后还原,封装为标准的http-flv、hls数据流给到客户端。最理想的情况下,对于1Mbps的热流,一个10Mbps...
    文章 2018-06-22 1819浏览量
  • 行业专家全方位全角度阐述大数据

    卜晓军:刚才提到特别是大数据当中的非结构数据分析对于中国或者是我们的应用前景是怎么样的?要稍微回顾一下历史,非结构数据在大数据还没有讲之前,非结构数据是客观存在的。那时候我们是怎么处理的?那时候有...
    文章 2017-09-28 1351浏览量
  • 李德毅院士:再大的数据也能绕过那道弯

    这种媒体主要的形态是非结构化的,特征之间的关联关系、设备算法的准确率等等,都严重的制约着大数据人脸挖掘的进度。由技术推动的计算机发展 那么怎么办?我们还是要回归一下计算机所发展的历史,1936年天才数学...
    文章 2017-05-02 1441浏览量
  • Linux流负载均衡中Layer7的数据流(连接跟踪)识别问题

    走火入魔之后,你会觉得需要赶紧将“基于五元组的数据流”改成“基于应用层协议固定偏移的数据流”,赶紧动手,越快越好!于是此人在支持zone conntrack的Linux 3.17内核上为nf_conn增加了几个字段: bool l7;布尔型...
    文章 2017-11-12 880浏览量
  • 网易游戏基于 Flink 的流式 ETL 建设

    这种情况给我们带来的一个好处是,在数据集成阶段我们不需要去实时地去 join 多个数据流,坏处则是数据结构可能会非常复杂,多层嵌套十分常见。然后,由于近年来实时数仓的流行,我们也同样在逐步建设实时数据仓库,...
    文章 2021-03-12 1903浏览量
  • The Log(分布式Log学习)

    相反,如果能保证数据流可靠、可用且完备,就可以考虑更高级的法、更好的数据模型和一致的、更易被理解的语义。接着,注意力就可以转移到可视化、报表、算法和预测上来(挖啊机啊深度啊)。2.3.2 数据集成的两个...
    文章 2017-11-14 1236浏览量
  • 看看“悲催”的码农得学多少东西?

    所以《算法》、《大话数据结构》、《图解数据结构》、《算法导论》.统统都来吧,数组、栈、队列、二叉树、图、排序、搜索保证不把你淹没。平时和大家聊天,一定得能说出几种常见的设计模式,尤其是单例模式的几种...
    文章 2017-06-02 1080浏览量
  • 上海·2020线上年会来了!MongoDB,More than Document...

    看看MongoDB on Kubernetes怎么玩!MongoDB一手硬核干货分享 MongoDB多样化归档有什么特性?万亿级文档数据库MongoDB集群如何优化?一手硬核干货等你来学习!MongoDB案例征集分享 大家都在怎么用MongoDB?参加...
    文章 2020-12-09 2050浏览量
  • Apache Flink Client生成StreamGraph

    StreamGraph是用于表示的拓扑结构数据结构,它包含了生成JobGraph的必要信息。它的类继承关系图如下: 如果你按照StreamGraph的继承链向上追溯,最终会发现它实现了接口FlinkPlan。Flink在这里效仿的是数据库的...
    文章 2017-11-21 1898浏览量
  • 【Python 学习进阶月刊】第二期:Python 资料汇总

    10-100 图虫网多线程爬取pyppeteer最为核心类Page的接口方法pyppeteer的Browser类及其BrowserContext类Python爬虫入门教程 14-100 All IT eBooks多线程爬取Python中与selenium齐名的pyppeteer库python数据结构与算法...
    文章 2019-04-29 4184浏览量
  • 吴甘沙:大数据的开放式创新

    现在有的是有大数据思维的人,但他们很捉急,不起、不会大数据,他不懂怎么存储、怎么处理这些大数据,这就需要云计算。基础设施的开放还是传统的Platform as a Service,比如Amazon AWS里有MapReduce,Google有...
    文章 2017-05-02 1121浏览量
  • 阿里云云原生数据湖分析DLA重磅发布-数据湖管理,助力...

    如何简单的进行数据入湖:为了满足数据写入的实时性,比如日志场景数据的入口是在类似Kafka、Loghub等消息系统,这些数据怎么高效的归档到OSS进行后续的分析?存储在数据库中的数据以前为了节省成本,以及保证稳定性...
    文章 2020-08-20 3591浏览量
  • 算法+缓存+TCP+JVM+搜索+分布式+数据

    什么叫数据一致性,你怎么理解数据一致性。分布式服务调用方,不依赖服务提供方的话,怎么处理服务方挂掉后,大量无效资源请求 的浪费,如果只是服务提供方吞吐不高的时候该怎么做,如果服务挂了,那么一会重启,该...
    文章 1970-01-01 2530浏览量
  • 算法+缓存+TCP+JVM+搜索+分布式+数据

    什么叫数据一致性,你怎么理解数据一致性。分布式服务调用方,不依赖服务提供方的话,怎么处理服务方挂掉后,大量无效资源请求 的浪费,如果只是服务提供方吞吐不高的时候该怎么做,如果服务挂了,那么一会重启,该...
    文章 2018-10-10 2706浏览量
  • 史上最全阿里 Java 面试题总结

    什么叫数据一致性,你怎么理解数据一致性。分布式服务调用方,不依赖服务提供方的话,怎么处理服务方挂掉后,大量无效资源请求 的浪费,如果只是服务提供方吞吐不高的时候该怎么做,如果服务挂了,那么一会重启,该...
    文章 2018-10-22 2995浏览量
  • 优云CMDB专家实践谈:自动化运维的基石CMDB

    确定CMDB作为唯一数据源,若上下数据流不准确,应从CMDB开始修正 职权划定 自定原则,例如谁提供,谁维护 定期审查 从制度上需要确定团队能定期对CMDB中的数据进行审计,寻找错误数据并改进问题。如同一些仓储管理,...
    文章 2016-06-28 6896浏览量
  • 键盘之道:分享三个月中的思维改变

    类库解耦的好处很多,当然有人会问,没有公共的数据结构,不同的模块之间怎么通信?写一个交互的中间件不就可以了么?或者,使用公共的数据结构,字符串,JSON或者XML。在学习了Lisp,尤其是读了《计算机程序的构造...
    文章 2016-04-21 1903浏览量
  • Streaming System 第三章:Watermarks

    在此,我们做一个假设:假设无界数据流中的数据都有一个事件时间(即事件发生的事件)。基于这个假设,我们研究一下事件时间在计算管道(pipeline)中的假设。在分布式系统中,这个管道可能在多个计算节点(agent)...
    文章 2018-12-27 6187浏览量
  • 【Azure Services Platform Step by Step-第2篇】忘掉...

    Entity是一条数据记录没错,但是Entity的是任意的,不需要像关系数据库里那样,在一个table里有一个特定的结构定义。大家看上图可以注意到,一个Container可以包含多种结构不同的Entity。举个实际例子,如上图所示,...
    文章 2017-11-28 1040浏览量
  • 综述篇:数据中台成为企业增长的刚需|《零售数据中台...

    吴雪军(东锤)阿里云新零售数据解决方案总监专注服务、快销、百货、超市等零售行业20年,牵动全域数据中台解决方案全面落地30多家客户,用数据为客户创造价值,推动新零售法在数据驱动下提升客户运营效率,从需求...
    文章 2021-05-20 698浏览量
  • 分析 OVS 如何实现 vlan 隔离-每天5分钟转 ...

    所有的 instance 都连接到同一个网桥 br-int,Open vSwitch 通过 flow rule(规则)来指定如何对进出 br-int 的数据进行转发,进而实现 vlan 之间的隔离。具体来说:当数据进出 br-int 时,flow rule 可以修改、...
    文章 2017-01-20 1574浏览量
  • 从底层到应用,那些数据人的必备技能

    这里面要解决的是实时、近实时和离线的大数据框架如何搭建,各数据流之间如何耦合和解耦,如何进行容灾、平台稳定、可用是需要重点考虑的。我的感觉是:最近两三年中,这块人才还是很稀缺的,因为大数据概念炒作的...
    文章 2017-08-01 2070浏览量
  • C语言基础:你知道吗,对于C语言来说,我们的显示器...

    然后我们对文件的操作,输入输出都将会先储存在缓存中,当我们在关闭文件时,就需要将缓存中的数据取出来保存到内存中去,或者直接清空缓存,然后释放FIFE类型的结构体变量占用的内存空间,最后禁止继续对文件的操作...
    文章 2019-06-15 1011浏览量
  • 经典大数据架构案例:酷狗音乐的大数据平台重构

    数据缓存重用:为了避免大量数据流(400+亿条/天)写入HDFS,导致HDFS客户端不稳定现象及数据实时性考虑,把经过数据实时清洗后的数据重新写入Kafka并保留一定周期,离线计算(批处理)通过KG-Camus拉到HDFS(通过作业...
    文章 2016-02-16 2738浏览量
  • 如何让双十一数据大屏讲出故事?设计有口诀

    以前对阿里巴巴的印象是一家电商公司,当时数据平台事业部成立的时候,我们认为阿里应该是一家数据公司,所以想到了应该要把数据呈现出来,让大家看到数据,让数据玩起来。做数据大屏的目的可以总结为以下三点: 第...
    文章 2016-07-18 8416浏览量
  • 一个复杂的数据需求的MySQL方案

     而对此的一个解决方案如下,数据流和之前Oracle的方案如出一辙,但是实现原理和细节有所差别。  首先需要做得就是生成一个影子表serverlog_read,对于源库的表数据变更都能够同步到这个表里。 MySQL里面是不...
    文章 2017-06-22 1096浏览量
  • 从应用到底层 36张图带你进入Redis世界(十)

    而zset数据结构也提供了range方法让我们可以很轻易的获取到2个时间戳内有多少请求&xff0c;缺点&xff1a;就是zset的数据结构会越来越大。2、漏桶算法漏桶算法思路&xff1a;把水比作是请求&xff0c;漏桶比作是系统处理能力...
    文章 2022-01-11 31浏览量
  • 从应用到底层 36张图带你进入Redis世界(十)

    而zset数据结构也提供了range方法让我们可以很轻易的获取到2个时间戳内有多少请求&xff0c;缺点&xff1a;就是zset的数据结构会越来越大。2、漏桶算法漏桶算法思路&xff1a;把水比作是请求&xff0c;漏桶比作是系统处理能力...
    文章 2022-01-11 37浏览量
  • 360数据处理平台的架构演进及优化实践

    自助、灵活:自助化和灵活性体现在任务的配置修改、监控调度完全交给用户自己,不依赖于开发人员,想怎么玩怎么玩,让用户真实的体验到玩转大数据。实践案例 接下来分享一下平台的几个典型的实践: 首先是DITTO...
    文章 2018-07-12 3567浏览量
1 2 3 4 ... 19 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化