• 系列文章:Kubernetes日志方案设计思路

    换Sidecar工作量大不说,还会带来一系列其他的问题,比如怎么和CICD系统集成、资源消耗、配置规划、stdout采集不支持等等。从刚开始上的边缘业务,慢慢更多的核心业务接入,对于日志的可靠性要求越来越高,经常有...
    文章 2019-11-13 1869浏览量
  • 一文看懂 K8s 日志系统设计和实践

    换Sidecar工作量大不说,还会带来一系列其他的问题,比如怎么和CICD系统集成、资源消耗、配置规划、stdout采集不支持等等。从刚开始上的边缘业务,慢慢更多的核心业务接入,对于日志的可靠性要求越来越高,经常有...
    文章 2019-11-20 4061浏览量
  • 基于Flume+Kafka+Elasticsearch+Storm的海量日志实时...

    服务搭建起来了,后期的高效、稳定的运行也是至关重要的,特别是对这种相对复杂的大型系统。整个架构体系涉及到的中间件比较多,各个环节都需要监控起来,我们除了使用第三方监控软件,也自己开发了一些维度的监控...
    文章 2018-07-05 2587浏览量
  • 云上个性化推荐——基于PAI和Hologres的个性化推荐...

    缺少算法人员搭建企业推荐系统,影响企业提升市场竞争常见推荐方案二:开源框架自建推荐系统越来越多的企业选择结合AI技术实现企业推荐系统,但使用开源框架自建推荐系统,也存在诸多问题,影响业务发展:成本高 ...
    文章 2021-04-13 293浏览量
  • 实时数仓入门训练营:基于Hologres的实时数仓新架构

    阿里客户体验系统(CCO)实时数仓改造2020双十一活动期间,实时计算 Flink 版+Hologres为阿里客户体验系统(CCO)构建了集实时化、自动化、系统化于一体的用户体验实时数仓。以前的阿里客户体验系统(CCO)也是典型的...
    文章 2021-07-14 1669浏览量
  • 云上个性化推荐:基于PAI和Hologres的个性化推荐最佳...

    简介:常见的个性化推荐系统包括日志收集、数据加工、召回、排序、离线/在线效果评估等诸多环节,对于中小客户存在技术门槛高、搭建周期长等问题,阿里巴巴计算平台基于PAI、Hologres、MaxCompute、DataWorks等产品...
    文章 2021-04-12 628浏览量
  • DataWorks产品月刊合集

    MapReduce功能2020年4月3日正式启动商业化移动版DataWorks更新技术长文:《一分钟搭建会话机器人,阿里是怎么做到的?DataWorks 2020-02 产品月刊技术长文:《万字深度解析,飞天大数据平台DataWorks 如何撑起阿里99...
    文章 2020-11-11 8314浏览量
  • 安排!活动素材的亿级用户精准投放

      业务流程层是闲鱼投放系统的关键,主要负责投放活动的检索,根据调用方传入的用户信息和资源位信息,返回该资源位下符合该用户的活动。  具体的检索逻辑如上图所示,首先在DB中查询当前资源位下的所有在线活动...
    文章 2019-02-28 16396浏览量
  • 大数据中心在医院的落地,需如何去做集成融合与利用

    大数据与AI时代的到来,近些年医院信息中心的工作人员非常关注一个问题:首先是医院有哪些数据应用已落地,其次是如果要想落地,医院信息中心应该怎么做融合和集成?雷锋网了解到,通常情况下,医院信息系统应用可...
    文章 2017-10-25 1257浏览量
  • HBase全网最佳学习资料汇总

    在HBase的集群环境上用真实GIS数据对上述方法进行了验证,结果表明,提出的系统具有较高的海量数据存储和检索性能,实现了海量地理信息数据的高效存储和实时高速检索。基于HBase的金融时序数据存储系统:金融类时序...
    文章 2017-09-20 6426浏览量
  • 华为全网首发的 Kafka 技术手册,从基础到实战...

    consumer_offsets+总结)第八部分:高级应用通过这一部分的学习,你可以学习一下内容:作为运维人员掌握命令行工具使用 Connect 进行流信息处理掌握延迟消息、流式处理等Kafka 和 SpringBoot 整合内容涵盖:(命令行...
    文章 2021-11-10 39浏览量
  • 亚马逊全面发力AI,推机器学习托管服务、四项新工具,...

    现在网络上的音频内容越来越多,怎么从音频中识别检索提取出特定的信息是个大难题。亚马逊今天推出的这个革命性的引擎,能够把音频转换成文本,使得音频信息也可以被检索了。Q:辣音频转文本可以用在哪些场景?好多...
    文章 2018-01-01 931浏览量
  • 一文详尽如何破解车联网数据采集存储难题

    搭建需求应用系统。xff08;二&xff09;车联网典型数据场景–新能源汽车监控BEV新能源汽车监控场景主要是为了满足GB/T32960国标和地标的需求&xff0c;以便车厂能够获得平台符合性及车辆符合性认证。整个车厂建设过程中&...
    文章 2021-05-07 1358浏览量
  • 持续定义Saas模式云数据仓库+实时搜索

    下图是MaxCompute和Hologres两个组件融合之后的实时分析简单架构,即云原生HASP系统,通过该架构我们可以实现实时写入和实时查询。与其他的OLAP应用不同的是这种架构下Hologres和MaxCompute是一体的,可以共享存储,...
    文章 2020-10-12 11192浏览量
  • 云原生大数据架构中实时计算维表和结果表的选型实践

    在这种场景下,实时计算任务通过订阅业务实时数据源,将信息实时秒级分析,最终呈现在业务大屏中给决策者使用,方便判断企业运营状况和活动促销的情况。实时推荐:实时推荐主要是基于 AI 技术,根据用户喜好进行个性...
    文章 2021-09-14 1750浏览量
  • 跨境物流链路怎么做?菜鸟工程师打造了全球通关“神器...

    作为一个数据产品,最基本的的诉求就是能保证数据实时性、准确性,那怎么在大促情况下能够做到99.99%数据准确性?这是数据中心面临的最大的一个挑战。实时性(秒级生效) 业务系统通过消息埋点的方式记录各个链路节点...
    文章 2018-12-03 2228浏览量
  • 毫秒级从百亿大表任意维度筛选数据,是怎么做到的.

    搭建了人群圈选引擎之后,我们重点改造了我们的消息推送系统,作为人群精细化运营的一个重要落地点。3.1 闲鱼消息推送简介 消息推送(PUSH)是信息触达用户最快捷的手段。闲鱼比较常用的PUSH方式,是先离线计算好...
    文章 2018-11-27 5862浏览量
  • 从零搭建推荐体系:概述及标签体系搭建(上)

    目前市场上对于电子商务的推荐系统有亚马逊、阿里巴巴、豆瓣网、当当网等,信息检索的有谷歌、雅虎、百度等,以及在其它周边领域广泛运用如移动应用、电子旅游、互联网广告等。本文只阐述网页内容,特制新闻方面的...
    文章 2017-08-01 2525浏览量
  • IBM陈剑:金融行业大数据解决方案实践

    未来这个模型就可以用到实时的一些反欺诈的应用里,真正的应用系统怎么来使用我们的平台。交易类的系统会相应的调取分析平台的结果,通过相应的模式进行一个判断,可能在申请新的信用卡或者某一笔授权交易的时候通过...
    文章 2017-09-01 1873浏览量
  • IBM陈剑:金融行业大数据解决方案实践

    未来这个模型就可以用到实时的一些反欺诈的应用里,真正的应用系统怎么来使用我们的平台。交易类的系统会相应的调取分析平台的结果,通过相应的模式进行一个判断,可能在申请新的信用卡或者某一笔授权交易的时候通过...
    文章 2017-09-28 1415浏览量
  • 耳目一新的在线答疑服务背后的核心技术

    我们的系统大家应该已经知道了,像 UBER 或者滴滴一样,学生需要答疑,老师看到答疑请求之后可以选择,到底这个题目讲还是不讲,通过这样的智能分析系统,我们可以慢慢获取老师信息。答疑供应预测 刚才讲到,不同...
    文章 2017-11-27 1293浏览量
  • DII4J-DII平台支持JAVA插件开发

    但对于一些数据规模相对较小的新兴业务场景来说,如果需要分别部署和接入IGRAPH、BE、RTP、TPP多个系统才能搭建起一个类似的推荐在线服务,成本是非常高的。而有了DII4J之后,用户直接在DII平台就可以搭建起一个简单...
    文章 2018-03-16 2227浏览量
  • 腾讯技术分享:微信小程序音视频技术背后的故事

    当有新的参与者进入房间,或者有人离开时,就需要对房间里的人进行信息广播,这就需要一个不错的 IM 系统负责收发消息。比如当 D 进入时,就可以向房间内的其它成员广播这个“I'm coming”的事件,这样 A B C 就可以...
    文章 2018-07-21 3031浏览量
  • 《MapReduce 2.0源码分析与编程实战》一1.2 HBase...

    例如,针对特定用户投放什么广告的决定,用户在电商网站购物时实时报价的决定,用户在搜索引擎检索时增加背景信息和关联内容,等等。很多这种使用案例可能不便于公开讨论,说多了我们就有麻烦了。当用户在电商网站上...
    文章 2017-05-02 2031浏览量
  • 【云周刊】第179期:王坚回顾阿里云10年:工程师拿命...

    同步大家一个好消息,来自数据库高级专家 周正中(德哥)接下来会给我们分享数据库相关的进阶课程,德哥主要会围绕全文检索和相似搜索实践、实时画像系统实践、图谱分析实践、实时时空数据分析实践以及数据库性能...
    文章 2018-07-12 7932浏览量
  • 微信团队分享:微信每日亿次实时音视频聊天背后的技术...

    其中 QoS 的反馈模块会收集接收视频的质量、网络状况等信息,通过服务器处理反馈到发送端,发送端再根据这些信息选择合适的视频编码的参数,这样就能实时适应不同的网络状况。目前,很多网络适配算法都是在 QoS ...
    文章 2018-01-05 2320浏览量
  • TableStore发布多元索引功能,打造统一的在线数据平台

    工业时代:开始出现管道和辅助产品,开始基于多个单功能产品和一些管道提供完整解决方案,用户只需要一步一步按照步骤就能搭建起来一个系统。智能时代:用户想存储海量数据,需要在线实时访问,那么只用一款产品就够...
    文章 2018-09-18 7082浏览量
  • Net 微服务架构技术栈的那些事

    2.6 系统日志集成庞大的系统中离不开日志系统,排查问题,记录相关敏感信息等都需要一个日志系统,这里选择使用ExceptionLess 日志系统,日志写入到ES中,并支持可视化UI进行日志管理,查询,平常遇到问题,直接通过...
    文章 2020-04-08 896浏览量
  • DockOne微信分享(九十):猎豹移动基于CoreOS在AWS上...

    这个图是借鉴了Yahoo的架构,非常的可爱形象,比普通的架构图更加生动,我们猎豹有很多广告业务,商业的开发同学做的ADserver,也会有很多流式数据实时处理的系统,通过data highway汇聚到大数据处理系统,Hadoop、...
    文章 2017-10-11 1859浏览量
  • HBase从入门到精通-经典资料汇总(持续更新v2019.10)

    HBase在消息系统的应用:介绍Facebook消息系统选择HBase存储的原因,包括电子邮件、即时通讯、短信、文本信息、Facebook站内信息 Pinterest 基于HBase的Feed架构设计:介绍了Pinterest的智能Feed架构设计及如何基于...
    文章 2019-12-17 4041浏览量
1 2 3 4 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化