-
系列文章：Kubernetes日志方案设计思路
换Sidecar工作量大不说，还会带来一系列其他的问题，比如怎么和CICD系统集成、资源消耗、配置规划、stdout采集不支持等等。从刚开始上的边缘业务，慢慢更多的核心业务接入，对于日志的可靠性要求越来越高，经常有...文章 2019-11-13 1869浏览量 -
一文看懂 K8s 日志系统设计和实践
换Sidecar工作量大不说，还会带来一系列其他的问题，比如怎么和CICD系统集成、资源消耗、配置规划、stdout采集不支持等等。从刚开始上的边缘业务，慢慢更多的核心业务接入，对于日志的可靠性要求越来越高，经常有...文章 2019-11-20 4061浏览量 -
基于Flume+Kafka+Elasticsearch+Storm的海量日志实时...
服务搭建起来了，后期的高效、稳定的运行也是至关重要的，特别是对这种相对复杂的大型系统。整个架构体系涉及到的中间件比较多，各个环节都需要监控起来，我们除了使用第三方监控软件，也自己开发了一些维度的监控...文章 2018-07-05 2587浏览量 -
云上个性化推荐——基于PAI和Hologres的个性化推荐...
缺少算法人员搭建企业推荐系统，影响企业提升市场竞争常见推荐方案二：开源框架自建推荐系统越来越多的企业选择结合AI技术实现企业推荐系统，但使用开源框架自建推荐系统，也存在诸多问题，影响业务发展：成本高 ...文章 2021-04-13 293浏览量 -
实时数仓入门训练营：基于Hologres的实时数仓新架构
阿里客户体验系统(CCO)实时数仓改造2020双十一活动期间，实时计算 Flink 版+Hologres为阿里客户体验系统(CCO)构建了集实时化、自动化、系统化于一体的用户体验实时数仓。以前的阿里客户体验系统(CCO)也是典型的...文章 2021-07-14 1669浏览量 -
云上个性化推荐：基于PAI和Hologres的个性化推荐最佳...
简介：常见的个性化推荐系统包括日志收集、数据加工、召回、排序、离线/在线效果评估等诸多环节，对于中小客户存在技术门槛高、搭建周期长等问题，阿里巴巴计算平台基于PAI、Hologres、MaxCompute、DataWorks等产品...文章 2021-04-12 628浏览量 -
DataWorks产品月刊合集
MapReduce功能2020年4月3日正式启动商业化移动版DataWorks更新技术长文：《一分钟搭建会话机器人，阿里是怎么做到的？DataWorks 2020-02 产品月刊技术长文：《万字深度解析，飞天大数据平台DataWorks 如何撑起阿里99...文章 2020-11-11 8314浏览量 -
安排！活动素材的亿级用户精准投放
业务流程层是闲鱼投放系统的关键，主要负责投放活动的检索，根据调用方传入的用户信息和资源位信息，返回该资源位下符合该用户的活动。 具体的检索逻辑如上图所示，首先在DB中查询当前资源位下的所有在线活动...文章 2019-02-28 16396浏览量 -
大数据中心在医院的落地，需如何去做集成融合与利用
大数据与AI时代的到来，近些年医院信息中心的工作人员非常关注一个问题：首先是医院有哪些数据应用已落地，其次是如果要想落地，医院信息中心应该怎么做融合和集成？雷锋网了解到，通常情况下，医院信息系统应用可...文章 2017-10-25 1257浏览量 -
HBase全网最佳学习资料汇总
在HBase的集群环境上用真实GIS数据对上述方法进行了验证，结果表明，提出的系统具有较高的海量数据存储和检索性能，实现了海量地理信息数据的高效存储和实时高速检索。基于HBase的金融时序数据存储系统：金融类时序...文章 2017-09-20 6426浏览量 -
华为全网首发的 Kafka 技术手册，从基础到实战...
consumer_offsets+总结）第八部分：高级应用通过这一部分的学习，你可以学习一下内容：作为运维人员掌握命令行工具使用 Connect 进行流信息处理掌握延迟消息、流式处理等Kafka 和 SpringBoot 整合内容涵盖：（命令行...文章 2021-11-10 39浏览量 -
亚马逊全面发力AI，推机器学习托管服务、四项新工具，...
现在网络上的音频内容越来越多，怎么从音频中识别检索提取出特定的信息是个大难题。亚马逊今天推出的这个革命性的引擎，能够把音频转换成文本，使得音频信息也可以被检索了。Q：辣音频转文本可以用在哪些场景？好多...文章 2018-01-01 931浏览量 -
一文详尽如何破解车联网数据采集存储难题
去搭建需求应用系统。xff08;二&xff09;车联网典型数据场景–新能源汽车监控BEV新能源汽车监控场景主要是为了满足GB/T32960国标和地标的需求&xff0c;以便车厂能够获得平台符合性及车辆符合性认证。整个车厂建设过程中&...文章 2021-05-07 1358浏览量 -
持续定义Saas模式云数据仓库+实时搜索
下图是MaxCompute和Hologres两个组件融合之后的实时分析简单架构，即云原生HASP系统，通过该架构我们可以实现实时写入和实时查询。与其他的OLAP应用不同的是这种架构下Hologres和MaxCompute是一体的，可以共享存储，...文章 2020-10-12 11192浏览量 -
云原生大数据架构中实时计算维表和结果表的选型实践
在这种场景下，实时计算任务通过订阅业务实时数据源，将信息实时秒级分析，最终呈现在业务大屏中给决策者使用，方便判断企业运营状况和活动促销的情况。实时推荐：实时推荐主要是基于 AI 技术，根据用户喜好进行个性...文章 2021-09-14 1750浏览量 -
跨境物流链路怎么做？菜鸟工程师打造了全球通关“神器...
作为一个数据产品，最基本的的诉求就是能保证数据实时性、准确性，那怎么在大促情况下能够做到99.99%数据准确性？这是数据中心面临的最大的一个挑战。实时性(秒级生效) 业务系统通过消息埋点的方式记录各个链路节点...文章 2018-12-03 2228浏览量 -
毫秒级从百亿大表任意维度筛选数据，是怎么做到的.
在搭建了人群圈选引擎之后，我们重点改造了我们的消息推送系统，作为人群精细化运营的一个重要落地点。3.1 闲鱼消息推送简介 消息推送(PUSH)是信息触达用户最快捷的手段。闲鱼比较常用的PUSH方式，是先离线计算好...文章 2018-11-27 5862浏览量 -
从零搭建推荐体系：概述及标签体系搭建(上)
目前市场上对于电子商务的推荐系统有亚马逊、阿里巴巴、豆瓣网、当当网等，信息检索的有谷歌、雅虎、百度等，以及在其它周边领域广泛运用如移动应用、电子旅游、互联网广告等。本文只阐述网页内容，特制新闻方面的...文章 2017-08-01 2525浏览量 -
IBM陈剑：金融行业大数据解决方案实践
未来这个模型就可以用到实时的一些反欺诈的应用里，真正的应用系统怎么来使用我们的平台。交易类的系统会相应的调取分析平台的结果，通过相应的模式进行一个判断，可能在申请新的信用卡或者某一笔授权交易的时候通过...文章 2017-09-01 1873浏览量 -
IBM陈剑：金融行业大数据解决方案实践
未来这个模型就可以用到实时的一些反欺诈的应用里，真正的应用系统怎么来使用我们的平台。交易类的系统会相应的调取分析平台的结果，通过相应的模式进行一个判断，可能在申请新的信用卡或者某一笔授权交易的时候通过...文章 2017-09-28 1415浏览量 -
耳目一新的在线答疑服务背后的核心技术
我们的系统大家应该已经知道了，像 UBER 或者滴滴一样，学生需要答疑，老师看到答疑请求之后可以选择，到底这个题目讲还是不讲，通过这样的智能分析系统，我们可以慢慢获取老师信息。答疑供应预测 刚才讲到，不同...文章 2017-11-27 1293浏览量 -
DII4J-DII平台支持JAVA插件开发
但对于一些数据规模相对较小的新兴业务场景来说，如果需要分别部署和接入IGRAPH、BE、RTP、TPP多个系统才能搭建起一个类似的推荐在线服务，成本是非常高的。而有了DII4J之后，用户直接在DII平台就可以搭建起一个简单...文章 2018-03-16 2227浏览量 -
腾讯技术分享：微信小程序音视频技术背后的故事
当有新的参与者进入房间，或者有人离开时，就需要对房间里的人进行信息广播，这就需要一个不错的 IM 系统负责收发消息。比如当 D 进入时，就可以向房间内的其它成员广播这个“I'm coming”的事件，这样 A B C 就可以...文章 2018-07-21 3031浏览量 -
《MapReduce 2.0源码分析与编程实战》一1.2 HBase...
例如，针对特定用户投放什么广告的决定，用户在电商网站购物时实时报价的决定，用户在搜索引擎检索时增加背景信息和关联内容，等等。很多这种使用案例可能不便于公开讨论，说多了我们就有麻烦了。当用户在电商网站上...文章 2017-05-02 2031浏览量 -
【云周刊】第179期：王坚回顾阿里云10年：工程师拿命...
同步大家一个好消息，来自数据库高级专家 周正中（德哥）接下来会给我们分享数据库相关的进阶课程，德哥主要会围绕全文检索和相似搜索实践、实时画像系统实践、图谱分析实践、实时时空数据分析实践以及数据库性能...文章 2018-07-12 7932浏览量 -
微信团队分享：微信每日亿次实时音视频聊天背后的技术...
其中 QoS 的反馈模块会收集接收视频的质量、网络状况等信息，通过服务器处理反馈到发送端，发送端再根据这些信息选择合适的视频编码的参数，这样就能实时适应不同的网络状况。目前，很多网络适配算法都是在 QoS ...文章 2018-01-05 2320浏览量 -
TableStore发布多元索引功能，打造统一的在线数据平台
工业时代：开始出现管道和辅助产品，开始基于多个单功能产品和一些管道提供完整解决方案，用户只需要一步一步按照步骤就能搭建起来一个系统。智能时代：用户想存储海量数据，需要在线实时访问，那么只用一款产品就够...文章 2018-09-18 7082浏览量 -
Net 微服务架构技术栈的那些事
2.6 系统日志集成庞大的系统中离不开日志系统，排查问题，记录相关敏感信息等都需要一个日志系统，这里选择使用ExceptionLess 日志系统，日志写入到ES中，并支持可视化UI进行日志管理，查询，平常遇到问题，直接通过...文章 2020-04-08 896浏览量 -
DockOne微信分享(九十）：猎豹移动基于CoreOS在AWS上...
这个图是借鉴了Yahoo的架构，非常的可爱形象，比普通的架构图更加生动，我们猎豹有很多广告业务，商业的开发同学做的ADserver，也会有很多流式数据实时处理的系统，通过data highway汇聚到大数据处理系统，Hadoop、...文章 2017-10-11 1859浏览量 -
HBase从入门到精通-经典资料汇总(持续更新v2019.10)
HBase在消息系统的应用：介绍Facebook消息系统选择HBase存储的原因，包括电子邮件、即时通讯、短信、文本信息、Facebook站内信息 Pinterest 基于HBase的Feed架构设计：介绍了Pinterest的智能Feed架构设计及如何基于...文章 2019-12-17 4041浏览量
