Kafka

首页 标签 Kafka
# Kafka #
关注
10043内容
数据集成到底在集成什么?数据库、API、文件、消息队列一次讲清
数据集成远不止“搬数据”:它本质是构建企业级数据供应链,统一连接、变化识别、结构转换、异常处理与运行调度。需按数据特征(来源、量级、频次、时效)选择数据库(CDC)、API(契约)、文件(协议)或消息队列(事件),实现可信、可持续、可追踪的数据流动。(239字)
|
13天前
|
云呼叫中心部署阿里云,高可用架构落地经验分享
本文围绕云呼叫中心在阿里云上的高可用架构落地展开,系统分析多可用区部署、SLB 负载均衡、ACK 弹性伸缩、RDS 高可用、Redis 集群、Kafka 跨区副本、VPC 网络规划、监控告警与故障切换等关键技术点。文章给出三层高可用架构、核心配置参数、Terraform 可部署模板、脱敏实测数据、容灾切换时序、踩坑记录与成本对比。核心结论:云呼叫中心建议采用“多可用区 + SLB + 无状态计算 + 主备数据”架构,核心组件跨可用区部署,端到端可用性可达 99.95% 以上,RDS 主备切换 ≤30s,Redis 故障转移 ≤15s,Kafka 副本切换 ≤10s。
|
14天前
|
Kafka 接入 AI 的三条路线:MCP 提案、会话记忆与实时上下文
Kafka 接入 AI 的三条路线:第一方 MCP Server 提案、Streams 会话记忆、Flink SQL 实时上下文,附选型对比与权限清单
|
23天前
| |
来自: 云原生
实时上下文:当模型能力趋于充裕,AI 生产化的瓶颈正移向实时数据链路
8 月 28 日,由极客传媒 InfoQ、阿里云和 IBM 联合举办的「AI 实时数据沙龙 · 上海站」上,三位来自阿里云和 IBM 的一线工程师围绕这条链路做了分享:一场讲数据流平台面向 AI 的整体演进,另两场分别落到阿里云消息队列 Confluent 版(ApsaraMQ for Confluent)和云消息队列 Kafka 版(ApsaraMQ for Kafka)两款产品的演进与实践。三场分享层层承接,给出的判断是一致的:当模型能力趋于充裕,AI 生产化的瓶颈正移向实时数据链路。
|
27天前
| |
来自: 云原生
存算分离不只是弹性:一份 Kafka 数据如何同时服务当下与未来
本文整理自 Apache 2026 技术分享《实时湖仓管道:分离式 Kafka 中的原生入湖与内嵌计算》。
|
2月前
| |
来自: 云原生
还在给 AI “喂冷饭”?8.28 上海沙龙:带你跨越 AI 实时上下文鸿沟
8 月 28 日(周五)13:30-16:30,阿里云 ApsaraMQ × IBM Confluent 联合在上海举办「AI 实时数据沙龙」,带你跨越 AI 实时上下文鸿沟。
|
2月前
| |
来自: 云存储
流数据还在写文件慢慢导?Kafka Connect 一条链路直接入湖【详解 OSS Tables 系列】
本文详解如何通过Kafka Connect Iceberg Sink Connector,将Kafka流数据实时写入阿里云OSS Tables数据湖。涵盖环境准备、Table Bucket/命名空间/表创建、Connector配置及权限设置,实现免运维、Exactly-Once的流式入湖。
|
2月前
|
用 Kafka 解耦大模型调用:构建可重试、可追踪的异步任务队列
本文介绍一种基于Kafka的异步大模型调用架构:将请求接入与模型执行解耦,通过任务ID幂等、手动位点提交、死信队列和结果持久化,保障高可靠性与可观测性,适用于摘要、分类等非实时场景。(239字)
|
2月前
| |
来自: 数据库
Atlas 血缘采集延迟从 30 秒压到 3 秒,我们做了哪些优化 背景
本文分享了Atlas血缘采集链路的实时性优化实践:针对P99延迟高达35秒的问题,通过Kafka消费调优、JanusGraph批量写入、Solr索引异步化等三层关键优化,将端到端血缘可见延迟压至2秒内,显著提升故障定位效率。(239字)
免费试用