技术博文

Kafka 以消息存储系统在业界闻名，近几年来 Confluent 公司对 on Kafka 流式计算场景又先后推出了 Kafka Streams（流计算）、ksqlDB（基于 Kafka Streams 的类分析型 DB 系统）。笔者对发表在 SIGMOD 2021 上的论文《Consistency and Completeness: Rethinking Distributed Stream Processing in Apache Kafka》做一些总结，梳理 Kafka Streams 在流处理场景上的设计思路。

Jaeger的高可用最核心的部分是Jaeger后端（包括Collector、Kafka、Flink、DB、Query、UI），我们最好的方式是寻找一个能够兼容Jaeger的后端系统，提供高可靠、高性能的能力。而SLS最近发布的Trace服务恰巧可以完美解决这个问题。SLS最大的一个特点就是高性能、弹性和免运维，让用户轻松应对激增流量或者规模评估不准确的问题，SLS服务本身提供99.9%的可用性以及11个9的数据可靠性。

阿里云日志服务（SLS）通过提供一个Splunk插件（Add-on）实现SLS与Splunk的日志对接, 以便确保阿里云上的所有法规、审计、与其他相关日志能够导入到客户的安全运维中心（SOC）中。本文主要介绍如何在该Splunk Add-on中使用ECS实例RAM角色的鉴权方式，完成日志服务（SLS）到Splunk的日志投递过程。

OSS 向量 Bucket 的检索结果返回的是向量 Key 和 Metadata，而非原始文件本身。要将检索结果关联回原始文件（如图片、文档、视频），需要在写入向量时构建映射关系。

在今天这样以AIGC为代表的AI时代下，了解训练场景对于存储的具体诉求同样是至关重要的。本文将尝试解读WEKA的一个相关报告，来看看AIGC对于存储有哪些具体的性能要求。

K8s丰富的controller为分布式任务编排提供了极大的便利，然而任务的时长可能很短（如定时清理数据的任务），甚至有些任务因为一启动就运行失败出现秒退的情况，这给采集任务日志带来了很大的挑战。本文将基于高性能轻量级可观测采集器iLogtail探讨Job日志的多种采集方案，分析这些方案在不同场景下对日志采集所能做到稳定性保证以及方案优化空间。

智能异常分析的检测结果通过 SLS 告警功能输出到用户配置的通知渠道。在智能巡检场景中，单个任务往往会巡检大量的实体对象，涉及到的对象规则很多，我们通过SLS新版告警可以实现较好的对于巡检事件的管理。

本文档介绍如何将CDH6中本地HDFS数据迁移到文件存储HDFS版，并配置CDH上的HDFS服务、Hive服务、Spark服务、HBase服务使用文件存储HDFS版，实现存储计算分离。

本文档介绍如何使用Sqoop工具实现文件存储HDFS版和关系型数据库MySQL之间的双向数据迁移。

在配置告警通知的时候，通常我们需要知道告警的触发详情。例如Nginx访问错误告警，我们需要知道错误的HTTP Status 分布，错误的机器IP等信息，并且需要将这些信息体现在通知中，以便在接收到告警通知后，能够一目了然地知道发生了什么事情。那么在创建告警规则的时候，我们就需要进行合理的配置，使得告警在触发后，可以将这些信息放在合适的位置发送给通知服务，从而在通知模板里可以被引用到，从而被正确地通知。

全新发布的云定义存储 CDS 和传统的存储阵列、分布式存储、软件定义存储的区别在哪里？阿里云存储团队如何看待将来存储的发展趋势？本文邀请了 CDS 研发团队的核心技术负责人为大家揭开围绕着阿里云 CDS 的种种谜团。

Loki是受Prometheus启发的水平可扩展、高可用、多租户日志聚合系统。用户既可以将Loki告警直接接入SLS开放告警，也可以先将Loki接入Grafana或Alert Manager，再借助Grafana或Alert Manager实现Loki间接接入SLS开放告警。

Prometheus作为监控告警的事实标准，提供了标准的指标采集、数据查询以及告警管理开源方案。但是同时在短信、语音、微信等告警通知渠道，告警管理的便捷方面都有缺陷。阿里云日志服务SLS致力于为用户提供统一的可观测性平台，为用户提供了企业级的AlertManager服务，解决客户在告警管理工作中遇到的问题。

对于运维的日常工作来说，服务器监控是必须且最基础的一项内容。在企业基础设施运维过程中，管理员必须能够掌握所有服务器的运行状况，以便及时发现问题，尽可能减少故障的发生。本次主要介绍如何使用智能巡检，帮助您快速完成机器（ECS）相关指标的监控，降低您设置告警的复杂规则和冗余的设置。

本文介绍了基于身份证信息的实名认证API，适用于金融、电商、政务、医疗等领域的身份核验场景。内容包含Python与PHP调用示例及返回结果解析，助力开发者快速集成安全合规的身份验证功能。

本文深入探讨了基于 WebAssembly (WASM) 和 WebWorker 的高性能图像处理技术，通过优化线程架构与内存管理，实现 4K 图像处理性能比纯 JS 提升 23 倍，同时保持界面流畅（60fps）。文章从技术演进、流水线设计到内存管理实战技巧全面解析，并提供性能瓶颈分析与调优方法。实验表明，在 4K+ 分辨率下，“计算靠近数据”策略可进一步提升性能 40%。最终，方案在生产环境中达成 8K 实时处理 (<30ms/帧)，展现浏览器端图像处理的强大潜力。

随着全国机动车保有量突破4.53亿辆，交通拥堵与污染问题日益严峻，各城市陆续实施限行政策。探数API推出的车辆限行查询服务覆盖200+城市，提供实时限行数据，包括本地/外地燃油车及新能源车的限行规则、区域和时间等信息。其功能涵盖单个城市限行政策查询与支持城市的全面列表，助力用户精准规划出行。通过HTTP POST请求即可轻松接入，适用于导航平台和个人开发者。在“双碳”目标下，该API推动绿色出行与智能交通发展，为个人、企业和城市治理提供高效解决方案。

本文介绍了磁盘的物理组成和如何新增磁盘。磁盘主要由主轴、磁盘盘、磁头和磁头臂组成，其中磁道、簇、扇面和扇区是磁盘的基本存储单元。新增磁盘的步骤包括关闭操作系统、选择磁盘类型和容量、创建新虚拟磁盘并完成配置。常见的磁盘接口类型有IDE、SCSI、SATA和SAS。

Linux系统基于"一切皆文件"的理念，重要文件分布在如/root（root用户目录）、/home（普通用户目录）、/etc（应用配置）、/dev（设备文件）、/boot（内核及启动文件）、/proc（动态系统信息）、/lib64（库文件）、/opt（软件存放）、/tmp（临时文件）。"[root@localhost ~]#"代表管理员在root目录，"$"代表普通用户。创建新用户用`useradd`命令。调节终端字体大小：Ctrl+Shift++增大，Ctrl+减号缩小。绝对路径从根目录开始，相对路径从当前目录开始。

通常，MATLAB中绘制三维曲面图，先要生成网格数据，再调用mesh函数和surf函数绘制三维曲面。若曲面用含两个自变量的参数方程定义，则还可以调用fmesh函数和fsurf函数绘图。若曲面用隐函数定义，则可以调用fimplicit3函数绘图。

为了保证多租户场景下，单个用户可以获得与独占资源时相同的体验，云服务需要综合利用负载均衡、请求优先级调度、实例隔离等多项技术，让用户流量恰当地分布在整个集群中。

iLogtail是阿里云中简单日志服务又名“SLS”的采集部分。 它用于收集遥测数据，例如日志、跟踪和指标，目前已经正式开源(https://github.com/alibaba/ilogtail)。本文通过介绍ilogtail如何在K8S环境进行安装、配置、使用的最简流程，帮助用户使用预编译版本快速上手ilogtail日志采集。

Alibaba Cloud Toolkit 是一款非常优秀的插件，新增SLS日志服务的功能，针对软件开发者日常工作中常见的问题排查场景，将日志服务平台的功能集成到ide当中，省去了不同窗口之间来回切换的时间，大大提高了日常工作的效率

SLS最新推出了告警智能合并能力，让用户只需一些极简的配置，便可开启告警的智能降噪，抑制告警风暴。

阿里云SLS告警响应升级，通知渠道新增了对函数计算的支持，从而可以在告警触发的时候进行一定的自动化响应操作，以便进行故障自愈，减轻手动运维压力，提高系统的可用性。

阿里云日志服务（SLS）提供了Log，Metric，Trace等三种数据快速接入的能力，同时也提供了丰富的分析功能和可定制化的Dashboard的能力，客户可以利用SLS快速的搭建可观测性平台，让用户更加关注于分析，降低用户接入各类数据的门槛。本文主要讲述应用接入SLS Trace服务后，针对各种场景化如何配置告警。

本文描述了阿里云块存储快照服务基于高性能 ESSD 云盘提升快照服务性能，提供轻量、实时的用户体验及揭秘背后的技术原理。依据行业发展及云上数据保护场景，为企业用户及备份厂商提供基于快照高级特性的数据保护的技术方案，满足云上用户数据保护的迫切需求，保障云上企业业务连续性。

AES加密解密

SLS在2021年4月份正式发布了对OpenTelemetry Trace 1.0版本的支持，完全兼容OpenTelemetry Trace1.0版本的所有字段，提供了Trace显示、分析、拓扑展示等功能。在功能发布后，众多客户开始接入SLS Trace并深度使用，其中对我们也提出来非常多的建议和需求。从中我们提取出了呼声最高的一些功能和优化点，加入到了SLS的Trace方案1.1版本中。

阿里云的云监控服务用于监控阿里云资源和互联网应用，包括阈值告警和事件告警两种模式，支持配置多种告警通知渠道。您可以将日志服务开放告警配置为其中一个通知渠道，从而由日志服务告警系统完成告警降噪、静默等处理，并且接入包括短信、电话、微信、钉钉、邮箱在内的10多种通知渠道。