技术博文

通过基于IoT的全链路实时质量，业务使用狄仁杰进行全链路埋点后，可一键接入魔洛哥平台，实现终端问题的实时感知和链路分析，以及智能终端系统业务场景的全链路实时质量。整体方案接入成本低（分钟级别接入），可实现全链路的实时质量分析，以及精准的终端预警能力。帮助开发运维同学实时发现问题，快速问题的定位分析。

Alibaba Cloud Lens 作为云产品可观测平台，可以从成本、性能、安全、数据保护、稳定性、访问分析六个纬度，提供对存储类、网络类、数据库类等云产品的精细化运维辅助分析能力。让企业在保障业务敏捷性的前提下，低门槛实现对云产品的可观测。

本文介绍如何在文件存储HDFS版上使用 TensorFlow。

本文档介绍文件存储HDFS版和对象存储OSS之间的数据迁移过程。您可以将文件存储HDFS版数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到文件存储HDFS版上。

将企业级存储和云的特点进行完美的融合是云上企业级存储的目标，它打开存储更多新的维度，在保障用户业务永续的同时，帮助用户更好的进行业务创新。本文属ESSD技术解读的总篇，总体介绍ESSD 云盘创新融合了云和企业级存储的特性，以服务为中心，为用户提供了更便捷、更智能的存储服务体验。

AES加密解密

Jaeger的高可用最核心的部分是Jaeger后端（包括Collector、Kafka、Flink、DB、Query、UI），我们最好的方式是寻找一个能够兼容Jaeger的后端系统，提供高可靠、高性能的能力。而SLS最近发布的Trace服务恰巧可以完美解决这个问题。SLS最大的一个特点就是高性能、弹性和免运维，让用户轻松应对激增流量或者规模评估不准确的问题，SLS服务本身提供99.9%的可用性以及11个9的数据可靠性。

以下内容来自【2021阿里云开发者大会】中的内容分享，本次分享的题目是《AIOps：自适应机器学习异常检测》，该分享意在阐述机器学习算法在企业中的落地实践，通过算法和算力尽可能的提升企业运维人员的效率，为业务的快速发展保驾护航。

SLS新版告警支持多种监控目标，如SLS的日志存储，时序存储；也支持对外部系统如Promethus,Grafana,Zabbix产生的告警进行管理；在对SLS的存储进行监控时，用户可以自定义告警监控规则或者使用内置的告警规则。自定义告警监控规则主要包括监控目标，触发条件，行动配置等。本文主要介绍在创建自定义告警规则时，如何使用统一的查询分析语法来查询并定义监控目标。

Linux系统基于"一切皆文件"的理念，重要文件分布在如/root（root用户目录）、/home（普通用户目录）、/etc（应用配置）、/dev（设备文件）、/boot（内核及启动文件）、/proc（动态系统信息）、/lib64（库文件）、/opt（软件存放）、/tmp（临时文件）。"[root@localhost ~]#"代表管理员在root目录，"$"代表普通用户。创建新用户用`useradd`命令。调节终端字体大小：Ctrl+Shift++增大，Ctrl+减号缩小。绝对路径从根目录开始，相对路径从当前目录开始。

数据驱动创新，创新鉴于未来。

连接1次孤岛，服务N个场景。Tapdata Live Data Platform （LDP）通过为实时数据集成增加一个高速缓存的方式，将企业核心的常用的数据实时复制到缓存层（最后一次ETL），再从缓存层为企业的多个应用场景快速提供数据， 实现一次打通，多次复用的降本增效价值。Tapdata LDP 现已入驻阿里云云市场。

K8s丰富的controller为分布式任务编排提供了极大的便利，然而任务的时长可能很短（如定时清理数据的任务），甚至有些任务因为一启动就运行失败出现秒退的情况，这给采集任务日志带来了很大的挑战。本文将基于高性能轻量级可观测采集器iLogtail探讨Job日志的多种采集方案，分析这些方案在不同场景下对日志采集所能做到稳定性保证以及方案优化空间。

本文是对 SIGMOD 2021 上《JSON Tiles: Fast Analytics on Semi-Structured Data》的学习总结，有错误之处欢迎交流。

智能异常分析的检测结果通过 SLS 告警功能输出到用户配置的通知渠道。在智能巡检场景中，单个任务往往会巡检大量的实体对象，涉及到的对象规则很多，我们通过SLS新版告警可以实现较好的对于巡检事件的管理。

本文档介绍如何将CDH6中本地HDFS数据迁移到文件存储HDFS版，并配置CDH上的HDFS服务、Hive服务、Spark服务、HBase服务使用文件存储HDFS版，实现存储计算分离。

本文档介绍如何使用Sqoop工具实现文件存储HDFS版和关系型数据库MySQL之间的双向数据迁移。

本文档主要介绍在文件存储HDFS版上搭建及使用 Presto。

在配置告警通知的时候，通常我们需要知道告警的触发详情。例如Nginx访问错误告警，我们需要知道错误的HTTP Status 分布，错误的机器IP等信息，并且需要将这些信息体现在通知中，以便在接收到告警通知后，能够一目了然地知道发生了什么事情。那么在创建告警规则的时候，我们就需要进行合理的配置，使得告警在触发后，可以将这些信息放在合适的位置发送给通知服务，从而在通知模板里可以被引用到，从而被正确地通知。

SLS发布了一款日志应用：告警管理中心；告警管理中心是一套以业务为中心告警管理运维平台，企业可以将同时将已有的监控告警平台如Zabbix，Prometheus，Datadog等产生的告警和SLS上的Project/Logstore等资源产生的告警添加到告警运维运维中心进行统一的告警管理和通知配置，将相关业务的告警收敛到一个地方进行运维管理，可以有效的提高运维效率。

介绍Hadoop 大数据系统在文件存储 HDFS 版上的最佳实践

本文档主要介绍如何在挂载文件存储HDFS版的 Hadoop 集群上安装及使用 Spark。

非常有幸参加了QCon上海站的可观测分会场，并和大家分享阿里在可观测性数据引擎的一些思考和技术实践，本文主要是对于分享的文字整理。

除了在SLS控制台创建告警监控以外，SLS的SDK也提供了对告警的管理功能，其中主要包括了初始化告警资源，告警监控规则的增删改查，告警资源的增删改查等功能。

Loki是受Prometheus启发的水平可扩展、高可用、多租户日志聚合系统。用户既可以将Loki告警直接接入SLS开放告警，也可以先将Loki接入Grafana或Alert Manager，再借助Grafana或Alert Manager实现Loki间接接入SLS开放告警。

阿里云日志服务提供可托管、可扩展、高可用的数据加工服务。数据加工服务可用于数据的规整、富化、流转、脱敏和过滤。本文为读者带来了数据加工动态解析与分发的最佳实践。

Zabbix作为常用的开源监控系统，提供了丰富的告警规则用于系统监控，同时支持多种告警通知渠道。您可以将日志服务告警系统设为Zabbix的一个通知渠道，由日志服务告警系统完成告警降噪、通知等处理，并且通过包括短信、电话、微信、钉钉、邮箱在内的10多种通知渠道发送给用户。

本文讲述了作者在使用阿里云产品进行技术探索的实践中，如何借助ECS、RDS、OSS、SLB和VPC构建高可用分布式系统。从最初的虚拟主机服务到全面的云服务，阿里云帮助解决了性能、负载均衡、数据存储和网络安全等问题。在面对性能优化、成本控制和安全管理的挑战时，作者通过监控、调整和采用安全措施确保了系统的高效运行。未来，作者将继续在云计算领域探索，利用AI、大数据及物联网技术驱动业务创新和增长。

爬虫框架：Scrapy

现在，你要是还没听过“通义千问”、“通义听悟”，出门都不好意思和别人打招呼。那么，以其为代表的 AIGC（AI Generated Content）又是如何凭实力屡屡破圈，其发展更是经历了怎样的烈火烹油、鲜花着锦呢？

阿里云对象存储OSS是低成本高可靠的存储服务，使用阿里云OSS对象存储搭建个人网盘或企业网盘的方法

本文主要介绍IDaaS EIAM两种日志（管理操作+用户行为）接入SLS日志审计的最佳实践

本文是学习总结，有错误处欢迎交流。