备案控制台
探索云世界
开发者社区 Python技术进阶 文章 正文

【直播资料下载】Python 系列直播——深入Python与日志服务，玩转大规模数据分析处理实战第二讲

2019-03-06 1817
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 直播讲师：丁来强（成喆）——阿里高级技术专家，从事阿里云日志服务相关的产品与研发工作，擅长AIOps/SecOps的大数据分析平台构建与场景落地，擅长C++与Python语言等。PyCon历届讲师，曾经在中国PyCon2015、2016与2018分享过7场/6个不同议题，覆盖Jupyter扩展、大数据分析可视化、工作流调度、函数式、设计模式、Python核心语言等方面，广受好评。

流畅的Python数据处理及大数据处理ETL

Python 系列直播——深入Python与日志服务，玩转大规模数据分析处理实战

直播讲师：丁来强（成喆）——阿里高级技术专家，从事阿里云日志服务相关的产品与研发工作，擅长AIOps/SecOps的大数据分析平台构建与场景落地，擅长C++与Python语言等。
PyCon历届讲师，曾经在中国PyCon2015、2016与2018分享过7场/6个不同议题，覆盖Jupyter扩展、大数据分析可视化、工作流调度、函数式、设计模式、Python核心语言等方面，广受好评。

直播介绍：大数据分析中常常要对数据进行规整（ETL），而Python内置强大的数据结构以及语法（如推导式、切片、函数式编程等）对于数据处理又非常友好。本节介绍如何灵活、流畅地使用这些特性，在日志服务场景中对大规模不规则日志进行常规ETL操作。

_2019_03_06_9_49_40

欢迎加入python技术进阶钉群与大牛交流经验


_2019_01_15_10_28_39


PPT下载： https://yq.aliyun.com/download/3338
视频回顾： https://yq.aliyun.com/live/910
文章标签：
日志服务
Python
监控
C++
数据挖掘
关键词：
数据分析python
Python数据分析
数据分析实战
Python实战
Python日志
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
小六码奴
目录
相关文章
小Lee
|
2天前
|
数据可视化 数据挖掘 Python
Python中数据分析工具Matplotlib
【4月更文挑战第14天】Matplotlib是Python的数据可视化库，能生成多种图表，如折线图、柱状图等。以下是一个绘制简单折线图的代码示例： ```python import matplotlib.pyplot as plt x = [1, 2, 3, 4, 5] y = [2, 4, 6, 8, 10] plt.figure() plt.plot(x, y) plt.title('简单折线图') plt.xlabel('X轴') plt.ylabel('Y轴') plt.show() ```
小Lee
5 1
小Lee
|
2天前
|
数据采集 SQL 数据可视化
Python数据分析工具Pandas
【4月更文挑战第14天】Pandas是Python的数据分析库，提供Series和DataFrame数据结构，用于高效处理标记数据。它支持从多种数据源加载数据，包括CSV、Excel和SQL。功能包括数据清洗（处理缺失值、异常值）、数据操作（切片、过滤、分组）、时间序列分析及与Matplotlib等库集成进行数据可视化。其高性能底层基于NumPy，适合大型数据集处理。通过加载数据、清洗、分析和可视化，Pandas简化了数据分析流程。广泛的学习资源使其成为数据分析初学者的理想选择。
小Lee
4 1
绝不原创的飞龙
|
4天前
|
Python 数据挖掘 存储
Python 数据分析（PYDA）第三版（七）（4）
Python 数据分析（PYDA）第三版（七）
绝不原创的飞龙
24 1
绝不原创的飞龙
|
Python Shell 存储
Python 数据分析（PYDA）第三版（七）（3）
Python 数据分析（PYDA）第三版（七）
绝不原创的飞龙
29 1
Python 数据分析（PYDA）第三版（七）（3）
绝不原创的飞龙
|
机器学习/深度学习 数据可视化 Python
Python 数据分析（PYDA）第三版（六）(2)
Python 数据分析（PYDA）第三版（六）
绝不原创的飞龙
47 0
绝不原创的飞龙
|
机器学习/深度学习 Python 数据挖掘
Python 数据分析（PYDA）第三版（六）(1)
Python 数据分析（PYDA）第三版（六）
绝不原创的飞龙
48 0
绝不原创的飞龙
|
4天前
|
Python 数据格式 XML
Python 数据分析（PYDA）第三版（三）（1）
Python 数据分析（PYDA）第三版（三）
绝不原创的飞龙
54 0
是阿超
|
17天前
|
Java
使用Java代码打印log日志
使用Java代码打印log日志
是阿超
73 1
风水道人
|
18天前
|
Linux Shell
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
风水道人
72 1
liuyunshengsir
|
22天前
|
SQL 关系型数据库 MySQL
MySQL数据库，可以使用二进制日志（binary log）进行时间点恢复
对于MySQL数据库，可以使用二进制日志（binary log）进行时间点恢复。二进制日志是MySQL中记录所有数据库更改操作的日志文件。要进行时间点恢复，您需要执行以下步骤： 1. 确保MySQL配置文件中启用了二进制日志功能。在配置文件（通常是my.cnf或my.ini）中找到以下行，并确保没有被注释掉： Copy code log_bin = /path/to/binary/log/file 2. 在需要进行恢复的时间点之前创建一个数据库备份。这将作为恢复的基准。 3. 找到您要恢复到的时间点的二进制日志文件和位置。可以通过执行以下命令来查看当前的二进制日志文件和位
liuyunshengsir
94 1

Python技术进阶

热门文章

最新文章

  • 1
    更优性能与性价比，从自建 ELK 迁移到 SLS 开始
  • 2
    Seata常见问题之服务端 error日志没有输出,客户端执行sql报错如何解决
  • 3
    MySQL数据库，可以使用二进制日志（binary log）进行时间点恢复
  • 4
    C++系统日志库精选：深入剖析glog与log4cplus，轻松搭建高效日志系统
  • 5
    Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
  • 6
    使用Java代码打印log日志
  • 7
    【深入探究 C++ 日志库清理策略】glog、log4cplus 和 spdlog 的日志文件管理策略
  • 8
    【Shell 命令集合 系统管理 】Linux 自动轮转(log rotation)日志文件 logrotate命令 使用指南
  • 9
    ALTER MATERIALIZED VIEW LOG :语句来更改现有物化视图日志的存储特征或类型。
  • 10
    Kubernetes 集群监控与日志管理实践
  • 1
    「多线程大杀器」Python并发编程利器：ThreadPoolExecutor，让你一次性轻松开启多个线程，秒杀大量任务！
    31
  • 2
    深入理解Python数据结构中的深浅拷贝
    23
  • 3
    Jinja2：使用Python进行模板渲染的艺术
    52
  • 4
    深入理解Python中的try-except语句，避免代码崩溃的噩梦
    17
  • 5
    python编程简介（一）
    93
  • 6
    python操作列表方法（二）
    29
  • 7
    python操作列表方法（一）
    25
  • 8
    python测试代码（三）
    18
  • 9
    python测试代码（二）
    19
  • 10
    python测试代码（一）
    17

    • 相关课程

    更多
  • Quick BI在业务数据分析中的实战应用
  • Python 数据可视化库 Matplotlib 快速入门
  • Python 数据分析库 Pandas 快速入门
  • 深入理解数据分析
  • 场景实践-基于阿里云Quick BI 对MOOC网站日志分析
  • 场景实践-通过阿里云数据分析工具实现共享单车骑行分析

    • 相关电子书

    更多
  • Python第四讲——使用IPython/Jupyter Notebook与日志服务玩转超大规模数据分析与可视化
  • 互联网下半场的角逐，玩转轻资产的大数据服务—图（关系网络）数据分析与阿里应用
  • 如何使用大数据计算服务 MaxCompute进行数据分析

    • 相关实验场景

    更多
  • 使用Python完成RDS数据开发及分析
  • 倚天大数据电商数据分析快速实践
  • 使用CloudLens管理SLS日志采集
  • 使用CloudLens采集PolarDB日志并进行审计分析
  • 使用CloudLens采集RDS日志并进行审计分析
  • AnalyticDB MySQL游戏行业数据分析实践
    • 下一篇
    阿里云oss简介和使用流程