打造一款支持线上抓 systrace 的框架

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 打造一款支持线上抓 systrace 的框架

1、缘起


缘起是看到网易云音乐技术团队发布的一篇《systrace 统计方法耗时》的文章,文章讲解了如何通过 hook 的方式将 trace 开关打开,并实现不依赖 PC 开启 Trace 功能,实现线上抓取。 文章思路与流程非常清晰,是一个不错的实践(造轮子)机会,我将此文转发给正在研究 xcrash 和 xhook 的同事,我俩一拍即合,打算利用这个机会撸一个框架,并且,同事还给我发了一篇更全面的实践文章《抖音 Android 性能优化系列:新一代全能型性能分析工具 Rhea》,Rhea 经历过三次演进,我们将这些思路进行整合,开发出了一款属于我们自己的框架  Lancer


我们非常建议,在阅读这款框架源码的时候,一定要看下上述提到的两篇文章。


为什么我们也想做一个:


  • 脱离 PC 抓取 trace 可以帮助我们更好的定位问题,有很多 bug 我们是无法从自己的机型和环境进行复现的,往往需要客户配合来抓取一些日志来实现问题定位,并且,相比较我们自己埋点的日志来说,systrace 采集到的信息更丰富

2、能学到什么?


  • Gradle Transfrom 被废弃,学习使用最新的 TransfromAction
  • 利用 AsmClassVisitorFactory 实现方法插桩
  • 学会使用 xhook 来 hook native 函数
  • 使用 mmap 来优化 IO 性能问题

3、开发的过程中遇到了哪些问题?


插桩方法未正确闭合:

  • try catch 中的 catch 块,需要插桩方法结束标记
  • 在参考字节的 Reha 第一版时,Reha 有限制调用栈深度,所以,我们直接使用了 Stack 集合 size 为 6 来限制层级,以此来提高性能,但忘了考虑多线程调用的问题,故修复后使用 ThreadLocal 来为每个线程保存一份 Stack 来记录方法调用栈深度问题。但在 Rhea 的第三次改造中,Rhea 为了获得更丰富的信息,已取消层级限制。

4、还有哪些不足


  • 插桩方法使用的 class name 和 method name,可以考虑像 Matrix 那样,通过 method Id 来做,然后生成一份 method 映射表。但这么做的话,对于生成的 systrace 可能不太直观, 因为倒入 perfetto 的时候看到的都是 methid Id,可以做一个脚本,读取 systrace 内容,将 method id 拿到,然后通过映射表,恢复方法名,然后再重新写入 systrace,导入 perfetto 查看。Reha 考虑线下用户的易用性,在线下模式打包阶段直接插入的方法名
  • 目前仅在线下使用,理由与 Rhea 一致:

目前 Trace 工具更多的还是在线下使用,由于插桩过多影响了包大小,使得我们线上部分只能对小规模的用户群体定向打开,没法全量上线定位线上大规模用户的性能问题

5、使用


由于放置在 github 的源码没有对外发布依赖,故这里就介绍下如何使用,我相信,如果有同学对这方面有兴趣的话,这一定难不倒他(主要是我们太懒了,笑哭)。

由于 github 项目使用的是复合构建引入的插件模块,如果想接入到自己项目的话,可以参考 setting.gradle,通过 includebuild 来引入插件模块。


在 app 模块的 build.gradle 中使用 tracePlugin 插件:


plugins {
    id 'com.android.application'
    id 'org.jetbrains.kotlin.android'
    id 'tracePlugin'
}
trace {
    pkg = "com.bomber.strace"
    ignoreClass = [
        "com.bomber.strace.*.bean.*",
        "com.bomber.*.R",
        "com.bomber.*.R\\\$.*",
        "com.bomber.*.BuildConfig",
    ]
}
复制代码
  • tracePlugin 插件支持 pkg 配置要插桩的包路径,这非常友好,对于一些三方模块,我们暂时没必要对其进行插桩,我们只定位业务模块发生的问题
  • tracePlugin 插件还支持 ignoreClass 来忽略掉一些不需要对其插桩的类,例如 javaBean 和 R 类等,类路径支持正则匹配


在 Application 中对其进行初始化:


class LancerApp : Application() {
    override fun attachBaseContext(base: Context?) {
        super.attachBaseContext(base)
        installLancer()
    }
    private fun installLancer() {
        val traceDir = filesDir.absolutePath + File.separator + "trace"
        val r = Lancer.getInstance().initialize(
            Build.VERSION.SDK_INT,
            traceDir,
            BuildConfig.DEBUG
        )
        Log.d("TraceApp", "r = $r")
    }
}
复制代码


initialize 方法需要传入三个参数:


  • 获取 Android SDK 版本
  • trace 文件存储目录,存储  trace 文件时使用
  • 是否为 debug 环境,打印日志时使用


在需要记录 trace 日志和关闭 trace 日志的地方进行记录:


Lancer.getInstance().start()
Lancer.getInstance().stop()
复制代码


示例 demo 中演示的是从 application 的 attachBaseContext 就开启 start 日志记录,对于想记录业务模块的话,可自由搭配记录位置。


运行 demo 时,需要在 local.properties 下配置下 ndk 路径,如:


ndk.dir=/Users/mac/Library/Android/sdk/ndk/25.1.8937393

release 包效果:


网络异常,图片无法展示
|

  • 打出 release 包,install 安装,并启动应用
  • 结束应用,导出存储在 sd 卡外置存储目录的 trace 文件

perfetto 效果:

image.png

  • 打开 perfetto ui 网址,将导出的 trace 文件直接拖进即可查看
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
10天前
|
数据采集 网络协议 算法
移动端弱网优化专题(十四):携程APP移动网络优化实践(弱网识别篇)
本文从方案设计、代码开发到技术落地,详尽的分享了携程在移动端弱网识别方面的实践经验,如果你也有类似需求,这篇文章会是一个不错的实操指南。
30 1
|
11月前
|
前端开发 Cloud Native 大数据
坑爹,线上同步近 3w 个用户导致链路阻塞引入发的线上问题,你经历过吗?
坑爹,线上同步近 3w 个用户导致链路阻塞引入发的线上问题,你经历过吗?
|
数据挖掘
直播平台源码开发,信息收发功能搭建
信息发送消息实现代码 import java.util.ArrayList; import java.util.List; 信息接收消息实现代码 public void receiveMessage() { System.out.println("接收消息:");
直播平台源码开发,信息收发功能搭建
|
存储 NoSQL 算法
线上真实排队系统重构案例分享——实战篇
线上真实排队系统重构案例分享——实战篇
547 0
|
新零售 人工智能 大数据
即时通讯丨即时聊天开发案例,即时通讯丨即时聊天系统开发功能逻辑/详细案例/逻辑项目/源码版
什么是零售?   零售在经济活动中是实现商品销售的最后环节,承担的主要功能就是满足消费者的需求,提供消费者需要的商品。产品在生产者手中或批发者手中,只是一种观念上的使用价值,只有进入消费领域才能更具备现实维度的使用价值,而零售就是将商品从流通领域进入消费领域的最后一个环节。
|
域名解析 前端开发 安全
搭建一个线上版远程视频聊天
搭建一个线上版远程视频聊天
341 0
搭建一个线上版远程视频聊天
|
缓存 负载均衡
语音聊天软件源码,经常被忽视的预热问题
语音聊天软件源码,经常被忽视的预热问题
|
运维 监控 前端开发
微信团队分享:微信后台在海量并发请求下是如何做到不崩溃的
本文分享了微信基于大规模微服务架构的后台过载管控和保护策略,以及微信根据IM业务特点的一些独特的架构设计做法,其中很多方法很有借鉴意义,值得一读。
449 0
微信团队分享:微信后台在海量并发请求下是如何做到不崩溃的