Sentry 监控 - Discover 大数据查询分析引擎

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: Sentry 监控 - Discover 大数据查询分析引擎

Discover 查询



Discover 通过构建和丰富您的错误数据,提供跨环境数据的可见性。您可以查询和解锁对整个系统健康状况的洞察,并在一个地方获得关键业务问题的答案。


微信图片_20220612230547.png


Discover 主页提供所有已保存和预构建查询的视图,因此您可以快速深入到需要立即关注的区域。例如,如果在过去 24 小时内出现错误查询的峰值,用户可以先进行调查。每个查询都保存为一张卡片,显示数据的汇总视图。


  • 显示名称
  • 搜索条件
  • 创建者
  • 图表快照
  • 日期范围
  • 最后编辑


预置查询


带有 Sentry 图标的查询卡是预先构建的,无法移除。


  • All Events:用户可以查看任何项目组的原始错误流。这取代了事件功能,使用户能够添加其他列和更改分组以实现所需的细分。
  • Errors by Title:用户可以通过原始错误总数以及受影响的用户总数来查看最常发生的错误。
  • Errors by URL:用户可以看到产生最多错误和不同类型问题的页面。提醒一下,问题是一组指纹事件。有关更多详细信息,请参阅有关指纹的完整文档。


已保存查询



带有用户头像的查询卡表示已保存的查询。创建已保存查询的用户将在查询卡上显示他们的头像。保存的查询可供组织中的任何人查看,并且不限于用户帐户。


构建新查询


Discover 主页,您可以通过三种方式构建查询。

  • 单击 Build a new query(构建新查询)
  • 单击现有已保存查询卡的省略号以Duplicate(复制)
  • 进入任何现有查询
  1. 点击右上角的Save as(另存为)...
  2. 输入显示名称
  3. 单击Save(保存)


应用新的搜索条件或表列来修改查询结果。保存查询并分配自定义显示名称。有关完整的详细信息,请参阅有关查询生成器的文档。


搜索查询


寻找特定查询?使用主页上的搜索栏查找查询名称。


排序查询


右上角的下拉菜单将允许您按属性排序。


  • 最近编辑Recently Edited(默认)
  • 我的查询My Queries
  • 查询名称Query Name (A-Z)
  • 创建日期Date Created(最新)
  • 创建日期Date Created(最旧)
  • 最过时Most Outdated


编辑查询


如果您需要编辑这些查询中的任何一个,请进入查询,进行所需的更改,右上角会出现一个按钮,要求您保存/更新(save/update)查询。请记住,对查询条件的编辑不会自动保存。


要重命名已保存的查询,请单击标题旁边的铅笔图标并输入所需的显示名称。单击“enter”或点击区域外以保存更新的名称。


分享查询


随时分享您的疑问。您可以与也有权访问同一组织的其他用户共享 URL。随着查询的每个部分的构建,结果和 URL 都会更新,以便可以在电子邮件、聊天等中共享正在进行的搜索。


删除查询


Discover 主页上,每个保存的查询卡都有一个省略号,可以打开上下文菜单。从这里,您可以删除查询。这个动作是不可逆的。您还可以通过单击右上角的垃圾桶在“查询结果(Query Results)”视图中删除查询。


查询结果


微信图片_20220612230634.png


要查看查询结果,请单击任何查询卡。您将找到图表、表格和可切换的标签摘要(或分面图facet map)。顶部的搜索栏可让您查看输入的搜索条件。该表反映了具有可排序列的事件。


每个表格单元格都有一个动态上下文菜单,允许您根据您的选择通过自动更新搜索栏或表格列来继续探索您的数据。诸如在过滤器中添加或排除值、打开选定版本或查看底层问题堆栈等操作:


微信图片_20220612230648.png


如果第一列显示图标(如上所示),则表示事件已堆叠。单击该图标可查看完整的事件列表。每个事件都有一个 event ID,您可以单击以了解更多详细信息。有关如何构建查询的更多信息,请转到查询构建器。


事件详情


微信图片_20220612230701.png


Discover > [Saved Query] > Event Detail 导航到事件详细信息页面。您将找到有关单个事件的所有相关详细信息。对于每个事件,您将看到 ID、时间戳(timestamp)和链接以查看 Sentry 收到的规范化 JSON payload


事件详细信息(Event Detail)视图因事件类型(错误error、事务transaction、csp)而异。事务事件详细信息可能与错误事件详细信息(如上所示)具有完全不同的视图。例如,错误可能会在侧栏中显示相关问题。这使您可以快速浏览该问题的事件量,并让您快速导航到相关问题。您还可以在这些视图中找到堆栈跟踪(stack traces)、面包屑(breadcrumbs)等。


查询生成器



Discover 主页,您可以通过三种方式构建查询。


  • 单击 Build a new query(构建新查询)
  • 单击现有已保存查询卡的省略号以Duplicate(复制)
  • 进入任何现有查询
  1. 点击右上角的Save as(另存为)...
  2. 输入显示名称
  3. 单击Save(保存)

有四个主要构建块会影响已保存查询的结果。您可以结合使用这些方法来缩小搜索范围。


  1. Global Selection Header(全局选择标题)
  2. Search Conditions(搜索条件)
  3. Interactive Graph(交互式图表)
  4. Table Columns(表格列)


按全局选择标题过滤


在页面顶部指定要放大的项目(projects)、环境(environments)和日期范围(date range)。这也可以在 Sentry 的其他部分作为顶级过滤器(top level filter)找到。


按搜索条件过滤


所有事件都有内置的关键字段(key fields)或自定义标签(custom tags)。使用搜索栏输入这些 key 并为其分配值。这将过滤您的事件列表。这是内置的 key fields




General(常用) id(string)
issue.id(number)
message(string)
project.id(number)
release(string)
release.package(string)
release.version(string)
release.build(string)
title(string)
platform.name(string)
environment(string)
event.type(string)
location(string)
timestamp(datetime)
timestamp.to_hour(datetime)
timestamp.to_day(datetime)
Device(设备) device.arch(string)
device.battery_level(number)
device.brand(string)
device.charging(string)
device.locale(string)
device.name(string)
device.online(string)
device.orientation(string)
device.simulator(string)
device.uuid(string)
Geo(地理) geo.city(string)
geo.country_code(string)
geo.region(string)
HTTP http.method(string)
http.url(string)
OS os.build(string)
os.kernel_version(string)
SDK sdk.name(string)
sdk.version(string)
Stack traces(堆栈追踪) error.handled(string)
error.mechanism(string)
error.type(string)
error.value(string)
stack.abs_path(string)
stack.colno(number)
stack.filename(string)
stack.function(string)
stack.in_app(boolean)
stack.lineno(number)
stack.module(string)
stack.package(string)
stack.stack_level(number)
User attributes(用户属性) user(string)
user.email(string)
user.id(string)
user.ip(string)
user.username(string)


语法


查询生成器语法与 Sentry 的搜索语法相同。从上方输入关键字段(key field)或自定义标记(custom tag)后,您可以使用任何引用的语法。例如,count() 为您提供事件发生的次数。这可以用以下方式编写:


  • 完全匹配(等于):count():99
  • 上限(小于或等于):count():<99count():<=99
  • 下限(大于或等于):count():>99count():>=99
  • 多个边界(大于和小于):count():>10 count():<20

在过滤器之间使用 ORAND 搜索条件。但是 OR 不能用于聚合(aggregate)和非聚合(non-aggregate)过滤器之间。有关这些条件的更多详细信息,请参阅使用 ORAND

您还可以通过将值放在列表中来搜索同一 key 的多个值。例如,“x:[value1, value2]” 将找到与 “x:value1 OR x:value2” 相同的结果。您可以在我们涵盖同一 Key 上的多个值的内容中了解更多信息。


Tag Summary 过滤


每个事件都有一个标签值(tag values)列表。标签摘要分面图(或分面图)是按频率排序的前 10key 的可视化。最常见的标签值(tag value)直接列在说明(description)和百分比(percentage)的栏上方。将鼠标悬停在栏中的每个部分上以查看该标签的确切分布。


单击这些部分中的任何一个以进一步优化您的搜索。例如,单击浏览器栏中代表 Chrome 的部分将自动更新 tag summary,然后将 Chrome 添加到搜索条件中。


微信图片_20220612230743.png


按交互式图表过滤


每个查询都有一个交互式图表,可反映下表中显示的数据。要放大,只需在要调查的区域上单击并拖动即可。您还可以自定义显示和 Y 轴。这将与您的查询一起保存。


显示选项


  • Total Period(总周期)
  • Previous Period(上一期)
  • Release Markers(发布版本标记)
  • Top 5 Period(前5期)
  • Total Daily(每日总计)
  • Top 5 Daily(每日前5)

Y 轴选项

  • Count
  • Average Transaction Duration(平均事务持续时间)
  • p75
  • p95
  • Unique User Count(唯一用户数)


按表列过滤


在表格上方,单击列(Columns)以打开 modal。这将显示结果表中所有列的列表。您可以添加、删除和移动基本关键字段(basic key field)列或自定义标签(custom tags)列。使用相同的视图,您还可以使用以下任何函数堆叠事件:


叠加函数


  • avg(...)
  • count(...)
  • count_unique(...)
  • max(...)
  • min(...)
  • sum(...)

每个函数都会要求您分配一个参数。有些是必需的,而有些则是可选的。函数将基于相同的值堆叠事件。如果未应用任何函数,则查询结果中的事件将单独列出。完成列编辑后,单击“应用(Apply)”,结果将反映在查询结果中。请记住,如果添加了太多列,表格可能会水平滚动。


单元格过滤


表格中的每个单元格都会在悬停时出现一个省略号。这将打开一个上下文菜单,其中包含取决于值类型的附加过滤功能。例如,您可以通过单击“添加到过滤器(Add to filter)”有选择地将 transaction 定位到搜索条件栏。

image.gif

微信图片_20220612230805.png


添加方程式


您还可以使用表列作为方程式变量向查询添加方程式,结果将显示在查询结果表中。在添加查询方程式中了解更多信息。


排序列


单击要排序的列 header。向下箭头按降序对列进行排序,向上箭头按升序对列进行排序。这可能会刷新表格。


其他查询操作


编辑查询


如果您需要编辑这些查询中的任何一个,请进入查询,进行所需的更改,右上角会出现一个按钮,要求您保存/更新(save/update)查询。请记住,对查询条件的编辑不会自动保存。


要重命名已保存的查询,请单击标题旁边的铅笔图标并输入所需的显示名称。单击 "enter" 或单击区域外进行确认。


分享查询


随时分享您的疑问。您可以与也有权访问同一组织的其他用户共享 URL。随着查询的每个部分的构建,结果会更新,URL 也会更新,以便可以在电子邮件、聊天等中共享正在进行的搜索。


导出 CSV


如果您想将数据带到别处,请单击 “Export” 以获取 CSV 文件。

对于大型导出,一旦准备就绪,您将收到一封包含下载链接的电子邮件。这将需要在 Sentry 下载页面上进一步验证。这包含文件的 SHA1 checksum,您可以使用以下命令验证其完整性:


echo "<SHA1 checksum> <downloaded CSV name>" | sha1sum -c -


根据数据量,等待时间可能会有所不同。结果限制为 1000 万行或 1GB,以先到者为准。

删除查询


删除已保存的查询是不可逆的。

Discover 主页上,每个保存的查询卡都有一个省略号,可以打开上下文菜单。从这里删除查询。您还可以通过单击右上角的垃圾桶在“查询结果(Query Results)”视图中删除查询。


添加查询方程式


Discover 中,您可以根据查询列添加方程式。每列就像一个变量,因为它代表查询的数字结果,这个数字用于等式。


例如,让我们用一个方程式来计算 transaction 的第一次内容绘制 (measurements.fcp) 与 transaction 的最大内容绘制 (measurements.lcp) 的比率:


equation = measurements.fcp / measurements.lcp

该等式将使用每个查询列的结果来计算比率。在这种情况下,这些查询列的结果是:

  • measurements.fcp = 50
  • measurements.lcp = 100

等式变为:

50 / 100

然后等式的结果显示在更新的表中,如下面的记录所示:

image.gif

这些等式可以帮助您计算以下内容:

  • 在阈值内完成的 transaction 百分比
  • 自定义 Apdex 分数
  • 最大平均非数据库次数


添加方程式


向查询添加方程式


  1. 单击列(Columns)按钮打开列编辑器。
  2. 如果它们尚未包含在您的查询中,请添加方程式所需的列。
  3. 单击 添加一个方程式(Add an Equation)
  4. 通过选择列、输入数字(如果需要)和添加运算符来输入你的方程式。
  5. 单击“应用(Apply)”


方程式指南


方程必须:

  • 至少包含一个字段或函数
  • 至少包含一个操作符
  • 有显式运算符。例如,a(a+b) 无效;相反,您应该输入 a * (a + b)

方程不能:

  • 包含字段和函数的混合
  • 包含不受支持的指数

方程将遵循预期的运算顺序,首先解析括号,然后是除法和乘法,然后是加法和减法。方程还可以包括负数。

方程只能对数值列和函数进行运算,其中包括:

  • 函数:
  • count
  • count_unique
  • count_if
  • failure_count
  • avg
  • sum
  • percentiles (p50, p75 etc.)
  • apdex
  • user_misery
  • eps() and epm()
  • 字段:
  • transaction.duration
  • measurements.fp
  • measurements.fcp
  • measurements.lcp
  • measurements.fid
  • measurements.cls
  • measurements.ttfb
  • spans.browser
  • spans.http
  • spans.db
  • spans.resource


示例方程式


计算完成事务的百分比


获取在阈值内完成的事务百分比


  1. 使用以下三列创建一个新查询:
  2.  * 列 1:
  3.        * Function count_if
  4.        * Field transaction.duration
  5.        * Condition is less than or equal to
  6.        * 将最终参数设置为阈值(如 300
  7.  * 列 2:
  8.        * Function count
  9.  * 列 3:
  10.        * Field transaction
  11. 添加一个方程并在方程字段中输入 count_if(transaction.duration,lessOrEquals,300) / count() * 100


计算自定义 Apdex


Apdex 定义为 (satisfied + tolerable*0.5 + frustrated*0)/total。如果您想将 tolerable 的权重更改为 0.2,您将创建以下查询和方程。


  1. 使用以下四列创建一个新查询:
  2.    * 列 1:
  3.        * Function count_if
  4.        * Field transaction.duration
  5.        * Condition is less than or equal to
  6.        * 将最终参数设置为 Satisfied 阈值(如 300
  7.    * 列 2:
  8.        * Function count_if
  9.        * Field transaction.duration
  10.        * Condition is less than or equal to
  11.        * 将最终参数设置为 Tolerable 阈值(如 1200
  12.    * 列 3:
  13.        * Function Count()
  14.    * 列 4:
  15.        * Field transaction
  16. 添加方程并在 equation 字段中输入以下内容:

(count_if(transaction.duration,lessOrEquals,300) + (count_if(transaction.duration,lessOrEquals,1200) - count_if(transaction.duration,lessOrEquals,300)) * 0.2)/count()

查找最大平均非数据库时间


查找不是来自数据库调用的时间最长的事务。

  1. 使用以下两列创建一个新查询:
  2.    * 列 1:
  3.        * Function avg
  4.        * Field transaction.duration
  5.    * 列 2:
  6.        * Function avg
  7.        * Field spans.db

  8. 添加一个方程并在 equation 字段中输入 avg(transaction.duration) - avg(spans.db)
  9. 按这个新 equation 排序。


通过 Discover 发现趋势



Discover 是一个强大的查询引擎,允许您跨项目和应用程序查询所有错误元数据。您可能已经注意到,安装在您的应用程序中的 Sentry SDK 捕获了大量事件,每个事件都包含有关底层错误(underlying error)、平台(platform)、设备(device)、用户(user)等的上下文数据。我们还强烈鼓励通过添加自定义标签和配置 releaseenvironment,通过 SDK 丰富您的错误数据。有关更多信息,请参阅让您的数据发挥作用。

让我们通过一些示例来了解如何处理所有这些数据,以获得有关应用程序运行状况和稳定性的一些有用见解。


如果您设置了与 Sentry 字段同名的标签,则某些表格列选项可能会重复。对于以下示例,请使用标记为“field”的表列选项。

通过 Issues Discover


当您的应用程序中断时,Sentry 会实时通知您,然后提供信息和工具来分类和解决错误。使用 Discover,您可以采取更主动的方法来查找破坏您的应用程序的主要问题。构建该查询可能如下所示:


  1. 导航到 “Discover” 并单击 "Build a new query"
  2. Global Header 中,选择您要查询的项目(projects)、环境(environments)和错误时间范围(time range of errors)。
  3. Sentry 监视不同类型的事件的错误和性能。要查询问题(issues),请在搜索栏中按 event.type:error 进行过滤。


微信图片_20220612230920.png


  1. 编辑 “Results” 表列以显示每个项目的事件数 [count()]、受影响的用户 [count_unique(user)] 和独特问题 [count_unique(issue)]。

image.gif

微信图片_20220612230929.png


  1. 设置这些列后,您可能希望查找问题最多的项目。单击 COUNT_UNIQUE(ISSUE) 列标题以相应地对行项目进行排序。
  2. 将光标悬停在顶部 project 行项目上,单击显示的操作图标,然后选择 “Add to filter”。这将进一步缩小您的结果范围,以便您可以继续调查该特定 projectissues


微信图片_20220612230940.png

image.gif

  1. 现在让我们看看这些 issues 是什么。更改表列以显示:
  • issue (问题编号)
  • title (问题标题)
  • count() (事件数)
  • count_unique(user) (受问题影响的唯一用户数)
  1. 在每个行项目/问题(item/issue)上,您可以单击 issue 名称以打开 “Issue Details” 页面并对 issue 进行分类。您还可以单击 “Open Group” 图标以在特定问题的上下文中继续查询事件堆栈。

image.gif

微信图片_20220612230953.png


通过 Errors Discover

Discover 的真正强大之处在于它能够查询所有错误元数据,因此您不再局限于 issuesprojects 的上下文,并且可以揭示所有应用程序的趋势和见解。让我们看一些例子。


URL 错误


创建一份报告,查看应用程序中 URL 端点中发生的所有错误。


  • 搜索条件:event.type:error has:url
  • 表列:url, platform.name, count()

image.gif

  • 通过单击 “Add to filter” 并更改表列来查看任一 URL 端点。
  • 或者,使用通配符过滤 URL 模式:


微信图片_20220612231013.png


未处理的错误


无论您的代码是在移动设备、浏览器还是服务器上运行,未处理的致命错误都可能使您的应用程序崩溃。要找出这些崩溃发生的位置,请在 Discover 中运行以下查询:


  • 搜索条件:event.type:error handled:no level:fatal
  • 表列:mechanism, platform.name, count()


微信图片_20220612231030.png


要深入了解其中一种崩溃类型:

  • 选择行项目值之一并将其添加到过滤器。
  • 修改表列以显示崩溃 messagecount()

微信图片_20220612231146.png


错误最多的文件


要找出代码库中哪些文件生成的错误最多,请在 Discover 中运行以下查询:


  • 搜索条件:event.type:error has:stack.filename
  • 表列:stack.filename, count(), count_unique(issue)


微信图片_20220612231256.png


更改您的 “Display” 选择以将当前时间段与前一时间段进行比较。

您可以通过将特定文件名添加到过滤器并更改表列以显示该文件中的主要错误罪魁祸首来继续探索特定文件名:


微信图片_20220612231306.png


每个 Release 的错误


要了解在发布新版本时特定项目的健康状况如何随着时间的推移而改善(或不改善),请创建以下查询:


  • 搜索条件:event.type:error
  • 表列:release, count(), count_unique(issue)

微信图片_20220612231317.png


从这里您可以添加一个 release 作为过滤器并将列更改为 count()title 以查看类似的错误。然后您可以单击 “Open Group” 图标来深入查看单个事件。您还可以在 “Results” 表的 “Releases” 中打开 release


按小时或按天计算的错误


timestamp.to_hourtimestamp.to_day 字段分别将 timestamp 向下舍入到最后一小时或一天。例如,timestamp 值为 Mar 12, 2021 2:26:50 PM UTC 的事件的 timestamp.to_hour 值为 Mar 12, 2021 2:00:00 PM UTCtimestamp.to_day 值为 Mar 12, 2021 12:00:00 AM UTC。这允许您对事件进行分组。例如,您可以显示每小时至少命中两次的错误计数:


微信图片_20220612231334.png


根据您在 User Settings > Account > Account Details 中的用户设置,所有时间戳都显示在您的首选时区中。


相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps&nbsp;
相关文章
|
2月前
|
消息中间件 监控 数据可视化
大数据-79 Kafka 集群模式 集群监控方案 JavaAPI获取集群指标 可视化监控集群方案: jconsole、Kafka Eagle
大数据-79 Kafka 集群模式 集群监控方案 JavaAPI获取集群指标 可视化监控集群方案: jconsole、Kafka Eagle
103 2
|
8天前
|
存储 分布式计算 安全
MaxCompute Bloomfilter index 在蚂蚁安全溯源场景大规模点查询的最佳实践
MaxCompute 在11月最新版本中全新上线了 Bloomfilter index 能力,针对大规模数据点查场景,支持更细粒度的数据裁剪,减少查询过程中不必要的数据扫描,从而提高整体的查询效率和性能。
|
1月前
|
负载均衡 大数据
大数据散列分区查询频率
大数据散列分区查询频率
22 5
|
1月前
|
存储 大数据 数据管理
大数据分区提高查询性能
大数据分区提高查询性能
34 2
|
1月前
|
存储 负载均衡 大数据
大数据水平分区提高查询性能
【11月更文挑战第2天】
41 4
|
2月前
|
存储 JSON 监控
大数据-167 ELK Elasticsearch 详细介绍 特点 分片 查询
大数据-167 ELK Elasticsearch 详细介绍 特点 分片 查询
61 4
|
4月前
|
关系型数据库 MySQL 分布式数据库
PolarDB 并行查询问题之大数据量的实时分析查询挑战如何解决
PolarDB 并行查询问题之大数据量的实时分析查询挑战如何解决
40 2
|
4月前
|
机器学习/深度学习 监控 大数据
Serverless 应用的监控与调试问题之Flink在整个开源大数据生态中应该如何定位,差异化该如何保持
Serverless 应用的监控与调试问题之Flink在整个开源大数据生态中应该如何定位,差异化该如何保持
|
5月前
|
SQL 分布式计算 DataWorks
MaxCompute产品使用合集之针对MaxCompute查询结果排队问题,该如何优化
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
74 10
|
5月前
|
分布式计算 DataWorks 关系型数据库
DataWorks产品使用合集之同样的表和数据,在PolarDB执行LEFT JOIN查询可以得到结果,但在MaxCompute中却返回为空,是什么原因
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。