问题一:如何通过Spark UI进行任务优化?
如何通过Spark UI进行任务优化?
参考回答:
通过Spark UI可以查看任务的job/stage/task的可视化分析数据,包括执行过程、日志等,从而可以针对性地优化提升任务性能。
关于本问题的更多问答可点击原文查看:
https://developer.aliyun.com/ask/670669
问题二:在ODPS环境中,如何进行Spark的交互式开发测试?
在ODPS环境中,如何进行Spark的交互式开发测试?
参考回答:
在ODPS环境中,可以通过Zeppelin进行Spark的交互式开发测试。Zeppelin是一个基于Web的笔记本,支持SQL、Scala、Python等多种语言,能够实现数据驱动的交互式数据分析和协作文档。
关于本问题的更多问答可点击原文查看:
https://developer.aliyun.com/ask/670670
问题三:经过优化后,供应链核算流程的执行时间从多久缩短到了多久?
经过优化后,供应链核算流程的执行时间从多久缩短到了多久?
参考回答:
经过优化后,在2500万数据量、60worker数的场景下,供应链核算的接入+记账+抛账流程由之前的2小时提效至10分钟。
关于本问题的更多问答可点击原文查看:
https://developer.aliyun.com/ask/670671
问题四:英伟达遭遇黑客攻击,核心源代码泄露的主要原因是什么?
英伟达遭遇黑客攻击,核心源代码泄露的主要原因是什么?
参考回答:
英伟达遭遇黑客攻击,核心源代码泄露的主要原因是内网互通及代码数据明文存储。黑客在突破防火墙后,通过内网探测直接访问并盗取了存储明文代码的服务器数据。
关于本问题的更多问答可点击原文查看:
https://developer.aliyun.com/ask/670672
问题五:Git等版本控制系统在数据加密方面存在什么问题?
Git等版本控制系统在数据加密方面存在什么问题?
参考回答:
Git等版本控制系统,如SVN,本身并不具备数据加密的能力。这意味着,只要黑客能够接触到存储代码资产的服务器,就能直接盗走其上的代码资产数据,因为这些数据是以明文形式存储的。
关于本问题的更多问答可点击原文查看: