115期:在线大数据技术峰会回顾合集!

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
简介: 《云周刊》115期:在线大数据技术峰会回顾合集!
本期头条
 

票选最美云上大数据暨大数据技术峰会上,阿里云飞天一部计算平台高级专家无庸为大家带来题为“高可用大数据计算服务如何持续发布和演进”的演讲。本文先对MaxCompute架构进行了介绍,接着重点介绍在大数据计算服务下,高可用服务持续改进和发布的工具,包括Playback工具、Flighting工具和灰度上线、细粒度回滚等,点击查看

• 【资料合集】在线大数据技术峰会:讲义PDF+活动视频!

• 提速1000倍!阿里率先采用Intel Optane SSD

• 东京见闻:快速走红日本市场 阿里云的三大秘密

• MaxCompute SQL 现状与展望

• 双管齐下,MaxCompute数据上云与生态

• 阿里云机器学习平台编程模型演进之路

 
技术干货
 
快速在阿里云上构建机器学习应用
最近,小明的老板给小明布置了一个任务,希望把应用服务监控起来,以提高应用运行质量。小明接到任务以后开始着手进行技术选型。 赶紧来看看,小明如何通过另外一种新的思路快速搭建Nginx监控任务, 点击查看
从人脑研究入手,使人工智能不再“四肢发达,头脑简单”
阿里云人工智能科学家、人工智能孵化团队负责人闵万里博士带来题为“KDD Cup2017背后的人工智能实践”的演讲。本文主要从人脑神经网络的研究开始谈起,重点说明了人脑研究的应用案例,包括我是歌手总决赛排名预测、ET、交通管理、运输车辆调度、送外卖和协鑫企业实践,最后还有对KDD Cup大赛题目背后的思考以及对量子计算的展望, 点击查看

• 简单读懂人工智能:机器学习与深度学习是什么关系

• 阿里云Windows Server 2016环境Docker试用

• 阿里云容器服务——打造云端最优Docker运行环境

• 与TensorFlow类似的项目有哪些?TensorFlow的优缺点是什么?

• 专访360医药大数据负责人侯晓锋:谈未来智能医疗的挑战及实践

• 赋能平台、提效工具、场景化应用,地产大数据玩转有诀窍

• 如何从SLB故障中快速恢复

精彩直播
 
【重磅】2017新智元开源 · 生态AI技术峰会 点击报名
AI技术的进步引发了政策的关注。今年2月,科技部宣布“科技创新2030—重大项目”或将新增“人工智能2.0”,按照此前相关文件中的表述,被列入其中的项目体现了“国家战略意图”。3月5日,十二届全国人大第五次会议开幕,“人工智能”被首次写入中国政府工作报告。3月27日,“2017 新智元开源·生态 AI技术峰会”将在北京召开。本次峰会分两场,多位AI业界大咖和技术领袖将秀出2017 AI梦想。阿里云·云栖社区将为本次活动提供线上直播支持,门票价值千元,大咖畅谈,欢迎报名!
【直播报名】分布式调用跟踪与监控实战 点击报名
微服务化是当前非常流行的技术趋势,可以将大型系统拆解成细粒度的分布式服务,从而开发更敏捷,并且有更好的扩展性和容错能力。但是随着系统走向分布式,整体架构的复杂度会不断上升,例如,在阿里电商平台每处理一笔交易订单,需要触发后端数百个台机器的各种服务,这对于运维、监控,以及问题排查定位都是巨大的挑战。而分布式调用跟踪技术,可以有效的解决上述问题。在阿里巴巴,这套技术的产品实现叫做鹰眼(EagleEye),是阿里内部不可或缺的基础监控设施。在阿里云,在企业级分布式应用服务(EDAS)中也发挥着重要作用。本次演讲,将向大家介绍这套技术的原理、实现以及基于这套技术有哪些实际使用场景。阿里巴巴中间件技术部高级技术专家姬风将为进行精彩分享。

• 【直播报名】大数据与智能制造平台构建

• 【在线峰会】阿里云运维/Devops在线技术峰会

• 【云栖大会】2017云栖大会·深圳峰会:“飞天·智能”

社区活动
 

• 【百万大奖】阿里巴巴诸神之战:API as a Service大赛

• 【有奖活动】阿里云[最佳云上实践]评选

• 【长期招募】云栖社区技术翻译志愿者招募

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
打赏
0
0
0
1
634
分享
相关文章
从“笨重大象”到“敏捷火花”:Hadoop与Spark的大数据技术进化之路
从“笨重大象”到“敏捷火花”:Hadoop与Spark的大数据技术进化之路
126 79
随着云计算和大数据技术的发展,Hyper-V在虚拟化领域的地位日益凸显
随着云计算和大数据技术的发展,Hyper-V在虚拟化领域的地位日益凸显。作为Windows Server的核心组件,Hyper-V具备卓越的技术性能,支持高可用性、动态迁移等功能,确保虚拟机稳定高效运行。它与Windows深度集成,管理便捷,支持远程管理和自动化部署,降低管理成本。内置防火墙、RBAC等安全功能,提供全方位安全保障。作为内置组件,Hyper-V无需额外购买软件,降低成本。其广泛的生态系统支持和持续增长的市场需求,使其成为企业虚拟化解决方案的首选。
【赵渝强老师】大数据技术的理论基础
本文介绍了大数据平台的核心思想,包括Google的三篇重要论文:Google文件系统(GFS)、MapReduce分布式计算模型和BigTable大表。这些论文奠定了大数据生态圈的技术基础,进而发展出了Hadoop、Spark和Flink等生态系统。文章详细解释了GFS的架构、MapReduce的计算过程以及BigTable的思想和HBase的实现。
313 0
大数据基础工程技术团队4篇论文入选ICLR,ICDE,WWW
大数据基础工程技术团队4篇论文入选ICLR,ICDE,WWW
技术评测:MaxCompute MaxFrame——阿里云自研分布式计算框架的Python编程接口
随着大数据和人工智能技术的发展,数据处理的需求日益增长。阿里云推出的MaxCompute MaxFrame(简称“MaxFrame”)是一个专为Python开发者设计的分布式计算框架,它不仅支持Python编程接口,还能直接利用MaxCompute的云原生大数据计算资源和服务。本文将通过一系列最佳实践测评,探讨MaxFrame在分布式Pandas处理以及大语言模型数据处理场景中的表现,并分析其在实际工作中的应用潜力。
145 2
轻量级的大数据处理技术
现代大数据应用架构中,数据中心作为核心,连接数据源与应用,承担着数据处理与服务的重要角色。然而,随着数据量的激增,数据中心面临运维复杂、体系封闭及应用间耦合性高等挑战。为缓解这些问题,一种轻量级的解决方案——esProc SPL应运而生。esProc SPL通过集成性、开放性、高性能、数据路由和敏捷性等特性,有效解决了现有架构的不足,实现了灵活高效的数据处理,特别适用于应用端的前置计算,降低了整体成本和复杂度。
在大数据时代,高维数据处理成为难题,主成分分析(PCA)作为一种有效的数据降维技术,通过线性变换将数据投影到新的坐标系
在大数据时代,高维数据处理成为难题,主成分分析(PCA)作为一种有效的数据降维技术,通过线性变换将数据投影到新的坐标系,保留最大方差信息,实现数据压缩、去噪及可视化。本文详解PCA原理、步骤及其Python实现,探讨其在图像压缩、特征提取等领域的应用,并指出使用时的注意事项,旨在帮助读者掌握这一强大工具。
286 4
单机顶集群的大数据技术来了
大数据时代,分布式数仓如MPP成为热门技术,但其高昂的成本让人望而却步。对于多数任务,数据量并未达到PB级,单体数据库即可胜任。然而,由于SQL语法的局限性和计算任务的复杂性,分布式解决方案显得更为必要。esProc SPL作为一种开源轻量级计算引擎,通过高效的算法和存储机制,实现了单机性能超越集群的效果,为低成本、高效能的数据处理提供了新选择。