黯灭_邓彬_个人页

Databricks数据洞察公开课！精彩案例，成功实践，技术解读都在这里！

欢迎观看Databricks数据洞察公开课，Databricks专注三个场景：🤗大数据和AI一体化，数据/模型开发与计算；😄商业版Delta Lake 流批一体解决方案；😊全托管、高性能spark，优于开源数十倍。此公开课从2021年1月开始，每月更新课程视频，希望帮助企业快速搭建数智基建。

降本增效利器！趣头条Spark Remote Shuffle Service最佳实践

趣头条是一家依赖大数据的科技公司，在2018-2019年经历了业务的高速发展，主App和其他创新App的日活增加了10倍以上，相应的大数据系统也从最初的100台机器增加到了千台规模。面对业务和数据的日益增长，如何优化大数据平台，真正实现降本增效，技术人也面临着非常大的挑战，近半年趣头条和阿里云一起合作，通过Spark Remote Shuffle Service取得了较大的进展，在这里大家可以更加详细地了解这套方案。

Databricks数据洞察公测实例关闭通知

9月底Databricks已经正式提供商业版服务，11月10日将关闭公测实例，请公测客户务必提前做好数据备份，感谢大家

PAI：一站式云原生AI平台

本文是《飞天大数据产品价值解读系列》之《一站式云原生AI平台》的视频分享精华总结，主要由阿里云机器学习PAI团队的产品经理高慧玲(花名：玲汐)向大家介绍了阿里巴巴整体的AI情况以及一站式云原生的AI平台PAI，并且做了简单的DEMO演示。

E-MapReduce 4月产品新功能

原来GNN这么好上手，OMG！用它！

Graph-Learn(GL) 是阿里巴巴开源的高性能工业级大规模图学习系统，本文将对GL的用户接口做一个概览，并介绍GL丰富的图采样算法，以及GL灵活统一的GNNs模型框架，帮助用户快速上手GL。 项目地址：https://github.com/alibaba/graph-learn 。

阿里巴巴开源GNN框架Graph-Learn

项目地址：https://github.com/alibaba/graph-learn 阿里巴巴近期开源了面向图神经网络（GNN）的框架Graph-Learn（GL，原AliGraph）。框架由阿里内部团队研发，研发同学分别来自计算平台事业部-PAI团队，新零售智能引擎事业群-智能计算实验室，以及安全部-数据与算法团队。

【通知】交互式分析将于2020.3.20正式商业化

交互式分析将于2020.3.20正式商业化

图神经网络（AliGraph）在阿里巴巴的发展与应用

在大数据的背景下，利用高速计算机去发现数据中的规律似乎是最有效的手段。为了让机器计算的有目的性，需要将人的知识作为输入。我们先后经历了专家系统、经典机器学习、深度学习三个阶段，输入的知识由具体到抽象，由具体规则到特征再到模式，越来越宏观。相对来说，抽象的层次变高了，覆盖面变广了，但我们对底层的感知变弱了，模型的可解释程度变差了。事物发展往往遵循这样的规律，先有客观事实，再有原理支撑，之后是普遍推广。深度学习的应用已经让我们看到了非常可观的价值，但其背后的可解释性工作进展缓慢，也因为如此，当我们用深度学习去解决一些风控、安全等业务场景，那数字效果不足以支撑这项技术的应用，我们更需要知道结果后面的

开源 | 全球首个批流一体机器学习平台 Alink

Flink 在机器学习领域的进展一直是众多开发者关注的焦点，今年 Flink 迎来了一个小里程碑：机器学习算法平台 Alink 开源，这也宣告了 Flink 正式切入 AI 领域。 阿里资深算法专家杨旭（花名：品数），将为大家详细介绍本次Alink主要功能和特点，希望与业界同仁共同携手，推动Flink社区进一步发展。

2684亿销售额背后的阿里AI技术

刚刚结束的双十一，天猫交易额达到 2684 亿元，较去年同比增长 25.7%。这一结果背后，云计算、人工智能等技术以及阿里巴巴工程师们的努力功不可没。在正在召开的 AICon 全球人工智能与机器学习技术大会 现场，阿里云智能计算平台事业部研究员林伟介绍了阿里基于飞天 AI 平台的人工智能技术及能力，揭开双 11 大规模交易场景下，阿里人工智能技术的神秘面纱。

天猫精灵业务如何使用机器学习PAI进行模型推理优化

作者：如切，悟双，楚哲，晓祥，旭林 引言 天猫精灵（TmallGenie）是阿里巴巴人工智能实验室（Alibaba A.I.Labs）于2017年7月5日发布的AI智能语音终端设备。天猫精灵目前是全球销量第三、中国销量第一的智能音箱品牌。

DataWorks独享资源组开通、使用教程

模式介绍：DataWorks提供了独享资源模式，支持购买独享的机器资源来分配给工作空间运行任务。此模式下机器物理资源（网络/磁盘/CPU/内存等）完全独享，不单可以做到用户间资源使用的隔离，也可以做到不同工作空间任务使用资源的独立。

DataWorks开通指南

开通地址：https://common-buy.aliyun.com/?commodityCode=dide_create_post#/buyDataWorks老客户选择Region，点击开通 完成此步骤，调度任务和DataWorks基础版功能已经开通，基础版功能如下：详细功能：https://help.

【重要通知】DataWorks 6月6日正式商业化，请公测用户及时开通DataWorks！

通知：DataWorks将于2019年6月6日正式商业化，6月20日之前老客户开通可享试运营0折特惠，请关注DataWorks通知短信！

机器学习PAI 可视化建模 Tensorflow升级通知

机器学习PAI 可视化建模 Tensorflow升级通知！请PAI Tensorflow用户注意查收邮件！

Spark DataFrame 的 groupBy vs groupByKey

欢迎加入Spark中国社区

欢迎大家关注Spark中国社区！ 社区成员会定期把Spark（全球）社区的最新发布、文档等翻译后放到社区，并经常组织社区成员线上、线下的直播分享、meetup以及有奖比赛等活动，非常欢迎大家加入社区，对于发帖、提问、答疑的同学，社区会给予特色的奖励 Spark社群钉钉群

【上海Meetup回放视频+PPT下载整理】Elasticsearch Meetup系列第二期

7月21日13:30 举办了Elasticsearch Meetup系列第二期， 我们邀请了Elastic架构师 Monash大学计算机硕士吴斌，和大家分享如何利用Elastic Stack快速搭建SIEM系统； eBay 软件工程师丁旻奕、王佩，和大家分享Elasticsearch diagn.

【南京Meetup】苏宁Elastic平台化实践中踩过哪些坑，又是如何解决的？

在南京 Elastic Meetup 南京交流会专场中，苏宁大数据平台搜索平台组的韩宝君为我们带来如何在大量的数据中发现数据的价值。从大数据平台的架构出发，详细解读了平台的概况和服务化平台的模块等方面的知识。最后，具体举出了在实践中出现的一些问题及对应的处理方案。

【南京Meetup】Elastic 探秘之遗落的珍珠

2018 Elastic Meetup南京交流会,来自Elastic的工程师曾勇对Elastic进行了讲述，Elastic是世界领先的开源提供商，是一个世界领先的软件开发商。曾勇主要对Elasticsearch、kibana、logstash/Beats、X-Pack里的一些功能进行了介绍。

【南京Meetup】在CloudEdge中，通过ES实践解决ElasticLog产品问题

摘要： 2018 Elastic Meetup南京交流会，由赵伟带来以“ElasticLog with ES in CloudEdge”为题的演讲。本文首先介绍了CloudEdge与ElasticLog是什么，其次介绍了产品的构架图以及ES的作用，最后介绍了ES在实践过程中需要设计Index、分配Shard、快速将Spark里数据写入ES中和数据去重。

【南京Meetup】华泰证券Elasticsearch在日志搜索、日志分析、链路管理系统方面的应用实践

2018Elastic Meetup南京交流会，由华泰证券李文强带来以“华泰证券Elasticsearch应用实践”为题的演讲。本文首先介绍了华泰证券具有系统运维繁琐、日志不能长期保存、日志数据价值没有挖掘、大数据领的一角的特点，接着介绍了它在日志搜索、日志分析和链路管理系统方面的应用实践，最后介绍了华泰证券Elasticsearch在使用中应注意的事项。

【南京Meetup】不断迭代，严苛细节，最终性能如何满足? 基于ELK的大数据平台实践分享

在2018年Elastic Meetup 南京交流会中，来自云利来科技的涂海波为现场的听众带来了题为《南京云利来基于ELK的大数据平台》的精彩分享。在本次分享中，他首先进行了公司简介，然后介绍了数据分类，包括数据采集及数据类型等；然后重点阐述了运维之路，最后进行了告警分析。

【通知】阿里云机器学习PAI即将商业化

【通知】阿里云机器学习PAI即将商业化 尊敬的机器学习PAI用户 感谢您一直以来对PAI的支持，从2015年开始，PAI平台和许多深度学习的爱好者一起成长，PAI始终坚持为深度学习用户带来更好的服务与支持，在2018年1月17日，PAI将正式商业化升级，以0元的价格为华东深度学习用户继续提供服务，华北区用户可以通过付费享受独有的计算资源。

阿里云机器学习系列直播--AutoEncoder实现语音降噪 附PAI深度学习完全使用教程【巨额福利-云栖大会门票】

直播时间：2017年09月27日 周三晚 20:00 直播地址1：https://www.douyu.com/2181595 直播地址2：https://tianchi.aliyun.com/competition/videoStream.html

机器学习系列直播--使用对抗神经网络(GANs)生成猫【8月30日 20点不见不散】

对抗神经网络模型(GANs)作为当下最火的神经网络模型 使用GANs我们可以还原图像原始颜色 可以还原马赛克: 可以把漫画变成真实图像 可以把文字变成图像 还可以进行视频下一帧预测.

阿里云机器学习技术分享1——图像识别之TensorFlow实现方法【视频+PPT】

阿里云AI之图像识别技术是如何实现的！？视频＋PPT干货奉上 讲师简介：赵昆 阿里巴巴机器学习技术专家 欢迎加入阿里云机器学习大家庭，**钉钉群：11768691** ， QQ群：567810612 一、阿里云机器学习之图像识别实践-基础篇： 观看视频：http://cloud.

人工智能应用案例——智能客服

阿里云人工智能识别篮球动作视频

篮球动作视频识别 更新时间：2016-11-23 16:04:15 点此咨询顾问 人工智能要想理解真实世界发生的事，读取视频中的信息是非常重要的一步。阿里云视频识别技术能够初步辨识出篮球视频中运动员的动作类型。 业务痛点及需求 对竞技运动视频的识别与比较是一种基于视频运动目

无推荐、不APP

随着互联网规模不断扩大，商品、音乐、电影、新闻资讯...的个数和种类快速增长，顾客需要花费大量的时间才能找到自己想要的东西。个性化推荐则是建立在海量数据挖掘基础之上，为顾客提供完全个性化的决策支持和信息服务。

新套餐出炉——300元个性化你的系统

——别人的导购页面有千人千面，为何我没有？        ——推荐算法做好太难，技术门槛怎么破？                ——算法人才贵，投入成本高，小企业如何承担？       不用怕！阿里云推荐引擎针对中小企业推出新套餐了，首月1元体验不变，之后再享300元每月，活动详情

《21天搭建推荐系统》观众定向打折优惠