钉钉群直播Spark + AI 北美峰会参会分享
2019-04-26
827
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
Spark + AI 北美峰会 2019 盛况依然，这两天正如火如荼。大会的主题是 Build，Unify，Scale，对此如何理解？砖厂这次有哪些重磅消息和重要发布，并作如何解读？Spark 过去几年发展的基调和线索是什么，从这次峰会上又如何看出 Spark 在未来几年的发展端倪？阿里巴巴计算平台.
相关文章
|
人工智能
安全
数据挖掘
中国公司获全球AI大赛第一名，老外称支付宝比北美银行还安全
中国科技公司在全球AI赛事上获得第一。8月7日，被称为AI数据挖掘“世界杯”的KDDCUP 2019大赛在美国落幕。本次比赛全球共有1600余支队伍参加，获得第一名的是来自中国的支付宝安全团队。这也标志着中国的AI应用技术已经在世界前列。
1299
0
0
|
机器学习/深度学习
人工智能
分布式计算
Spark + AI summit 2019北美技术峰会华丽落幕
本次SAIC含盖了数据工程与数据科学的内容，包括AI产品化的最佳实践案例分享：超大数据规模下，利用流数据处理确保训练数据更新的时效性，完成数据质量监控，测试以及数据模型服务。也有对流行的软件框架如TensorFlow，SciKit-Learn，Keras，PyTorch，DeepLearning4J，BigDL以及Deep Learning Pipelines等，分别进行深入的主题分享探讨。
1213
0
0
|
机器学习/深度学习
人工智能
分布式计算
Spark + AI 2019北美技术峰会华丽落幕
除了Spark + AI主题外，本次峰会，为开发者，数据科学家以及探寻最佳数据与人工智能工具来构架创新型产品的技术实践者们，提供了一站式交流的独特体验，超过了5000名来自世界各地的工程师，数据科学家，人工智能专家，研究学者以及商务人士，加入到了这3天的深度交流与学习中。
1237
0
0
|
分布式计算
大数据
Linux
钉钉群直播【Migration to Apache Spark】
Spark因其统一引擎、性能、易用性等特点备受青睐，将大数据处理引擎迁移到Spark已经成为一种趋势(比如将Hive迁移到SparkSQL)，很多大公司也正在实践。
1924
0
0
|
1月前
|
机器学习/深度学习
SQL
分布式计算
|
1月前
|
分布式计算
Hadoop
大数据
大数据技术与Python：结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性，阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce，Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop，可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop，以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
426
1
2
|
1月前
|
机器学习/深度学习
SQL
分布式计算
|
3天前
|
分布式计算
大数据
数据处理
Apache Spark在大数据处理中的应用
Apache Spark是大数据处理的热门工具，由AMPLab开发并捐赠给Apache软件基金会。它以内存计算和优化的执行引擎著称，提供比Hadoop更快的处理速度，支持批处理、交互式查询、流处理和机器学习。Spark架构包括Driver、Master、Worker Node和Executor，核心组件有RDD、DataFrame、Dataset、Spark SQL、Spark Streaming、MLlib和GraphX。文章通过代码示例展示了Spark在批处理、交互式查询和实时数据处理中的应用，并讨论了其优势（高性能、易用性、通用性和集成性）和挑战。【6月更文挑战第11天】
25
6
6
|
3天前
|
分布式计算
数据可视化
大数据
|
3天前
|
机器学习/深度学习
数据采集
分布式计算
热门文章
最新文章
1
阿里封神谈hadoop生态学习之路
2
现代流式计算的基石：Google DataFlow
3
Spark in action on Kubernetes - Playground搭建与架构浅析
4
使用Hive进行OSS数据处理的一个最佳实践
5
如何在E-MapReduce中玩转OSS
6
使用E-MapReduce服务将Kafka数据导入OSS
7
E-MapReduce结合DataV进行数据展现
8
E-MapReduce中Spark 2.x读写MaxCompute数据
9
HBase ThriftServer Kerberos认证
10
E-MapReduce集群搭建HAWQ实践
1
EMR Serverless Spark：结合实时计算 Flink 基于 Paimon 实现流批一体
292
2
客户案例 | 阿里云向量检索 Milvus 版在识货电商检索场景的应用与实践
82
3
基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
56040
4
阿里云 EMR Serverless StarRocks3.x，极速统一的湖仓新范式
736
5
阿里云 EMR Serverless Spark 版开启免费公测
363
6
文心大模型的智能体（Agent）平台
198
7
阿里巴巴的通义千问大模型
280
8
基于阿里云向量检索 Milvus 版和 LangChain 快速构建 LLM 问答系统
511
9
通过阿里云向量检索 Milvus 版和通义千问快速构建基于专属知识库的问答系统
578
10
Apache Hadoop入门指南：搭建分布式大数据处理平台
441