主讲人：江宇(燕回) 阿里巴巴计算平台EMR技术专家
直播时间：2018.12.06 19:00 - 20:00
内容提要：本次讲座主要面对的是机器学习的入门者，以及想要使用Spark来进行机器学习的用户。我们会介绍一下机器学习相关领域的基础知识，以及机器学习在spark上面的实践，同时给出我们的一些使用建议。
视频分享：https://yq.aliyun.com/live/693
ppt分享：https://yq.aliyun.com/download/3129
欢迎扫码进群共同交流：
# Apache Spark系列技术直播# 第四讲 【 机器学习介绍与Spark MLlib实践 】
2018-12-07
1840
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
主讲人：江宇(燕回) 阿里巴巴计算平台EMR技术专家
直播时间：2018.12.06 19:00 - 20:00
内容提要：本次讲座主要面对的是机器学习的入门者，以及想要使用Spark来进行机器学习的用户。
目录
相关文章
|
1月前
|
机器学习/深度学习
自然语言处理
算法
探索机器学习中的自然语言处理技术
【2月更文挑战第16天】
在数字化和智能化的浪潮中，自然语言处理（NLP）技术已成为连接人类与机器沟通的重要桥梁。本文深入探讨了机器学习在自然语言处理中的应用，包括最新的模型架构、算法优化技巧及实际场景中的挑战和解决方案。通过逻辑严密的分析，我们将揭示如何有效利用机器学习提升NLP系统的性能，同时对未来发展趋势进行预测。
146
0
0
|
1月前
|
机器学习/深度学习
人工智能
自然语言处理
探索机器学习中的自然语言处理技术
【2月更文挑战第31天】
随着人工智能的飞速发展，自然语言处理（NLP）技术在机器学习领域扮演着越来越重要的角色。本文旨在深入探讨NLP的关键技术，包括语言模型、词嵌入和深度学习方法，并分析这些技术如何相互协作，以实现更高效的文本分析和理解。通过案例研究和最新研究成果的介绍，我们展示了NLP在实际应用中的强大潜力，以及它如何推动人机交互和信息检索系统的革新。
152
0
0
|
1月前
|
分布式计算
Hadoop
大数据
大数据技术与Python：结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性，阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce，Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop，可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop，以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
553
1
2
|
1月前
|
机器学习/深度学习
人工智能
运维
【人工智能技术专题】「入门到精通系列教程」打好AI基础带你进军人工智能领域的全流程技术体系（机器学习知识导论）（二）
【人工智能技术专题】「入门到精通系列教程」打好AI基础带你进军人工智能领域的全流程技术体系（机器学习知识导论）
82
1
1
|
1月前
|
机器学习/深度学习
人工智能
自然语言处理
【人工智能技术专题】「入门到精通系列教程」打好AI基础带你进军人工智能领域的全流程技术体系（机器学习知识导论）（一）
【人工智能技术专题】「入门到精通系列教程」打好AI基础带你进军人工智能领域的全流程技术体系（机器学习知识导论）
118
1
1
|
14天前
|
分布式计算
Hadoop
大数据
大数据技术：Hadoop与Spark的对比
【6月更文挑战第15天】**Hadoop与Spark对比摘要**
Hadoop是分布式系统基础架构，擅长处理大规模批处理任务，依赖HDFS和MapReduce，具有高可靠性和生态多样性。Spark是快速数据处理引擎，侧重内存计算，提供多语言接口，支持机器学习和流处理，处理速度远超Hadoop，适合实时分析和交互式查询。两者在资源占用和生态系统上有差异，适用于不同应用场景。选择时需依据具体需求。
88
1
2
|
2天前
|
机器学习/深度学习
分布式计算
API
|
1月前
|
分布式计算
Hadoop
大数据
探索大数据技术：Hadoop与Spark的奥秘之旅
【5月更文挑战第28天】本文探讨了大数据技术中的Hadoop和Spark，Hadoop作为分布式系统基础架构，通过HDFS和MapReduce处理大规模数据，适用于搜索引擎等场景。Spark是快速数据处理引擎，采用内存计算和DAG模型，适用于实时推荐和机器学习。两者各有优势，未来将继续发展和完善，助力大数据时代的发展。
74
3
3
|
3天前
|
数据采集
机器学习/深度学习
算法
机器学习方法之决策树算法
决策树算法是一种常用的机器学习方法，可以应用于分类和回归任务。通过递归地将数据集划分为更小的子集，从而形成一棵树状的结构模型。每个内部节点代表一个特征的判断，每个分支代表这个特征的某个取值或范围，每个叶节点则表示预测结果。
12
1
1
|
7天前
|
机器学习/深度学习
人工智能
算法
【昆虫识别系统】图像识别Python+卷积神经网络算法+人工智能+深度学习+机器学习+TensorFlow+ResNet50
昆虫识别系统，使用Python作为主要开发语言。通过TensorFlow搭建ResNet50卷积神经网络算法（CNN）模型。通过对10种常见的昆虫图片数据集（'蜜蜂', '甲虫', '蝴蝶', '蝉', '蜻蜓', '蚱蜢', '蛾', '蝎子', '蜗牛', '蜘蛛'）进行训练，得到一个识别精度较高的H5格式模型文件，然后使用Django搭建Web网页端可视化操作界面，实现用户上传一张昆虫图片识别其名称。
129
7
7
热门文章
最新文章
1
阿里封神谈hadoop生态学习之路
2
现代流式计算的基石：Google DataFlow
3
JindoFS概述：云原生的大数据计算存储分离方案
4
5W1H(六何分析法)全景洞察大数据
5
助力云上开源生态 - 阿里云开源大数据平台的发展
6
基于Spark Streaming 进行 MySQL Binlog 日志准实时传输
7
使用Hive进行OSS数据处理的一个最佳实践
8
HBase写性能优化
9
开源深度学习库BigDL在阿里云E-MapReduce上的实践
10
开源大数据周刊-第66期
1
深度分析：Apache Kafka及其在大数据处理中的应用
70
2
阿里云 EMR StarRocks VS 开源版本功能差异介绍
45
3
【评测有奖】参加 EMR Serverless Spark 产品评测，赢机械键盘、充电宝等礼品！
66
4
EMR Serverless Spark：结合实时计算 Flink 基于 Paimon 实现流批一体
60401
5
客户案例 | 阿里云向量检索 Milvus 版在识货电商检索场景的应用与实践
210
6
基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
56452
7
阿里云 EMR Serverless StarRocks3.x，极速统一的湖仓新范式
944
8
阿里云 EMR Serverless Spark 版开启免费公测
552
9
阿里巴巴的通义千问大模型
692
10
基于阿里云向量检索 Milvus 版和 LangChain 快速构建 LLM 问答系统
970