AI 助理
文档备案控制台
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 文章 正文

# Apache Spark系列技术直播# 第四讲 【 机器学习介绍与Spark MLlib实践 】

2018-12-07 2163
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 主讲人：江宇(燕回) 阿里巴巴计算平台EMR技术专家 直播时间：2018.12.06 19:00 - 20:00 内容提要：本次讲座主要面对的是机器学习的入门者，以及想要使用Spark来进行机器学习的用户。

主讲人：江宇(燕回) 阿里巴巴计算平台EMR技术专家

直播时间：2018.12.06 19:00 - 20:00

内容提要：本次讲座主要面对的是机器学习的入门者，以及想要使用Spark来进行机器学习的用户。我们会介绍一下机器学习相关领域的基础知识，以及机器学习在spark上面的实践，同时给出我们的一些使用建议。

_2018_12_06_8_54_10

视频分享：https://yq.aliyun.com/live/693
ppt分享：https://yq.aliyun.com/download/3129

欢迎扫码进群共同交流：

_2018_12_05_4_48_20_meitu_1

文章标签：
开源大数据平台 E-MapReduce
Apache
分布式计算
Spark
机器学习/深度学习
社区小助手
目录
相关文章
阿里云大数据Al技术
|
机器学习/深度学习 人工智能 JSON
【解决方案】DistilQwen2.5-R1蒸馏小模型在PAI-ModelGallery的训练、评测、压缩及部署实践
阿里云的人工智能平台 PAI，作为一站式的机器学习和深度学习平台，对DistilQwen2.5-R1模型系列提供了全面的技术支持。无论是开发者还是企业客户，都可以通过 PAI-ModelGallery 轻松实现 Qwen2.5 系列模型的训练、评测、压缩和快速部署。本文详细介绍在 PAI 平台使用 DistilQwen2.5-R1 蒸馏模型的全链路最佳实践。
阿里云大数据Al技术
855 63
阿里云大数据Al技术
|
人工智能 JSON 算法
【解决方案】DistilQwen2.5-DS3-0324蒸馏小模型在PAI-ModelGallery的训练、评测、压缩及部署实践
DistilQwen 系列是阿里云人工智能平台 PAI 推出的蒸馏语言模型系列，包括 DistilQwen2、DistilQwen2.5、DistilQwen2.5-R1 等。本文详细介绍DistilQwen2.5-DS3-0324蒸馏小模型在PAI-ModelGallery的训练、评测、压缩及部署实践。
阿里云大数据Al技术
755 7
Echo_Wish
|
存储 分布式计算 Hadoop
从“笨重大象”到“敏捷火花”：Hadoop与Spark的大数据技术进化之路
从“笨重大象”到“敏捷火花”：Hadoop与Spark的大数据技术进化之路
Echo_Wish
967 79
阿里云大数据Al技术
|
人工智能 JSON 算法
Qwen2.5-Coder 系列模型在 PAI-QuickStart 的训练、评测、压缩及部署实践
阿里云的人工智能平台 PAI，作为一站式、 AI Native 的大模型与 AIGC 工程平台，为开发者和企业客户提供了 Qwen2.5-Coder 系列模型的全链路最佳实践。本文以Qwen2.5-Coder-32B为例，详细介绍在 PAI-QuickStart 完成 Qwen2.5-Coder 的训练、评测和快速部署。
阿里云大数据Al技术
2955 30
Qwen2.5-Coder 系列模型在 PAI-QuickStart 的训练、评测、压缩及部署实践
颜淡慕潇
|
数据采集 人工智能 API
生物医药蛋白分子数据采集：支撑大模型训练的技术实践分享
作为生物信息学领域的数据工程师，近期在为蛋白质相互作用预测AI大模型构建训练集时，我面临着从PDB、UniProt等学术数据库获取高质量三维结构、序列及功能注释数据的核心挑战。通过综合运用反爬对抗技术，成功突破了数据库的速率限制、验证码验证等反爬机制，将数据采集效率提升4倍，为蛋白质-配体结合预测模型训练提供了包含10万+条有效数据的基础数据集，提高了该模型预测的准确性。
颜淡慕潇
886 1
阿里云大数据Al技术
|
机器学习/深度学习 人工智能 边缘计算
DistilQwen2.5蒸馏小模型在PAI-ModelGallery的训练、评测、压缩及部署实践
DistilQwen2.5 是阿里云人工智能平台 PAI 推出的全新蒸馏大语言模型系列。通过黑盒化和白盒化蒸馏结合的自研蒸馏链路，DistilQwen2.5各个尺寸的模型在多个基准测试数据集上比原始 Qwen2.5 模型有明显效果提升。这一系列模型在移动设备、边缘计算等资源受限的环境中具有更高的性能，在较小参数规模下，显著降低了所需的计算资源和推理时长。阿里云的人工智能平台 PAI，作为一站式的机器学习和深度学习平台，对 DistilQwen2.5 模型系列提供了全面的技术支持。本文详细介绍在 PAI 平台使用 DistilQwen2.5 蒸馏小模型的全链路最佳实践。
阿里云大数据Al技术
1010 3
Echo_Wish
|
机器学习/深度学习 数据采集 分布式计算
大数据分析中的机器学习基础：从原理到实践
大数据分析中的机器学习基础：从原理到实践
Echo_Wish
914 3
请看我回答~
|
机器学习/深度学习 人工智能 算法
人工智能浪潮下的编程实践：构建你的第一个机器学习模型
在人工智能的巨浪中，每个人都有机会成为弄潮儿。本文将带你一探究竟，从零基础开始，用最易懂的语言和步骤，教你如何构建属于自己的第一个机器学习模型。不需要复杂的数学公式，也不必担心编程难题，只需跟随我们的步伐，一起探索这个充满魔力的AI世界。
请看我回答~
508 12
阿里云大数据Al技术
|
人工智能 边缘计算 JSON
DistilQwen2 蒸馏小模型在 PAI-QuickStart 的训练、评测、压缩及部署实践
本文详细介绍在 PAI 平台使用 DistilQwen2 蒸馏小模型的全链路最佳实践。
阿里云大数据Al技术
1184 11
大数据与机器学习

开源大数据平台 E-MapReduce

热门文章

最新文章

  • 1
    梨视频：基于阿里云E-MapReduce搭建视频推荐系统的实践
  • 2
    HIVE MapJoin异常问题处理总结
  • 3
    通过可视化更好的了解你的Spark应用
  • 4
    使用E-MapReduce服务处理阿里云文件存储（NAS）的数据
  • 5
    SparkSQL Catalyst解析
  • 6
    开源大数据周刊-第79期
  • 7
    开源大数据周刊-第38期
  • 8
    [转载] 是时候学习真正的 spark 技术了
  • 9
    # Apache Spark系列技术直播# 第四讲 【 机器学习介绍与Spark MLlib实践 】
  • 10
    7月10日直播【E-MapReduce产品探秘，扩展开源生态云上的能力】
  • 1
    从原始Ego视频到训练就绪：用 EMR Serverless Ray 提效具身数据生产管线
    224
  • 2
    StarRocks 全模态能力导读：连接内容理解、混合检索与业务分析
    241
  • 3
    StarRocks 全面支持 Paimon 2.0：构建多模态统一分析与检索
    264
  • 4
    借助 EMR Serverless StarRocks 实现电商平台图搜图、文搜图场景
    215
  • 5
    EMR Serverless StarRocks 湖仓多模态检索：One SQL on One Data，实现全文 + 标量 + 向量三路混合检索
    239
  • 6
    阿里云 EMR Serverless StarRocks Skills 正式发布
    226
  • 7
    最佳实践：用 StarRocks AI Function 实现金融行业文本分类
    188
  • 8
    StarRocks 支持向量检索、混合检索和多模态检索吗？全模态能力与选型导读
    187
  • 9
    EMR Daft × Qoder：一句话生成并运行智驾数据处理 Pipeline
    207
  • 10
    阿里云 EMR Serverless Spark AI Function 多模态能力介绍与智驾场景图片理解实践
    189

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • Apache Flink 入门到实战 - Flink开源社区出品
  • 大数据实时计算框架Spark快速入门
  • Apache Flink 入门

    • 相关电子书

    更多
  • Hybrid Cloud and Apache Spark
  • Scalable Deep Learning on Spark
  • Comparison of Spark SQL with Hive

    • 相关实验场景

    更多
  • 在PAI ArtLab一键设计AIGC新春红包

    • 推荐镜像

    更多
  • apache
    • 下一篇
    一条命令迁移，帮你实现 OpenClaw 与 Hermes Agent 记忆互通！