AI 助理
备案控制台
开发者社区 人工智能 文章 正文

3月27日云栖精选夜读：数加平台——阿里大数据OS实践

2017-03-27 2298
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
云原生大数据计算服务 MaxCompute，5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute，500CU*H 100GB 3个月
简介： 一个周末不见，大家有想我没有啊？不知道有没有周末也加班的程序员呢（估计大家都加班吧）！忙了一个周末到现在也许可以稍稍放松一下了，那么就不如看看今天的精选夜读有什么新鲜热辣好玩的技术实践吧！在本文的《数加平台——阿里大数据OS实践》中，我们将详细地了解到阿里云数加平台的演进过程和阿里大数据OS的架构。

一个周末不见，大家有想我没有啊？不知道有没有周末也加班的程序员呢（估计大家都加班吧）！忙了一个周末到现在也许可以稍稍放松一下了，那么就不如看看今天的精选夜读又有什么新鲜热辣好玩的技术实践吧！在本文的《数加平台——阿里大数据OS实践》中，我们将详细地了解到阿里云数加平台的演进过程和阿里大数据OS的架构，什么你还不知道阿里的数加平台？赶紧来点击看下吧！

技术实践：

数加平台——阿里大数据OS实践

作者： 场景研读

Flink Table/SQL API 规划 —— Dynamic Table

作者： mtunique

【直击Tech insight】企业混合云专场——弹性计算云产品使用误区与最佳实践

作者： cloud_service  发表在： 阿里云服务

新颖训练方法——用迭代投影算法训练神经网络

作者： 【方向】

仅仅1首歌的时间，找回误删数据

作者： dms项目组

JSBridge深度剖析

作者： code_xzh

玩转云镜像制作之packer篇

作者： davidzhuzh  发表在： 开源自动化运维工具

热议：

记一次8小时惊心动魄的服务器+网站升级

作者： 小柒2012

faked 一个用于 mock 后端 API 的轻量工具

作者： houfeng

游戏风云：阿里云全球同服游戏方案全面解读

作者： 【云行】

TensorFlow游乐场及神经网络简介

作者： 博文视点

ECS控制台使用小贴士

作者： zhangzz
文章标签：
云原生大数据计算服务 MaxCompute
大数据
API
程序员
算法
机器学习/深度学习
算法框架/工具
流计算
弹性计算
运维
TensorFlow
关键词：
操作系统平台
云原生大数据计算服务 MaxCompute实践
云原生大数据计算服务 MaxCompute平台
阿里操作系统
操作系统实践
相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析，通过分析能得到用户群体年龄分布，性别分布，地理位置分布，以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品，是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法，从场景到实践，体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库，助力开发者学习了解先进的技术栈，并能在实际业务中敏捷的进行大数据分析，赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景，可应用MaxCompute实现数仓搭建，快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理，需要搭建数据仓库？学它！ 没有足够人员和经验来运维大数据平台，不想自建IDC买机器，需要免运维的大数据平台？会SQL就等于会大数据？学它！ 想知道大数据用得对不对，想用更少的钱得到持续演进的数仓能力？获得极致弹性的计算资源和更好的性能，以及持续保护数据安全的生产环境？学它！ 想要获得灵活的分析能力，快速洞察数据规律特征？想要兼得数据湖的灵活性与数据仓库的成长性？学它！ 出品人：阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
yq传送门
目录
相关文章
技术小达人
|
1月前
|
机器学习/深度学习 人工智能 云计算
Intel 平台新特性助力龙蜥 OS 云计算 | 龙蜥大讲堂101期
本次分享的主题是Intel平台新特性助力龙蜥OS云计算。内容涵盖英特尔第四代和第五代至强处理器的新特性，如性能提升、内置加速器等，并详细介绍TDX、SGX、AMX等技术原理及其在虚拟化环境中的支持情况，旨在帮助云用户充分利用英特尔新平台的优势。
技术小达人
61 5
卓伊凡
|
7天前
|
安全 前端开发 开发工具
【01】鸿蒙实战应用开发-华为鸿蒙纯血操作系统Harmony OS NEXT-项目开发实战-优雅草卓伊凡拟开发一个一站式家政服务平台-前期筹备-暂定取名斑马家政软件系统-本项目前端开源-服务端采用优雅草蜻蜓Z系统-搭配ruoyi框架admin后台-全过程实战项目分享-从零开发到上线
【01】鸿蒙实战应用开发-华为鸿蒙纯血操作系统Harmony OS NEXT-项目开发实战-优雅草卓伊凡拟开发一个一站式家政服务平台-前期筹备-暂定取名斑马家政软件系统-本项目前端开源-服务端采用优雅草蜻蜓Z系统-搭配ruoyi框架admin后台-全过程实战项目分享-从零开发到上线
卓伊凡
38 5
【01】鸿蒙实战应用开发-华为鸿蒙纯血操作系统Harmony OS NEXT-项目开发实战-优雅草卓伊凡拟开发一个一站式家政服务平台-前期筹备-暂定取名斑马家政软件系统-本项目前端开源-服务端采用优雅草蜻蜓Z系统-搭配ruoyi框架admin后台-全过程实战项目分享-从零开发到上线
灵杰开发者
|
8天前
|
SQL 存储 HIVE
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
本文整理自鹰角网络大数据开发工程师朱正军在Flink Forward Asia 2024上的分享，主要涵盖四个方面：鹰角数据平台架构、数据湖选型、湖仓一体建设及未来展望。文章详细介绍了鹰角如何构建基于Paimon的数据湖，解决了Hudi入湖的痛点，并通过Trino引擎和Ranger权限管理实现高效的数据查询与管控。此外，还探讨了湖仓一体平台的落地效果及未来技术发展方向，包括Trino与Paimon的集成增强、StarRocks的应用以及Paimon全面替换Hive的计划。
灵杰开发者
70 1
鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
wiker24
|
1月前
|
机器学习/深度学习 编解码 弹性计算
【实践】操作系统智能助手OS Copilot新功能测评
OS Copilot 是一款致力于深度融合于操作系统的智能助手，它旨在成为用户与操作系统交互的得力助手。通过先进的自然语言处理技术和机器学习算法，OS Copilot 能够理解用户多样化的指令，将复杂的操作系统操作简单化。在日常使用场景中，无论是文件管理、应用程序的操作，还是系统设置的调整，OS Copilot 都能提供高效的支持。例如，在文件管理方面，用户无需手动在层层文件夹中查找文件，只需通过描述文件的大致信息，如创建时间、文件内容关键词等，就能快速定位到目标文件。然而，也存在一些不足，如代码生成时未使用正确后缀名、部分响应时间较长等问题。
wiker24
97 8
穿过生命散发芬芳
|
1月前
|
存储 人工智能 运维
产品评测 | 欢迎来到大模型时代的操作系统管理平台
操作系统管理平台是一款专为提升Linux使用效率而设计的工具，提供运维管理、智能助手、扩展组件管理等功能，用户可通过该平台进行系统概览、诊断和观测，确保集群健康运行。安装简便，涵盖内存、存储、网络等多维度诊断，并生成详细报告。特别推荐给需要管理大量ECS资源的运维工程师，免费且功能强大。体验链接：https://alinux.console.aliyun.com/。
穿过生命散发芬芳
73 26
喵手
|
1月前
|
数据采集 人工智能 分布式计算
MaxFrame：链接大数据与AI的高效分布式计算框架深度评测与实践！
阿里云推出的MaxFrame是链接大数据与AI的分布式Python计算框架，提供类似Pandas的操作接口和分布式处理能力。本文从部署、功能验证到实际场景全面评测MaxFrame，涵盖分布式Pandas操作、大语言模型数据预处理及企业级应用。结果显示，MaxFrame在处理大规模数据时性能显著提升，代码兼容性强，适合从数据清洗到训练数据生成的全链路场景...
喵手
102 5
MaxFrame：链接大数据与AI的高效分布式计算框架深度评测与实践！
游客qwzvzjwcsw7io
|
1月前
|
安全 开发者
阿里OS Copilot新功能测评
作为一名个人开发者，我测试了OS Copilot的-t/-f/管道功能，尽管任务执行失败，但整体体验不错。安装过程简单，智能体操作便捷但存在安全风险。参数帮助详细却冗长，建议简化并增加总结和示例。对于危险操作，阿里云的安全提示值得肯定，但仍需丰富文案和提供用户教育内容。期待未来改进与突破！
游客qwzvzjwcsw7io
76 16
探索云世界
|
1月前
|
存储 弹性计算 运维
云端问道 7 期实践教学-使用操作系统智能助手 OS Copilot 轻松运维与编程
使用操作系统智能助手 OS Copilot 轻松运维与编程
探索云世界
67 14
技术内容小助手
|
2月前
|
存储 人工智能 调度
容器服务：智算时代云原生操作系统及月之暗面Kimi、深势科技实践分享
容器技术已经发展成为云计算操作系统的关键组成部分，向下高效调度多样化异构算力，向上提供统一编程接口，支持多样化工作负载。阿里云容器服务在2024年巴黎奥运会中提供了稳定高效的云上支持，实现了子弹时间特效等创新应用。此外，容器技术还带来了弹性、普惠的计算能力升级，如每分钟创建1万Pod和秒级CPU资源热变配，以及针对大数据与AI应用的弹性临时盘和跨可用区云盘等高性能存储解决方案。智能运维方面，推出了即时弹性节点池、智能应用弹性策略和可信赖集群托管运维等功能，进一步简化了集群管理和优化了资源利用率。
技术内容小助手
138 8
阿里云瑶池数据库SelectDB
|
3月前
|
存储 消息中间件 分布式计算
Cisco WebEx 数据平台：统一 Trino、Pinot、Iceberg 及 Kyuubi，探索 Apache Doris 在 Cisco 的改造实践
Cisco WebEx 早期数据平台采用了多系统架构（包括 Trino、Pinot、Iceberg 、 Kyuubi 等），面临架构复杂、数据冗余存储、运维困难、资源利用率低、数据时效性差等问题。因此，引入 Apache Doris 替换了 Trino、Pinot 、 Iceberg 及 Kyuubi 技术栈，依赖于 Doris 的实时数据湖能力及高性能 OLAP 分析能力，统一数据湖仓及查询分析引擎，显著提升了查询性能及系统稳定性，同时实现资源成本降低 30%。
阿里云瑶池数据库SelectDB
94 8
Cisco WebEx 数据平台：统一 Trino、Pinot、Iceberg 及 Kyuubi，探索 Apache Doris 在 Cisco 的改造实践

热门文章

最新文章

  • 1
    操作系统控制台 | 让运维也可以点点点
  • 2
    用户实操：如何以龙蜥操作系统为底座在 CPU 上运行 DeepSeek-R1
  • 3
    OS Copilot全面测评报告 与 利用OS Copilot进行在线WebAPI接口开发
  • 4
    os-copilot安装和使用体验测评
  • 5
    操作系统控制台体验测评
  • 6
    阿里云操作系统智能助手OS Copilot测评报告及建议
  • 7
    OS Copilot-操作系统智能助手-Linux新手小白的福音
  • 8
    AI驱动的操作系统服务评测报告
  • 9
    操作系统智能助手OS Copilot新功能
  • 10
    评测报告：OS Copilot 功能体验与效率提升
  • 1
    量子计算对大数据处理的深远影响
    83
  • 2
    指挥学校大数据系统解决方案
    94
  • 3
    大数据AI一体化开发再加速：DataWorks 支持GPU类型资源
    71
  • 4
    数据无界、湖仓无界，Apache Doris 湖仓一体典型场景实战指南（下篇）
    22
  • 5
    物联网与大数据：揭秘万物互联的新纪元
    32
  • 6
    阿里云 MaxCompute MaxQA 开启公测，解锁近实时高效查询体验
    49
  • 7
    大数据项目管理：从规划到执行的全景指南
    26
  • 8
    鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
    70
  • 9
    数据无界、湖仓无界， Apache Doris 湖仓一体解决方案全面解读（上篇）
    43
  • 10
    美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台
    54

    • 相关课程

    更多
  • 大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践
  • 基于Flink的实时大数据应用Demo
  • 操作系统学习
  • 大数据Impala教程
  • Linux操作系统实战
  • 高校精品课-西安电子科技大学 -操作系统课程设计

    • 相关电子书

    更多
  • 国产服务器操作系统发展报告（2023年）
  • 开放算力·云启未来
  • 2022龙蜥操作系统生态用户实践精选

    • 相关实验场景

    更多
  • 通过FastMR自动拉起大数据集群并运行TPCDS任务
  • 零基础入门Serverless：基于函数计算快速搭建基于人工智能的目标检测系统
  • Alibaba Cloud Linux操作系统的安装及使用
  • Alibaba Cloud Linux操作系统Shell程序
  • 基于Conditions在不同操作系统创建ECS
  • 专属钉底座交付培训课程

    • 推荐镜像

    更多
  • os-copilot
  • keyarchos
  • anolis
    • 下一篇
    通义万相：视觉生成大模型再进化