AI 助理
备案控制台

分布式计算

首页 标签 分布式计算
# 分布式计算 #
关注
37851内容
最新 热门 文章 问答 视频 电子书 课程
祎休
|
博文
|
来自： 大数据与机器学习
【干货索引】阿里云大数据计算服务MaxCompute与生态系统的融合
MaxCompute大家都不陌生，之前产品名称叫ODPS，之后随国际化而更名。从支持阿里集团内部99%数据业务到计算能力对外输出，帮助政府、互联网公司、金融等进行大数据项目服务，使得数据变现。很多开发者都会把MaxCompute和开源社区Hadoop、hive进行比较，此处不做过多评论，各有优势。
# 云原生大数据计算服务 MaxCompute # 日志服务 # 数据总线 DataHub # 分布式计算 # MaxCompute # Java # 大数据 # PHP
隐林
|
博文
|
来自： 大数据与机器学习
当 Elasticsearch 遇上 MaxCompute —— 「Elasticsearch on MaxCompute 」简介
转自haixiaElasticsearch on MaxCompute Elasticsearch 是目前最流行的开源分布式搜索系统之一，它有着优秀的近实时搜索性能和丰富的周边配套工具。以 Elasticsearch 为核心的 Elastic Stack (Elasticsearch + Log
# 检索分析服务 Elasticsearch版 # 云原生大数据计算服务 MaxCompute # 分布式计算 # MaxCompute
上单
|
博文
|
来自： 大数据与机器学习
阿里云大数据利器之-使用flume+sql实现流计算做实时展现业务（归档Maxcompute）
实时业务处理的需求越来越多，也有各种处理方案，比如storm，spark等都可以。那以数据流的方向可以总结成数据源-数据搜集-缓存队列-实时处理计算-数据展现。本文就用阿里云产品简单实现了一个实时处理的方案。
# 云原生大数据计算服务 MaxCompute # 云数据库 RDS MySQL 版 # 数据总线 DataHub # 分布式计算 # 大数据 # MaxCompute # 流计算 # SQL
晋恒
|
博文
|
来自： 大数据与机器学习
【新功能】MaxCompoute禁止Full Scan功能开放
2018年1月10日，MaxCompute禁止Full Scan功能开放。对于新创建的project默认情况下执行sql时，针对该project里的分区表不允许全表扫描，必须有分区条件指定需要扫描的分区。
# 云原生大数据计算服务 MaxCompute # SQL # 分布式计算 # 大数据 # MaxCompute # Web App开发
lauren_liuling
|
博文
hadoop中datanode无法启动，报Caused by: java.net.NoRouteToHostException: No route to host
# 分布式计算 # Hadoop # 网络安全
周志湖
|
博文
Spark修炼之道（基础篇）——Linux大数据开发基础：第一节、Linux介绍、安装及使用初步
本节主要内容 Linux简史 Linux系统整体介绍 Ubuntu Linux安装 Linux使用初步 1. Linux简史 要讲述大名鼎鼎的Linux，必然要先从UNIX系统谈起，下面这幅图给出了Unix系统的进化图： 图片来源：http://baike.baidu.com/link?url=QfoqWtWGs-BjpnfEy_AUk7Bm3XHuf6JbN92H
# 云原生大数据计算服务 MaxCompute # 云虚拟主机 # 分布式计算 # Ubuntu # Unix # Linux # Spark
skyme
|
博文
CDH（Cloudera）与hadoop（apache）对比
# 分布式计算 # Hadoop # Apache # 安全 # SQL # HIVE # Hbase # 分布式数据库
李杉杉
|
博文
|
来自： 大数据与机器学习
专家教你使用MaxCompute玩转大数据分析！
摘要传统的数据分析经常使用的工具是Hadoop或Spark在使用之前环境是需要用户自己去搭建的。随着业务逐渐向云迁移如何在云上进行大数据分析是需要解决的问题。为此阿里云提供了一项很重要的服务——大数据计算服务MaxCompute。
# 云原生大数据计算服务 MaxCompute # 数据集成 Data Integration # SQL # 分布式计算 # 大数据 # 测试技术 # MaxCompute
载思
|
博文
|
来自： 大数据与机器学习
阿里妈妈MaxCompute架构演进 - AON(MPI)集群
我们的集群规模不断地在加大， 与此同时我们却有着不同的感受，明显感觉到了各种任务的运行效率都在变低，其中AllOrNothing这类任务表现尤为明显
# 云原生大数据计算服务 MaxCompute # 分布式计算 # 并行计算 # 调度 # MaxCompute
datahub_support
|
博文
新老DataHub迁移手册
原Odps版内测DataHub，于2016年11月21日起已经处于维护状态，新版DataHub届时已经开启公测，公测至今已有一年时间，我们决定开始逐步下线老DataHub服务，老版部分用户需要迁移至新版DataHub。
# 数据总线 DataHub # 云原生大数据计算服务 MaxCompute # 域名与网站 # 分布式计算 # MaxCompute # 开发工具 # Java # Apache # 索引 # 对象存储
免费试用