AI 助理
备案控制台
开发者社区 大数据与机器学习 大数据计算 MaxCompute 文章 正文

数据无边界:非结构化数据在MaxCompute上的处理

2016-11-16 3807
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本文PPT来自阿里云数据事业部高级专家应答于10月15日在2016年杭州云栖大会上发表的《数据无边界:结构化数据在MaxCompute上的处理》。

这是DT（Data Technology）时代，每天有海量数据的加速产生，而每天产生的海量数据80%+是非结构化的，如何把握数据资源服务大众，激发生产力是每个互联网企业需要掌握的核心竞争力。我们的理想是MaxCompute在SQL线上实现与其它云数据(OSS, TableStore等) 的互联互通,用OSS（阿里云对外提供的海量、安全和高可靠的云存储服务）几种非结构化数据处理为范例，未来我们可以期待对各种非结构化数据的分布式处理成为可能，甚至开启气象数据、基因数据等多种大数据，建立与各种分布式系统的生态连接的无限可能。

885e91f4a81012f3e8f83c0889e02e82ab700daac040100e242e980119dfb6d6b893b5c15fa7ed89ba36670cbf24d6fed44988c5e2b0807357d4f03ea4f18007dd88e628b8ab6e6e2a215ea14c33a20ad971b9f8f045b2b13c80e925b83694465a258e07db8b39ee9f1c37664c7fb6c32f5fa0174e86980ff3520eed0b52a62815b6c6749b801b78c5ce4ffdfaab0b56c37d6c15471ab1c3965a9587b77c66b83e7da60c29172542f453007f4258d9e451b3518170fdf914e76f7007fd4edd80c153a890b469b114dbbede8b957299e1d4d526f309498a324653ac4948504676bc7dd8d30df5aba0ae81ff99aebd7f642e4d1ba7c694271396c89f9f367574dc978b57aecf4022099128f0561b10d94d81ede4cde81734a76da43b78244f33ba93cefe5229ce6362e19e0a7b3d4c52a16d53060b4adf9a8ed863d317bed18d5e


欢迎加入MaxCompute钉钉群讨论

35a12d1cfb9f44bb6eead5bf43e9e0ca60393eff


文章标签：
云原生大数据计算服务 MaxCompute
大数据
分布式计算
MaxCompute
关键词：
云原生大数据计算服务 MaxCompute数据
云原生大数据计算服务 MaxCompute结构化
数据结构化云原生大数据计算服务 MaxCompute
云原生大数据计算服务 MaxCompute边界
数据边界结构化云原生大数据计算服务 MaxCompute
相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程：基于MaxCompute的热门话题分析
云计算小粉
目录
相关文章
Echo_Wish
|
3月前
|
机器学习/深度学习 传感器 分布式计算
数据才是真救命的：聊聊如何用大数据提升灾难预警的精准度
数据才是真救命的：聊聊如何用大数据提升灾难预警的精准度
Echo_Wish
323 14
Echo_Wish
|
3月前
|
传感器 人工智能 监控
数据下田，庄稼不“瞎种”——聊聊大数据如何帮农业提效
数据下田，庄稼不“瞎种”——聊聊大数据如何帮农业提效
Echo_Wish
162 14
游客hp4x2qkhydglu
|
2月前
|
传感器 人工智能 监控
拔俗多模态跨尺度大数据AI分析平台：让复杂数据“开口说话”的智能引擎
在数字化时代，多模态跨尺度大数据AI分析平台应运而生，打破数据孤岛，融合图像、文本、视频等多源信息，贯通微观与宏观尺度，实现智能诊断、预测与决策，广泛应用于医疗、制造、金融等领域，推动AI从“看懂”到“会思考”的跃迁。
游客hp4x2qkhydglu
282 0
Echo_Wish
|
3月前
|
机器学习/深度学习 传感器 监控
吃得安心靠数据？聊聊用大数据盯紧咱们的餐桌安全
吃得安心靠数据？聊聊用大数据盯紧咱们的餐桌安全
Echo_Wish
161 1
Echo_Wish
|
3月前
|
数据采集 自动驾驶 机器人
数据喂得好，机器人才能学得快：大数据对智能机器人训练的真正影响
数据喂得好，机器人才能学得快：大数据对智能机器人训练的真正影响
Echo_Wish
269 1
1062754335
|
5月前
|
数据采集 分布式计算 DataWorks
ODPS在某公共数据项目上的实践
本项目基于公共数据定义及ODPS与DataWorks技术，构建一体化智能化数据平台，涵盖数据目录、归集、治理、共享与开放六大目标。通过十大子系统实现全流程管理，强化数据安全与流通，提升业务效率与决策能力，助力数字化改革。
1062754335
219 4
Echo_Wish
|
4月前
|
机器学习/深度学习 运维 监控
运维不怕事多，就怕没数据——用大数据喂饱你的运维策略
运维不怕事多，就怕没数据——用大数据喂饱你的运维策略
Echo_Wish
187 0
LucianaiB
|
5月前
|
分布式计算 DataWorks 数据处理
在数据浪潮中前行：记录一次我与ODPS的实践、思考与展望
本文详细介绍了在 AI 时代背景下，如何利用阿里云 ODPS 平台（尤其是 MaxCompute）进行分布式多模态数据处理的实践过程。内容涵盖技术架构解析、完整操作流程、实际部署步骤以及未来发展方向，同时结合 CSDN 博文深入探讨了多模态数据处理的技术挑战与创新路径，为企业提供高效、低成本的大规模数据处理方案。
LucianaiB
346 3
特立独行的猫-33311
|
5月前
|
SQL 人工智能 分布式计算
ODPS：数据浪潮中的成长与突围
本文讲述了作者在大数据浪潮中，通过引入阿里云ODPS体系（包括MaxCompute、DataWorks、Hologres）解决数据处理瓶颈、实现业务突破与个人成长的故事。从被海量数据困扰到构建“离线+实时”数据架构，ODPS不仅提升了数据处理效率，更推动了技术能力与业务影响力的双重跃迁。
特立独行的猫-33311
197 4
凯哥亡命天涯
|
5月前
|
SQL 人工智能 分布式计算
在数据浪潮中前行：我与ODPS的实践、思考与展望
在数据驱动决策的时代，企业如何高效处理海量数据成为数字化转型关键。本文结合作者实践，深入解析阿里云自研大数据平台 ODPS 的技术优势与应用场景，涵盖 MaxCompute、DataWorks、Hologres 等核心产品，分享从数据治理到实时分析的落地经验，并展望其在 AI 与向量数据时代的发展前景。
凯哥亡命天涯
258 70
大数据与机器学习

大数据计算 MaxCompute

热门文章

最新文章

  • 1
    大数据环境下该如何优雅地设计数据分层
  • 2
    odps是什么?
  • 3
    MaxCompute执行作业慢的原因排查
  • 4
    阿里云MaxCompute（大数据）公开数据集---带你玩转人工智能
  • 5
    吴刚专访--大数据和 MaxCompute 技术和故事
  • 6
    【转载】时隔一年多，我又用起了 Superset
  • 7
    品《阿里巴巴大数据实践-大数据之路》一书（上）
  • 8
    [大数据新手上路]“零基础”系列课程--如何将ECS上的Hadoop数据迁移到阿里云数加·MaxCompute
  • 9
    使用 MaxCompute Studio 开发大数据应用
  • 10
    ［ETL实践指南］基于Kettle的MaxCompute插件实现数据上云
  • 1
    网站代码 网站源代码 网页源代码 网页代码网站
    296
  • 2
    【跨国数仓迁移最佳实践8】MaxCompute Streaming Insert：大数据数据流写业务迁移的实践与突破
    281
  • 3
    【跨国数仓迁移最佳实践7】基于 MaxCompute 多租的大数据平台架构
    233
  • 4
    ODPS 十五周年实录 | Data + AI，MaxCompute 下一个15年的新增长引擎
    166
  • 5
    【跨国数仓迁移最佳实践6】MaxCompute SQL语法及函数功能增强，10万条SQL转写顺利迁移
    278
  • 6
    诊断设备企业必看！垂直医疗行业的CRM软件有哪些？
    317
  • 7
    MaxCompute 聚簇优化推荐原理
    289
  • 8
    【跨国数仓迁移最佳实践5】MaxCompute近线查询解决方案助力物流电商等实时场景实现高效查询
    210
  • 9
    【赵渝强老师】阿里云大数据MaxCompute的体系架构
    366
  • 10
    MaxCompute聚簇优化推荐功能发布，单日节省2PB Shuffle、7000+CU！
    254

    • 相关产品

  • 云原生大数据计算服务 MaxCompute
    文档详情 产品详情

    • 相关课程

    更多
  • 大数据Spark2020最新课程（知识精讲与实战演练）第二阶段
  • 大数据Spark2020版（知识精讲与实战演练）第三阶段
  • 大数据Spark2020版（知识精讲与实战演练）第四阶段
  • 2020版大数据实战项目之DMP广告系统（第五阶段）
  • 2020版大数据实战项目之DMP广告系统（第六阶段）
  • 2020版大数据实战项目之DMP广告系统（第七阶段）

    • 相关电子书

    更多
  • MaxCompute Serverless 架构演进
  • Data+AI时代大数据平台应该如何建设
  • 大数据AI一体化的解读
    • 下一篇
    基于Python+Vue开发的口腔牙科预约管理系统