亢海鹏
亢海鹏_个人页
亢海鹏
文章
65
问答
143
视频
0
个人介绍
MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库，以 Serverless 架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效的分析处理海量数据。
擅长的技术
- Java
- Python
- 前端开发
- Linux
- 数据库
暂无更多信息
2019年11月
-
11.18 12:49:03
发表了文章
2019-11-18 12:49:03
Hive数据如何同步到MaxCompute之实践讲解
本次分享主要介绍 Hive数据如何迁移到MaxCompute。MMA（MaxCompute Migration Assist）是一款MaxCompute数据迁移工具，本文将为大家介绍MMA工具的功能、技术架构和实现原理，再通过实际操作MMA，演示将Hive数据迁移到MaxCompute。 -
11.12 18:18:31发表了文章
2019-11-12 18:18:31
MySQL/RDS数据如何同步到MaxCompute之实践讲解
大数据计算服务（MaxCompute，原名ODPS）是阿里云提供的一种快速、完全托管的EB级数据仓库解决方案。本文章中阿里云MaxCompute公有云技术支持人员刘力夺通过一个实验向大家介绍了阿里云关系型数据库产品RDS中的MySQL数据如何同步到MaxCompute，帮助用户大体了解MaxCompute产品以及其数据同步过程。 -
11.01 17:55:04发表了文章
2019-11-01 17:55:04
这样才能正确解锁MaxCompute客户端
飞天大数据平台计算引擎MaxCompute成为全球首个TPCx-BB认证的公共云产品，是除Hive、Spark以外TPCx-BB第三个标准支持的大数据引擎。 -
11.01 11:05:56发表了文章
2019-11-01 11:05:56
MaxCompute问答整理之10月
飞天大数据平台计算引擎MaxCompute成为全球首个TPCx-BB认证的公共云产品，是除Hive、Spark以外TPCx-BB第三个标准支持的大数据引擎。
2019年10月
-
10.30 17:53:54发表了文章
2019-10-30 17:53:54
业务流程多节点依赖调度配置实践
在DataWorks业务流程开发过程。一个业务流程通常是由很多个数据同步、数据开发节点组成的。这很多个业务节点的上下游节点的连接通过执行顺序先后进行连接，系统自动就行上下游解析。这里主要用于测试在一个业务流程过程中根据业务需求进行节点连接之后自动解析上下游是否会发生错误。 -
10.16 11:11:30
回答了问题
2019-10-16 11:11:30
HiTSDB的数据如何集成到maxcompute或其他组件？
赞0 踩0 评论0 -
10.16 11:07:02发表了文章
2019-10-16 11:07:02
大数据计算服务MaxCompute每日问答汇总（持续更新中）
飞天大数据平台计算引擎MaxCompute成为全球首个TPCx-BB认证的公共云产品，是除Hive、Spark以外TPCx-BB第三个标准支持的大数据引擎。
2019年09月
-
09.30 17:10:10发表了文章
2019-09-30 17:10:10
MaxCompute问答整理之9月
本文是基于本人对MaxCompute产品的学习进度，再结合开发者社区里面的一些问题，进而整理成文。希望对大家有所帮助。 -
09.18 15:13:33回答了问题
2019-09-18 15:13:33
maxcompute有无sdk去创建任务的调度
赞0 踩0 评论0 -
09.18 14:39:24回答了问题
2019-09-18 14:39:24
Quick BI加载MaxCompute数据时报错
赞0 踩0 评论0 -
09.12 16:48:33回答了问题
2019-09-12 16:48:33
通过MaxCompute访问OTS可以使用多元索引吗？
赞0 踩0 评论0 -
09.06 15:35:33发表了文章
2019-09-06 15:35:33
MaxCompute开发者夏季颁奖礼~久久感谢有你
夏季小欢喜，久久感谢你。 -
09.02 16:35:11发表了文章
2019-09-02 16:35:11
MaxCompute问答整理之8月
本文是基于对MaxCompute产品的学习进度，再结合开发者社区里面的一些问题，进而整理成文。希望对大家有所帮助。
2019年08月
-
08.16 15:56:43回答了问题
2019-08-16 15:56:43
-
08.06 16:12:53回答了问题
2019-08-06 16:12:53
-
08.06 14:18:06发表了文章
2019-08-06 14:18:06
MaxCompute问答整理之7月
本文是基于本人对MaxCompute产品的学习进度，再结合开发者社区里面的一些问题，进而整理成文。希望对大家有所帮助。 问题一、DataWorks V2.0简单模式和标准模式的区别？ 公司数仓的数据上云后，在使用MaxCompute计算引擎时，需要一个稳定、可靠的调度系统，将自身数据生产任务（代码）按照所需依赖关系、运行时间来调度运行，那么DataWorks就派上了用场。
2019年07月
-
07.15 14:11:51发表了文章
2019-07-15 14:11:51
MaxCompute问答整理之6月
本文是基于本人对MaxCompute产品的学习进度，再结合开发者社区里面的一些问题，进而整理成文。
-
发表了文章
2024-05-19
阿里云MaxCompute携手华大基因打造精准医疗应用云平台，十万基因组计算成本降低至1000美金以内
-
发表了文章
2024-05-15
MaxCompute( 原名ODPS)大数据容灾方案与实现（及项目落地实例）专有云
-
发表了文章
2024-05-15
MaxCompute( 原名ODPS)大数据容灾方案与实现（及项目落地实例）专有云
-
发表了文章
2023-08-28
【深入MaxCompute】人力家：用MaxCompute 事务表2.0主键模型去重数据持续降本增效
-
发表了文章
2023-06-25
MaxCompute湖仓一体近实时增量处理技术架构揭秘
-
发表了文章
2022-12-01
MaxCompute 新售卖规格解读与新版控制台操作详解
-
发表了文章
2022-08-29
《阿里云云原生一体化数仓新能力解读》电子书重磅来袭！六大能力，助力企业构建全托管的现代化数仓！
-
发表了文章
2022-08-03
阿里云云原生一体化数仓--数据安全能力解读
-
发表了文章
2022-07-22
阿里云云原生一体化数仓 — 湖仓一体新能力解读
-
发表了文章
2022-07-15
阿里云云原生一体化数仓 — 数据治理新能力解读
-
发表了文章
2022-07-08
阿里云云原生一体化数仓 — 数据建模新能力解读
-
发表了文章
2022-06-29
阿里云云原生一体化数仓 — 分析服务一体化新能力解读
-
发表了文章
2022-06-24
阿里云云原生一体化数仓 — 离线实时一体化新能力解读
-
发表了文章
2022-05-05
【转载】大数据在线离线一体化解决方案最佳实践
-
发表了文章
2022-04-26
【转载】基于MaxCompute的大数据安全方案
-
发表了文章
2021-11-15
离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进
-
发表了文章
2021-11-09
湖仓一体在金融科技行业的实践
-
发表了文章
2021-11-05
数字营销行业大数据平台云原生升级实战
-
发表了文章
2021-11-05
“万里牛”实时数仓的演进之路
-
发表了文章
2021-11-05
新氧云原生全栈数仓最佳实践
滑动查看更多
-
回答了问题
2023-04-18
dataworks 数据落地到ftp变成文件，有没有给数据中间加分隔符的功能？
如果使用DataWorks数据集成同步，可以自定义列分隔符。 参考文档：https://help.aliyun.com/document_detail/137756.htm赞0 踩0 评论0 -
回答了问题
2023-04-18
有没有大佬可以帮忙一下 dataworks实时同步任务 监听到了binlog 但是maxc
是说监控到了数据更新或者删除，但MaxCompute侧的数据没有变化是吗？ 在实时同步场景下，数据写入不同目的端时，对源端DDL和DML操作的支持情况不同，MaxCompute普通内部表不支持更新和删除操作。 https://help.aliyun.com/document_detail/442337.htm赞0 踩0 评论0 -
回答了问题
2023-04-18
MaxCompute新建的项目没有odps_first默认数据源，这个找谁处理？
您好，应该是创建工作空间时没有添加MaxCompute引擎。 点击工作空间配置赞0 踩0 评论0 -
回答了问题
2023-02-07
Maxcompute能否像MySQL一样灵活使用用户变量（即MySQL的@变量名）
可以看下MaxCompute脚本模式，用odps Script节点。 https://help.aliyun.com/document_detail/139140.html赞1 踩0 评论0 -
回答了问题
2023-01-18
云原生大数据计算服务 MaxCompute开发者版有什么注意事项？
MaxCompute开发者版已于北京时间2022年10月31日（周一）00:00:00停止新购，于2023年04月30日（周日）00:00:00停止续订，于2023年10月31日（周二）00:00:00停止服务。 请及时更换付费方式。 期间您有任何相关问题或需要协助，可以通过您的专属钉群或MaxCompute部分售卖规格下线支持群（钉钉群号：10405002914）联系我们。 感谢您的配合！ MaxCompute公告：https://help.aliyun.com/document_detail/44035.html#section-qyy-5t2-lkf赞0 踩0 评论0 -
回答了问题
2023-01-18
为什么我不能开通maxcomputer开发者版
MaxCompute开发者版已于北京时间2022年10月31日（周一）00:00:00停止新购，于2023年04月30日（周日）00:00:00停止续订，于2023年10月31日（周二）00:00:00停止服务。 请及时更换付费方式。 期间您有任何相关问题或需要协助，可以通过您的专属钉群或MaxCompute部分售卖规格下线支持群（钉钉群号：10405002914）联系我们。 感谢您的配合！ MaxCompute公告：https://help.aliyun.com/document_detail/44035.html#section-qyy-5t2-lkf赞0 踩0 评论0 -
回答了问题
2023-01-18
MaxCompute中开发者版项目切换其它类型资源组后可以切回开发者版吗
当前MaxCompute开发者版已于北京时间2022年10月31日（周一）00:00:00停止新购，于2023年04月30日（周日）00:00:00停止续订，于2023年10月31日（周二）00:00:00停止服务。 请及时更换付费方式。 期间您有任何相关问题或需要协助，可以通过您的专属钉群或MaxCompute部分售卖规格下线支持群（钉钉群号：10405002914）联系我们。 感谢您的配合！赞0 踩0 评论0 -
回答了问题
2022-12-14
Maxcompute使用Mars DataFrame索引找不到
Mars是支持直接读写MaxCompute表参考这个https://help.aliyun.com/document_detail/167460.html赞0 踩0 评论0 -
回答了问题
2022-11-07
MaxCompute上使用pyodps连接云上数据库计算auc，数据量太大老是撑爆内存
看着是运行到了本地，导致本地内存爆了。你可以参考这篇文章改一下。https://developer.aliyun.com/article/782779我理解用udf或者用Python第三方库才能解决你的问题。赞0 踩0 评论1 -
回答了问题
2022-11-07
为什么按照pyodps使用第三方包这一节中先上传为maxcompute资源再import会报错呢
是不是上传为MaxCompute资源后，没有在datastudio界面上面展示？有做提交吗？ 这个问题还是有点不太具体，这个错误原因需要具体看报错什么。 可以加到MaxCompute社区钉群中具体问下。 点击申请加入赞0 踩0 评论0 -
回答了问题
2022-11-07
hive的视图maxcompute能接吗？
可以接。 使用DataWorks的数据集成，使用独享数据集成资源组，添加hive数据源，在数据同步节点转成脚本模式同步需要同步的视图就可以。赞0 踩0 评论0 -
回答了问题
2022-11-04
不允许JNI调用限制
您好，MaxCompute MapReduce及UDF程序在分布式环境中运行时，受到Java沙箱的限制，所以不允许JNI调用。MaxCompute出于安全方面的考虑，不建议客户取消这个沙箱限制。赞0 踩0 评论0 -
回答了问题
2022-10-14
Java SDK查看权限信息
show principals ;命令用于查询角色授予的用户信息。可以先使用list roles查看角色正确名称。再执行show principals 命令。如果还解决不了问题，可以补充评论。赞0 踩0 评论1 -
回答了问题
2022-07-06
关于MaxCompute中对于上传数据的事务性
MaxCompute上传数据的方式有以下几种。 1、Tunnel 2、DataWorks数据集成 3、DTS 4、Datahub 开源产品sqoop、kettle、Flume等 MaxCompute支持ACID语义，可以参考文档：ACID语义赞0 踩0 评论0 -
回答了问题
2022-07-06
maxcompute中的数据是否能够与你们的分析库数据ads进行关联起来查询？
您好，当前MaxCompute中的数据无法跟ads中的数据进行关联查询。 关于更多大数据问题可以在MaxCompute开发者社区钉群中进行咨询。 点击群邀请链接申请加入赞0 踩0 评论0 -
回答了问题
2022-05-26
dataworks数据开发pyodps使用第三方包
您好，DF的话就使用options.df.libraries = ['six.whl', 'python_dateutil.whl'] 也可以在DataWorks独享资源组里面用运维助手。赞1 踩0 评论0 -
回答了问题
2022-04-11
在纬度表中怎么在生成一个不会变化的id
您好，当前MaxCompute不支持主键，可以试试用ROW_NUMBER函数实现自增ID。 参考文档：https://help.aliyun.com/document_detail/34994.html#section-cm1-cd1-wdb赞0 踩0 评论0 -
回答了问题
2022-01-20
odps alter column 判断存在
您好，当前MaxCompute针对列的操作有添加列或注释、修改列名、修改列注释、同时修改列名及列注释。但常用命令和DDL都无法提前判断列是否存在。 感谢您对MaxCompute的持续关注与支持。您可以加入MaxCompute开发者社区钉群，跟开发者们交流关于大数据计算、云数据仓库等技术。欢迎扫码或点击申请链接进群。 申请链接赞0 踩0 评论0 -
回答了问题
2021-11-29
MaxCompute Studio连接问题
您好，请问提示什么错误？ 可以在扫码在MaxCompute开发者社区钉群问下。 或者点击邀请链接加入。赞0 踩0 评论0 -
回答了问题
2021-11-29
odpscmd 执行spark list错误
您好，请问您具体的需求是什么呢？这个命令暂时还没有在公有云上使用，您可以说下您的需求，我看看有没有其他方式可以满足。赞0 踩0 评论0
滑动查看更多
暂无更多信息