neo.wang
neo.wang_个人页
neo.wang
文章
13
问答
5
视频
0
个人介绍
阿里云MVP
擅长的技术
- 数据库
-
发表了文章 2021-08-25
建设自己的取数平台：聚合分析
除明细数据导出外，取数场景中还会涉及到聚合分析。
-
发表了文章 2021-08-25
建设自己的取数平台：背景
数据从业者，无论是数仓同学、还是数分同学，都对“数据为什么对不上”这类问题深恶痛绝。
-
发表了文章 2021-01-27
大数据团队从2到3
其实从3.0阶段开始，团队的升级路线就比较分散了，依赖于各公司对于数据团队职能的定位和期待。
-
发表了文章 2019-10-24
大数据团队从1到2
1.0阶段的核心是数据分析，把大数据离线计算的整套流程和框架搭建起来，后续就是不断在框架中加入新的业务、新的需求了。但是1.0阶段的数据是T+1的，即每天、每周、每月定时计算的，快一点儿的有每小时、甚至每5分钟的，都是离线数据，实时性不足。2.0阶段重点加强的，就是实时计算领域。
-
发表了文章 2019-10-22
大数据团队从0到1
“大数据”这个词，大家都已经不陌生了，已经从一个新兴的词汇变成了一个百姓茶余饭后都会聊到的概念。各种大大小小的互联网公司也都会创建自己的大数据团队，我也曾经在多家公司从事过大数据领域的开发和团队管理工作，这里写一下我自己的经历和感受。
-
发表了文章 2019-10-14
我的DDD实践之路：第一战
领域驱动设计（DDD）这个概念也是最近比较火的，我第一次接触到这个概念，是阿里云的架构师来我们公司交流的时候，当时留意了一下，后面在自己团队工作遇到痛点时才真正开始学习。
-
发表了文章 2019-02-27
maxcompute 2.0复杂数据类型之map
1. 含义 和Java中的Map一样，多个Key-Value的组合。 2. 场景 什么样的数据，适合使用map类型来存储呢？这里列举了几个我在开发中实际用到的场景。 2.1 数量不固定的多个KeyValue 这类，本身就是Map类型的数据。
-
发表了文章 2019-02-26
maxcompute 2.0复杂数据类型之struct
1. 含义 类似于Java中的类的概念。包含很多类的属性。 2. 场景 什么样的数据，适合使用struct类型来存储呢？这里列举了几个我在开发中实际用到的场景。 2.1 多个具有相同前缀的字段 其实struct完全可以拆成多个字段。
-
发表了文章 2019-02-25
maxcompute 2.0复杂数据类型之array
1. 含义 类似于Java中的array。有序、可重复。 2. 场景 什么样的数据，适合使用array类型来存储呢？这里列举了几个我在开发中实际用到的场景。 2.1 标签类的数据 为什么说标签类数据适合使用array类型呢？（1）标签一般是一个只有key、没有value的结构；（2）标签的数量（枚举值个数）会非常多；（3）标签的变化会比较频繁；（4）标签会过期；因此，比起“创建多个字段”、“使用指定分隔符分隔的字符串”、“使用map”等方法，使用array是更合适的。
-
发表了文章 2018-12-17
DataWorks2.0的“业务流程”与1.0的“工作流”的对比
DatwWorks终于升级2.0了，心情万分激动之余，又有一丝担忧。因为，没法再创建新的旧版工作流了。。。新版抛弃了“工作流”这个概念，引入了“业务流程”和“解决方案”两个新的概念。于是，作为团队Leader，我花了很大的精力去钻研这两个概念到底该如何应用在我的实际业务中。
-
发表了文章 2018-07-20
如何理解maxcompute常见报错信息？【阿里云MVP月度分享】
貌似大部分人在遇到报错的时候，都懒得用翻译软件翻译报错信息，一般直接抛出来问，甚至连报错信息都懒得复制，直接截图出来。所以这里特地总结了一下，最近一段时间有人经常在群里问到的报错信息。 ODPS-0130252:Cartesian product is not allowed “不允许笛卡尔积”主要是为了防止用户误操作，不小心漏了关联条件，造成大量的资源的耗费。
-
发表了文章 2018-06-20
如何从设计和规范上规避RDS性能问题？【阿里云MVP月度分享】
在初创型互联网公司中，开发们整天想的唯一一件事，就是“把功能做出来”；而当公司业务量逐渐上涨、甚至翻了好几番之后，最开始的程序上的问题，就一个接一个地暴露了出来。
-
发表了文章 2017-12-22
【阿里云MVP月度分享】如何基于MYSQL做实时计算？
有时候我们会有这样的场景，在某个接口中，数据已经很规范地存入到一张的MYSQL表中，现在想对这样的数据做一些实时或准实时处理，比如数据多模式存储、异步准实时业务流程、业务实时监控等。
暂无更多信息
-
发表了文章
2021-08-25
建设自己的取数平台：聚合分析
-
发表了文章
2021-08-25
建设自己的取数平台：背景
-
发表了文章
2021-01-27
大数据团队从2到3
-
发表了文章
2019-10-24
大数据团队从1到2
-
发表了文章
2019-10-22
大数据团队从0到1
-
发表了文章
2019-10-14
我的DDD实践之路：第一战
-
发表了文章
2019-02-27
maxcompute 2.0复杂数据类型之map
-
发表了文章
2019-02-26
maxcompute 2.0复杂数据类型之struct
-
发表了文章
2019-02-25
maxcompute 2.0复杂数据类型之array
-
发表了文章
2018-12-17
DataWorks2.0的“业务流程”与1.0的“工作流”的对比
-
发表了文章
2018-07-20
如何理解maxcompute常见报错信息？【阿里云MVP月度分享】
-
发表了文章
2018-06-20
如何从设计和规范上规避RDS性能问题？【阿里云MVP月度分享】
-
发表了文章
2017-12-22
【阿里云MVP月度分享】如何基于MYSQL做实时计算？
滑动查看更多
-
回答了问题
2019-01-10
表格存储新建表之后能否修改表格字段
表格存储是free-schema的，除了主键需要在创建的时候指定、后面无法修改之外，其他的属性列可以随时通过代码去写入、更新、删除的。可以简单理解为，tablestore中的属性列，并不算是传统关系型数据库中的“表结构”。赞0 踩0 评论0 -
回答了问题
2019-01-10
ots,主键有３个，使用范围查询的时候，只有前面两个主键有效果，第三个无效果
在ots中，起始主键【pk1=10, pk2='h', pk3 = 5 】、结束主键【pk1=15, pk2='z', pk3=9】，和传统关系型数据库中的【10<=pk1<15 and 'h'<=pk2<'z' and 5<=pk3<9】不是一回事儿。具体需要好好看一下这篇文章。赞0 踩0 评论0 -
回答了问题
2019-07-17
数据库简单设计问题
觉得其实做的两个表，一个是学生名单表（id, class_id, stu_no），另一个是学生成绩单（id,stu_no,score）更好。具体还得看应用场景，决定是否需要把class_id字段冗余出来到“学生成绩单”表中，而且这里的id字段意义不大，可以去掉。
赞0 踩0 评论0 -
回答了问题
2019-07-17
用TableStore之前程序里面SQL用改吗
全都需要修改。TableStore是NOSQL，不是用SQL去操作的，而是用api。就连表结构设计也要修改。
赞0 踩0 评论0 -
回答了问题
2019-07-17
分区字段限定string，只能以字母开头，如果根据日期分区？
其实分区字段的值是可以以数字开头的，比如2016-11-27。文档写的不准确，我觉得文档想说的是“分区字段名必须以字母开头”。
赞0 踩0 评论0
滑动查看更多
暂无更多信息