宇航员w_个人页

个人头像照片 宇航员w
个人头像照片
0
1684
0

个人介绍

暂无个人介绍

擅长的技术

获得更多能力
通用技术能力:

暂时未有相关通用技术能力~

云产品技术能力:

暂时未有相关云产品技术能力~

阿里云技能认证

详细说明
暂无更多信息

2022年12月

正在加载, 请稍后...
暂无更多信息
  • 回答了问题 2022-12-28

    flink sqlclient 一测试 flink 集群就down 机咋办?

    jdbc url 加上 useSSL=false 试下,加个 server-id ,保证账号权限满足——此回答整理自钉群“Flink CDC 社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    Flink 写HDFS 这个不需要在Hive建表吧?

    不需要,直接写目录,hive 你后面再单独映射就行。——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    请问PTS有私有云么?

    有专有云产品,如果有采购其他阿里云专有云产品,可以找售前咨询下——此回答整理自钉群“【2群】PTS交流群”

    踩0 评论0
  • 回答了问题 2022-12-27

    这个链路装配怎么总是超时??

    脚本结构的问题,本地用5.0版本的JMeter运行下这个脚本看是否报同样的错,应该就是脚本结构的问题,jmx文件里是xml结构,里面有一层需要LinkedHashTree元素,在你的脚本中没读取到这个元素,相当于校验没通过 8ba00ffa372e1e052d125eefe5041c9e.png——此回答整理自钉群“【1群】PTS交流群(已满请加30007126)”

    踩0 评论0
  • 回答了问题 2022-12-27

    maven配置了这个,No versions available for com.aliyun:ev

    0.0.4是有的,这里:https://mvnrepository.com/artifact/com.aliyun/eventbridge-util——此回答整理自钉群“EventBridge用户交流群”

    踩0 评论0
  • 回答了问题 2022-12-27

    row_number不支持取top1么?

    取rank =1——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    4个slot消费kafka数据,但是有两个slot checkpoint一直不成功,有可能是什么原因

    调大一点checkpoint时间呗,调大时间间隔——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    实时的主要做的是啥场景呢?都是写olap,然后基于olap查询么?

    基本都是吧,然后就是“实时数仓”,要还是日志采集,和实时数据分发服务端各业务,然后就是一些风控。没有做数仓。——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    flink滚动策略是什么意思呢?

    滚动策略就是你必须开始checkpoint,根据checkpoint时间来滚动文件,每一次checkpoint,每个并行度就会生成一个文件(如果有数据)。 第一行就是利用反射,直接就带字段名称写成parquet 文件,你hive直接建表就可以查询了。——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    flink有遇到过这个问题吗?

    pom包里没引用相应的日志文件jar导致的,也可能你引用了,只是scope弄成了runtime,改成compile,试试——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    写HDFS 是用这个FileSink吧 需要添加什么依赖吗 ?

    maven里面好像也没有配置这个依赖,应该是Flink 包自带的,你重新导包试试——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    使用flink状态做去重,以rocksdb作为状态后端,并行度给了1800,生成大量小文件咋办?

    https://mp.weixin.qq.com/s/8cOmpM4Fx3U4ya34KcAqfg,012cf5a056995b396f380a9d619cbfe4.png会不会是这个问题导致的——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    Flink 支持直接写入HDFS吗?

    可以的,写parquet 和 textfile 格式都可以——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    flinkcdc 中使用flinksql的形式 同步Postgresql到Doris有示例吗

    官网上只能看到pg cdc(不是flink官网,专门的flink cdc),sink到doris要去doris官网上找——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    streampark监控好用吗?

    监控job级的还可以,我这也搞了一套自动化监控脚本,直接命令行提交的也能监控——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    flink的监控报警咋做的啊,上prometheus+granfa了没,还是没必要上?

    没有,运维用的zabbix,监控cpu内存磁盘这些。——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    open时定义一个map,close时候有必要释放map吗?

    close关不关意义不大了。stream里面 close发生在程序关闭之前。即使不释放 jvm没有引用后也会被回收。不过数据库链接之类的按照规范得显示指定——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    假如在上游算子A里定义了这个mapstate,再下游算子B里,怎么搞能用上游算子A的mapstate

    状态是算子间私有的。你想多个算子访问同一个map只能用状态广播或者借助redis hbase这类高性能db做缓存——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    open时候定义了一个parameterTool,close时候有必要clear吗?

    mapstate本质上也是类似hashmap的。不同的是这个map里面的东西会跟随checkpoint做备份。任务重启或失败不会丢失。——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
  • 回答了问题 2022-12-27

    目前flink cdc最新的版本,增量快照框架支持oracle cdc了么?

    支持——此回答整理自钉群“【③群】Apache Flink China社区”

    踩0 评论0
正在加载, 请稍后...
滑动查看更多
正在加载, 请稍后...
暂无更多信息