Flink Forward Asia 2021 平台建设专场
Flink Forward Asia 2021 有奖问答专场汇总
1 月 8 日下午
-
网易游戏 FlinkSQL 平台化实践
林小铂｜网易游戏资深开发工程师
-
联通实时计算平台演进与实践
穆纯进｜联通大数据技术专家
-
Flink on K8s 在京东的持续优化实践
付海涛｜京东资深技术专家
-
State Migration and Query on Flink SQL
周伊莎｜字节跳动基础架构工程师
马越｜字节跳动基础架构工程师，Apache Flink Contributor
-
BIGO 使用 Flink 做 Olap 分析及实时数仓的实践及优化
邹云鹤｜BIGO Staff Engineer
1 月 9 日上午
-
B 站基于 Flink 的多元化探索与实践
张杨｜哔哩哔哩基础架构部 资深研发工程师
-
汽车之家基于 Flink 的实时计算平台 3.0 建设实践
邸星星｜汽车之家实时计算平台负责人
-
腾讯新闻基于 Flink + PipeLine 模式的应用与实践
罗强｜腾讯新闻商业化数据工程师
-
Native Flink on K8S 在小红书的实践
何军｜小红书数据流团队资深研发工程师
1 月 9 日下午
-
Flink 在移动云实时计算的实践
谢磊｜移动软件开发工程师
-
Apache Flink 在翼支付的实践应用
曹劼｜翼支付高级大数据工程师
尹春光｜翼支付高级大数据工程师
-
蚂蚁金服实时计算引擎建设
闵文俊｜阿里巴巴技术专家，Apache Flink Contributor
-
网易云音乐实时场景应用及优化实践
赵荣生｜网易云音乐资深平台工程师，Apache Spark/Pulsar Contributor
写回答
-
-
-
Native Flink on K8S 在小红书的实践何老师您好:
1.请教下,贵司 native flink on k8s 是如何简化job 的部署方式.或者有job 打包后有自动化部署更新的方式? (主要是想简化和自动化job部署的流程)
2.贵司是如何对on k8s 的flink 作业状态监控,以及作业管理的,是否有开源的可以推荐.如果是自研的平台.希望给推荐下自研的设计思路,感谢
3.贵司的native flink on k8s - 是将比较大的 checkpoint state 放在云存储,还存储挂载的vlome 里的? - 面对大state是否有延时的问题? 如何去避免 - 面对大的state 怎样去提高快照的速度.
期待老师的解惑,再次感谢
2022-01-09 10:15:23赞同 展开评论 打赏 -
Flink on K8s 在京东的持续优化实践：我们现在在yarn上有100个JOB实时分析，10个离线分析JOB，目前看yarn上没有啥问题，若使用k8s,会有更好吗？ 若是在云上有必要再搞k8s吗？谢谢
2022-01-08 23:39:36赞同 展开评论 打赏 -
一个IT老兵，在这行摸爬滚打快20年了，很多工作都做过，也熟悉不少技术。现在对云计算，大数据以及机器学习很感兴趣。Flink on K8s 在京东的持续优化实践：K8S主要构建在物理机上，是否还需要部署别的操作系统？还是直接裸机部署JDOS，然后直接就是K8S？ 这样做对比使用云服务器有多大的性能提升？
2022-01-08 15:14:50赞同 展开评论 打赏 -
蚂蚁金服实时计算引擎建设：老师您好，之前在旧的Flink版本及Blink下实践中，作业自动扩缩容进行机器调度时粒度较大，会有分钟级别的延迟波动。Flink当前是否能在扩缩容时实现平滑扩缩容，避免出现分钟级的延迟波动？
2022-01-08 14:26:19赞同 展开评论 打赏 -
Flink on K8s 在京东的持续优化实践：flink on kubernetes相比flink on yarn大概会增加多少资源消耗，现在京东是否两种方式都在使用，具体业务如何取舍
2022-01-08 13:49:00赞同 展开评论 打赏 -
网易游戏 FlinkSQL 平台化实践： 林小铂老师您好，看到您提到内部研发了StreamflySQL v2 (基于 SQL Gateway)，目前开源的ververica/flink-sql-gateway看起来半年多无人继续维护，也不支持元数据持久化等一些重要功能，请问对推回 Flink SQL Gateway 的改进给社区这块有什么具体一些的规划/RoadMap之类吗？
2022-01-08 13:22:49赞同 展开评论 打赏 -
-
-
Flink on K8s 在京东的持续优化实践付老师你好,有些问题请教下:
1.贵司是怎样简化提交流程(从打包,构建镜像,apply应用),或者是否有自动化部署的流程的实践?
2.贵司对on k8s 怎么去监控和管理作业(kill 、killAndSavepoint、从state恢复等)的运行,是否有推荐的开源管理工具
3.在生产实践中ck state size比较大时,用云存储会有一定的网络带宽瓶颈,是否遇到这种问题,或者有什么比较好的实践?
2022-01-08 09:24:02赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。
热门讨论
热门文章
相关课程
更多
相关文章
相关电子书
更多
