张家锋_社区达人页

2024年10月

• 10.20 16:55:05
  发表了文章 2024-10-20 16:55:05

  长安汽车×云器Lakehouse一体化数据平台，成本降低50%，建立智能互联时代的领先优势

  长安汽车智能化研究院致力于汽车智能化技术研究，通过构建基于云器科技Lakehouse一体化数据平台，解决了高并发、大规模车联网数据处理难题，实现了数据实时写入、高效分析和成本优化，助力汽车智能驾驶、网联和交通全面发展。

  

2023年10月

• 10.10 12:17:35
  发表了文章 2023-10-10 12:17:35

  怎么使用 Go 语言操作 Apache Doris

  怎么使用 Go 语言操作 Apache Doris
• 10.10 12:13:20
  发表了文章 2023-10-10 12:13:20

  怎么使用 Flink 向 Apache Doris 表中写 Bitmap 类型的数据

  怎么使用 Flink 向 Apache Doris 表中写 Bitmap 类型的数据
• 10.10 12:10:34
  发表了文章 2023-10-10 12:10:34

  Apache Doris 行列转换可以这样玩

  Apache Doris 行列转换可以这样玩
• 10.09 23:47:25
  发表了文章 2023-10-09 23:47:25

  Apache Doris 助力网易严选打造精细化运营 DMP 标签系统

  Apache Doris 助力网易严选打造精细化运营 DMP 标签系统
• 10.09 22:42:23
  发表了文章 2023-10-09 22:42:23

  [实战系列]SelectDB Cloud Kafka Connect 最佳实践张家锋

  [实战系列]SelectDB Cloud Kafka Connect 最佳实践张家锋
• 10.09 18:21:21
  发表了文章 2023-10-09 18:21:21

  一文教你玩转 Apache Doris 分区分桶新功能｜新版本揭秘

  一文教你玩转 Apache Doris 分区分桶新功能｜新版本揭秘
• 10.09 18:13:30
  发表了文章 2023-10-09 18:13:30

  [1.2.0新功能系列：三]Apache doris 1.2.0 Java UDF 函数开发及使用

  [1.2.0新功能系列：三]Apache doris 1.2.0 Java UDF 函数开发及使用
• 10.09 18:06:49
  发表了文章 2023-10-09 18:06:49

  [1.2.0新功能系列:二] Apache Doris 1.2.0 JDBC外表 及 Mutil Catalog

  [1.2.0新功能系列:二] Apache Doris 1.2.0 JDBC外表 及 Mutil Catalog
• 10.09 18:00:04
  发表了文章 2023-10-09 18:00:04

  [1.2.0新功能系列:一] Apache Doris 1.2.0 版本 Light Schema Change

  [1.2.0新功能系列:一] Apache Doris 1.2.0 版本 Light Schema Change
• 10.09 17:55:22
  发表了文章 2023-10-09 17:55:22

  Apache doris 1.2.0 release

  Apache doris 1.2.0 release
• 10.09 17:42:27
  发表了文章 2023-10-09 17:42:27

  多场景下 3-11 倍性能提升，Apache Doris 1.2 新版本性能揭秘！

  多场景下 3-11 倍性能提升，Apache Doris 1.2 新版本性能揭秘！
• 10.09 17:37:53
  发表了文章 2023-10-09 17:37:53

  Doris 运维篇：Apache Doris 如何定位处理问题的Tablet

  Doris 运维篇：Apache Doris 如何定位处理问题的Tablet
• 10.09 17:32:55
  发表了文章 2023-10-09 17:32:55

  Doris 运维篇：Apache Doris tablet错误问题实操案例（一）

  Doris 运维篇：Apache Doris tablet错误问题实操案例（一）
• 10.09 17:28:03
  发表了文章 2023-10-09 17:28:03

  重构实时离线一体化数仓，Apache Doris 在思必驰的应用实践

  作者：赵伟，思必驰大数据高级研发，10年大数据开发和设计经验，负责大数据平台基础技术和OLAP分析技术开发。社区贡献：Doris-spark-connector 的实时读写和优化。
• 10.09 17:18:46
  发表了文章 2023-10-09 17:18:46

  全球第一！新一代云原生实时数仓 SelectDB 登顶 ClickBench 榜单！

  全球第一！新一代云原生实时数仓 SelectDB 登顶 ClickBench 榜单！
• 10.09 17:13:32
  发表了文章 2023-10-09 17:13:32

  Apache Doris FE 元数据常见故障处理

  Apache Doris FE 元数据常见故障处理
• 10.09 17:09:27
  发表了文章 2023-10-09 17:09:27

  Apache Doris tablet 副本修复的原理、流程及问题定位

  Apache Doris tablet 副本修复的原理、流程及问题定位
• 10.09 16:58:50
  发表了文章 2023-10-09 16:58:50

  Apache Doris 系列： 入门篇-数据导入及查询

  Apache Doris 系列： 入门篇-数据导入及查询
• 10.09 16:50:11
  发表了文章 2023-10-09 16:50:11

  Apache Doris 系列： 入门篇-创建数据表

  Apache Doris 系列： 入门篇-创建数据表
• 10.09 16:40:10
  发表了文章 2023-10-09 16:40:10

  Apache Doris 系列： 入门篇-安装部署

  Apache Doris 系列： 入门篇-安装部署

2023年06月

• 06.15 21:30:29
  发表了文章 2023-06-15 21:30:29

  [实战系列]SelectDB Cloud Spark Connector 最佳实践

  Spark SelectDB Connector 以 Spark 这个大数据计算的优秀组件作为核心，实现了利用 Spark 将外部数据源的大数据量同步到 SelectDB Cloud，便于我们实现大批量数据的快速同步，继而利用 SelectDB Cloud 为基石构建新一代的云原生数据仓库，结合 SelectDB Cloud 强大的分析计算性能，能够为企业带来业务便捷性以及增效将本的目标。
• 06.15 21:26:24
  发表了文章 2023-06-15 21:26:24

  [实战系列]SelectDB Cloud Datax 数据写入最佳实践

  企业正在经历其数据资产的爆炸式增长，这些数据包括批式或流式传输的结构化、半结构化以及非结构化数据，随着海量数据批量导入的场景的增多，企业对于 Data Pipeline 的需求也愈加复杂。新一代云原生实时数仓 SelectDB Cloud 作为一款运行于多云之上的云原生实时数据仓库，致力于通过开箱即用的能力为客户带来简单快速的数仓体验。在生态方面，SelectDB Cloud 提供了丰富的数据连接器插件（Connector）来连接各种来自周边大数据工具的数据源，内置 Kafka、Flink、Spark、DataX 等常见的 Connector。基于此，企业开发者能够更加便捷的将数据移动到 Se
• 06.15 21:24:23
  发表了文章 2023-06-15 21:24:23

  [实战系列]SelectDB Cloud Flink Connector 最佳实践

  随着云基础设施的不断完善，云原生已经成为各行业数字化转型的必选项，越来越多的应用开始进行云原生化架构升级和应用迁移。 而云原生实时数仓的出现，让传统的数据仓库无论是成本、灵活性还是开放性等方面都显露出不足。拥有高性能、高可用性、可伸缩性、高安全性等特征的云原生数据库，正在成为企业的首选。 SelectDB Cloud作为一款运行于多云之上的云原生实时数据仓库，可以为客户提供极简运维和极致性价比的数仓服务，为用户提供开箱即用的能力。 同时，SelectDB Cloud 结合 Flink 流式计算，可以让用户将 Kafka 中的非结构化数据以及 MySQL 等上游业务库中的变更数据，实时同步到 S
• 06.15 21:22:11
  发表了文章 2023-06-15 21:22:11

  [2.0快速体验] Apache Doris 2.0 冷热分离快速体验

  未来一个很大的使用场景是类似于es日志存储，日志场景下数据会按照日期来切割数据，很多数据是冷数据，查询很少，需要降低这类数据的存储成本。从节约存储成本角度考虑 各云厂商普通云盘的价格都比对象存储贵 在doris集群实际线上使用中，普通云盘的利用率无法达到100% 云盘不是按需付费，而对象存储可以做到按需付费 基于普通云盘做高可用，需要实现多副本，某副本异常要做副本迁移。而将数据放到对象存储上则不存在此类问题，因为对象存储是共享的。
• 06.15 21:19:46
  发表了文章 2023-06-15 21:19:46

  [2.0快速体验]Apache Doris 2.0 日志分析快速体验

  应用程序、服务器、云基础设施、IoT 和移动设备、DevOps、微服务架构—最重要的业务和 IT 发展趋势帮助我们以前所未有的方式优化运维和客户体验。但这些趋势也导致由机器生成的数据出现爆炸式成长，其中包括日志和指标等，例如，用户交易、客户行为、传感器活动、机器行为和安全威胁等。这些数据十分复杂，但同时也最为重要，因为它们包含关于 IT、安全和业务的运维情报。 日志分析涉及到对由您的 IT 系统和技术基础设施生成的机器数据进行搜索、分析与可视化，以便获得运维方面的见解。传统的数据分析工具已不能胜任如此多样性而且快速增加的机器数据的处理工作。 日志数据在不断增长。如果没有一个整体的、具有成本
• 06.15 21:17:32
  发表了文章 2023-06-15 21:17:32

  [2.0快速体验]Apache Doris 2.0 弹性计算节点快速体验

  我们都知道Doris 目前是一个典型的Share-Nothing的架构，Doris 通过绑定数据和计算资源在同一个节点获得非常好的性能表现. 但随着Doris 计算引擎性能持续提高, 越来越多的用户也开始选择使用Doris直接查询数据湖数据. 这类场景是一种Share-Disk场景, 数据往往存储在远端的 HDFS/S3 上, 计算在 Doris 中, Doris 通过网络获取数据, 然后在内存完成计算. 而如果这两个负载都混合在同一个集群时, 对于目前 Doris 的架构就会出现以下不足: 资源隔离差, 两个负载对集群的响应要求不一, 混合部署会有相互的影响， 数据湖场景下磁盘利用率低：集

2022年07月

• 07.12 12:42:22
  发表了文章 2022-07-12 12:42:22

  应用实践 | 数仓体系效率全面提升！同程数科基于 Apache Doris 的数据仓库建设

  同程数科成立于 2015 年，是同程集团旗下的旅游产业金融服务平台。2020 年，同程数科基于 Apache Doris 丰富的数据接入方式、优异的并行运算能力、极简运维等特性，引入 Apache Doris 进行数仓架构2.0 的搭建。本文详细讲述了架构1.0 到 2.0 的演进过程及 Doris 的应用实践，希望对大家有所帮助

  
• 07.12 12:39:47
  发表了文章 2022-07-12 12:39:47

  Apache Doris 整合 FLINK CDC + Iceberg 构建实时湖仓一体的联邦查询

  这篇教程将展示如何使用 Flink CDC + Iceberg + Doris 构建实时湖仓一体的联邦查询分析，Doris 1.1版本提供了Iceberg的支持，本文主要展示Doris和Iceberg怎么使用，同时本教程整个环境是都基于伪分布式环境搭建，大家按照步骤可以一步步完成。完整体验整个搭建操作的过程。

  
• 07.12 12:38:09
  发表了文章 2022-07-12 12:38:09

  应用实践 | 10 亿数据秒级关联，货拉拉基于 Apache Doris 的 OLAP 体系演进

  货拉拉成立于 2013 年，成长于粤港澳大湾区，是一家从事同城、跨城货运、企业版物流服务、搬家、汽车销售及车后市场服务的互联网物流公司。截至 2022 年 4 月，货拉拉的业务范围已经覆盖了国内 352 座城市，月活司机达到 58 万，月活用户达到 760 万，包含 8 条以上的业务线。 货拉拉大数据体系为支撑公司业务，现在已经成立三个 IDC 集群、拥有上千台规模的机器数量，存储量达到了 20PB、日均任务数达到了 20k 以上，并且还处在快速增长的过程中

  
• 07.12 12:36:46
  发表了文章 2022-07-12 12:36:46

  知乎基于 Apache Doris 的 DMP 平台架构建设实践｜万字长文详解

  知乎基于业务需求搭建了 DMP 平台，本文详细的介绍了 DMP 的工作原理及架构演进过程，同时介绍了 Apache Doris 在 DMP 平台的应用实践，本文对大家了解 DMP 工作方式很有帮助，欢迎阅读。 作者｜用户理解 & 数据赋能研发 Leader 侯容

  

2022年05月

• 05.14 15:22:34
  发表了文章 2022-05-14 15:22:34

  Apache Doris 查询分析功能使用

  Doris提供了一个图形化的命令帮助用户方便分析一个具体的查询或者导入操作，在使用过程中的性能问题，本文主要介绍如何使用改功能.

  
• 05.14 15:12:01
  发表了文章 2022-05-14 15:12:01

  使用 Apache Doris HyperLogLog 实现近似去重

  在实际的业务场景中，随着业务数据量越来越大，对数据去重的压力也越来越大，当数据达到一定规模之后，使用精准去重的成本也越来越高，在业务可以接受的情况下，通过近似算法来实现快速去重降低计算压力是一个非常好的方式，本文主要介绍 Doris 提供的 HyperLogLog（简称 HLL）是一种近似去重算法。
• 05.14 15:09:12
  发表了文章 2022-05-14 15:09:12

  基于Ansible实现Apache Doris快速部署运维指南

  Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果，有效地支持实时数据分析。Apache Doris的分布式架构非常简洁，易于运维，并且可以支持10PB以上的超大数据集。
• 05.14 15:07:01
  发表了文章 2022-05-14 15:07:01

  通过Nginx TCP反向代理实现Apache Doris负载均衡

  Nginx能够实现HTTP、HTTPS协议的负载均衡，也能够实现TCP协议的负载均衡。那么，问题来了，可不可以通过Nginx实现Apache Doris数据库的负载均衡呢？答案是：可以。接下来，就让我们一起探讨下如何使用Nginx实现Apache Doris的负载均衡。
• 05.14 15:03:03
  发表了文章 2022-05-14 15:03:03

  Apache Doris 通过ODBC连接SQL Server

  以下是Apache Doris 通过ODBC连接SQL Server。

  
• 05.14 14:56:36
  发表了文章 2022-05-14 14:56:36

  Apache Doris 单节点（可多节点）Docker集群制作教程

  Apache Doris是当下非常火热和流行的MPP架构OLAP数据库，很多同学想自学/测试Doris的使用和能力，但是又苦于没有环境或者畏惧冗长的编译+搭建过程，整个过程极大的劝退了很多有些尝试意愿、但又由于各种客观因素无法承担过高学习成本导致尝试失败的同学，故此Apache Doris社区三位社区同学苏奕嘉、种益、杨春东制作了三个不同设计的版本安装方式并提供下载，以此降低大家的学习门槛和提升学习/测试效率。

  
• 05.14 14:51:22
  发表了文章 2022-05-14 14:51:22

  Apache Doris ODBC外表数据库主流版本及其ODBC版本对应关系

  以下的文章是Apache Doris ODBC外表数据库主流版本及其ODBC版本对应关系。
• 05.14 14:49:03
  发表了文章 2022-05-14 14:49:03

  CentOS下 Apache Doris Oracle ODBC外表使用指南

  以下是CentOS下 Apache Doris Oracle ODBC外表使用指南。
• 05.14 14:45:12
  发表了文章 2022-05-14 14:45:12

  Apache Doris Oracle ODBC外表使用指南

  以下是Apache Doris Oracle ODBC外表使用指南。
• 05.14 14:42:24
  发表了文章 2022-05-14 14:42:24

  Apache Doris ODBC外表之Postgresql使用指南

  希望Doris 2022年起飞，顺利从Apache 孵化器毕业成顶级项目，给大家带来更快、更稳定、生态更丰富的MPP OLAP分析型数据库产品。
• 05.14 14:38:56
  发表了文章 2022-05-14 14:38:56

  Apache Doris ODBC Mysql外表在Ubuntu下使用方法及配置

  以下是Apache Doris ODBC Mysql外表在Ubuntu下使用方法及配置。
• 05.14 14:36:03
  发表了文章 2022-05-14 14:36:03

  Apache Doris Binlog Load使用方法及示例

  下面会介绍一些Apache Doris Binlog Load使用方法及示例。

  
• 05.14 14:29:00
  发表了文章 2022-05-14 14:29:00

  使用GO语言通过Stream Load实现Doris数据导入

  使用GO语言通过Stream Load实现Doris数据导入。
• 05.14 14:26:22
  发表了文章 2022-05-14 14:26:22

  版本通告｜Apache Doris 0.15 Release 版本正式发布！

  亲爱的社区小伙伴们，历时数个月精心打磨，我们很高兴地宣布， Apache Doris 于 2021 年 11 月 29 日迎来了 0.15.0 Release 版本的正式发布！有 99 位 Contributor 为 Apache Doris 提交了近 700 项优化和修复，在此我们也对所有贡献者表示最真诚的感激！
• 05.14 14:22:31
  发表了文章 2022-05-14 14:22:31

  Apache Doris Binlog Load使用方法及示例

  Binlog Load提供了一种使Doris增量同步用户在Mysql数据库的对数据更新操作的CDC(Change Data Capture)功能，使用户更方面的完成Mysql数据的导入。