857技术社区_社区达人页

2024年03月

• 03.12 16:42:14
  发表了文章 2024-03-12 16:42:14

  Apache Flink自定义 logback xml配置

  Apache Flink自定义 logback xml配置

2024年01月

• 01.10 10:14:22
  发表了文章 2024-01-10 10:14:22

  Shell遍历HDFS路径统计层级目录大小

  Shell遍历HDFS路径统计层级目录大小

2023年09月

• 09.07 23:09:01
  发表了文章 2023-09-07 23:09:01

  【nlp-with-transformers】|Transformers中的generate函数解析

  今天社群中的小伙伴面试遇到了一个问题，如何保证生成式语言模型在同样的输入情况下可以保证同样的输出。 这里面造成问题的因素有两个方面： 一个方面是在forward过程中参数的计算出现了差异，这种情况一般发生在游戏显卡中，游戏显卡无法保证每一次底层算子计算都是成功的，也没有办法保证同输入同输出，这里我们就需要采用具有ecc内存纠错机智的专用显卡用来解决相关的问题。

2023年07月

• 07.25 14:45:43
  发表了文章 2023-07-25 14:45:43

  【建议收藏】|3分钟让你学会Scala Trait 使用

  Scala 是一种强大的静态类型编程语言，其中的 Trait 是一种重要的特性。Trait 可以被看作是一种包含方法和字段定义的模板，可以被其他类或 Trait 继承或混入。在本文中，我们将介绍 Scala Trait 的边界（Boundary）的概念，并展示如何使用它来限制 Trait 的使用范围。

2023年05月

• 05.21 22:31:02
  发表了文章 2023-05-21 22:31:02

  【建议收藏】|某大型金融集团内部数据治理实战总结

  近几年，企业都在做数字化转型。 数字化转型是为了使组织更好地适应数字时代的变革，提高效率、降低成本、增强竞争力。是将业务和流程数字化，以实现更快、更准确、更可靠的数据处理和决策。是以数据驱动的精细化运营、业务创新增长和商业模式创新。

  

2023年03月

• 03.07 22:44:26
  发表了文章 2023-03-07 22:44:26

  基于ray 多进程调度管理能力优化networks节点最短路径的并行计算

  原生的networkx实现的只能在节点介数度量性任务上达到单核心100的cpu利用率。通过对源码的几行改造我们可以实现多核心的100的利用率。接下来要我们来一起看看是如何实现的多核心100的利用率。

  
• 03.06 21:56:17
  发表了文章 2023-03-06 21:56:17

  5分钟入门数据湖IceBerg

  随着大数据存储和处理需求的多样化，如何构建一个统一的数据湖存储，并在其上进行多种形式的数据分析成了企业构建大数据生态的一个重要方向。Netflix 发起的 Apache Iceberg 项目具备 ACID 能力的表格式成为了大数据、数据湖领域炙手可热的方向。关注公众号：857Hub

  

2023年01月

• 01.01 14:05:56
  发表了文章 2023-01-01 14:05:56

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）CEP篇（三）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）CEP篇
• 01.01 14:05:09
  发表了文章 2023-01-01 14:05:09

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）CEP篇（二）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）CEP篇

  
• 01.01 14:03:20
  发表了文章 2023-01-01 14:03:20

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）CEP篇（一）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）CEP篇

  
• 01.01 14:00:12
  发表了文章 2023-01-01 14:00:12

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇（四）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇
• 01.01 13:58:27
  发表了文章 2023-01-01 13:58:27

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇（三）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇

  
• 01.01 13:56:55
  发表了文章 2023-01-01 13:56:55

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇（二）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇

  
• 01.01 13:54:50
  发表了文章 2023-01-01 13:54:50

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇（一）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）SQL篇

  
• 01.01 13:51:45
  发表了文章 2023-01-01 13:51:45

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）E

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）E

  
• 01.01 13:47:55
  发表了文章 2023-01-01 13:47:55

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）D

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）

  
• 01.01 13:45:40
  发表了文章 2023-01-01 13:45:40

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）C

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）

  
• 01.01 13:43:54
  发表了文章 2023-01-01 13:43:54

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）B

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）

  
• 01.01 13:41:46
  发表了文章 2023-01-01 13:41:46

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）A

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）

  
• 01.01 13:39:24
  发表了文章 2023-01-01 13:39:24

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（七）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 13:34:56
  发表了文章 2023-01-01 13:34:56

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（六）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 13:32:38
  发表了文章 2023-01-01 13:32:38

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（五）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 13:30:36
  发表了文章 2023-01-01 13:30:36

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（四）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 13:22:21
  发表了文章 2023-01-01 13:22:21

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（三）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 13:18:49
  发表了文章 2023-01-01 13:18:49

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（二）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 13:16:06
  发表了文章 2023-01-01 13:16:06

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面（一）

  Flink1.13架构全集| 一文带你由浅入深精通Flink方方面面

  
• 01.01 12:43:57
  发表了文章 2023-01-01 12:43:57

  5万字Spark全集之末尾Structured Streaming续集！！！！！（二）

  5万字Spark全集之末尾Structured Streaming续集！！！！！

  
• 01.01 12:39:17
  发表了文章 2023-01-01 12:39:17

  5万字Spark全集之末尾Structured Streaming续集！！！！！（一）

  5万字Spark全集之末尾Structured Streaming续集！！！！！

  
• 01.01 12:31:57
  发表了文章 2023-01-01 12:31:57

  5万字长文！搞定Spark方方面面（七）

  5万字长文！搞定Spark方方面面

  
• 01.01 12:29:02
  发表了文章 2023-01-01 12:29:02

  5万字长文！搞定Spark方方面面（六）

  5万字长文！搞定Spark方方面面

  
• 01.01 12:26:31
  发表了文章 2023-01-01 12:26:31

  5万字长文！搞定Spark方方面面（五）

  5万字长文！搞定Spark方方面面
• 01.01 12:25:15
  发表了文章 2023-01-01 12:25:15

  5万字长文！搞定Spark方方面面（四）

  5万字长文！搞定Spark方方面面

  
• 01.01 12:22:18
  发表了文章 2023-01-01 12:22:18

  5万字长文！搞定Spark方方面面（三）

  5万字长文！搞定Spark方方面面

  
• 01.01 12:18:13
  发表了文章 2023-01-01 12:18:13

  5万字长文！搞定Spark方方面面（二）

  5万字长文！搞定Spark方方面面

  
• 01.01 12:15:30
  发表了文章 2023-01-01 12:15:30

  5万字长文！搞定Spark方方面面（一）

  5万字长文！搞定Spark方方面面

  
• 01.01 12:05:17
  发表了文章 2023-01-01 12:05:17

  【建议收藏】|信息抽取与经济学文本量化分析（下）

  【建议收藏】|信息抽取与经济学文本量化分析

  
• 01.01 12:03:23
  发表了文章 2023-01-01 12:03:23

  【建议收藏】|信息抽取与经济学文本量化分析（上）

  【建议收藏】|信息抽取与经济学文本量化分析

  
• 01.01 12:01:57
  发表了文章 2023-01-01 12:01:57

  【建议收藏】Flink watermark分析实战（下）

  【建议收藏】Flink watermark分析实战
• 01.01 12:00:39
  发表了文章 2023-01-01 12:00:39

  【建议收藏】Flink watermark分析实战（上）

  【建议收藏】Flink watermark分析实战

  
• 01.01 11:58:34
  发表了文章 2023-01-01 11:58:34

  【建议收藏】Mysql+Flink CDC+Doris 数据同步实战（下）

  【建议收藏】Mysql+Flink CDC+Doris 数据同步实战

  
• 01.01 11:57:11
  发表了文章 2023-01-01 11:57:11

  【建议收藏】Mysql+Flink CDC+Doris 数据同步实战（中）

  【建议收藏】Mysql+Flink CDC+Doris 数据同步实战
• 01.01 11:55:52
  发表了文章 2023-01-01 11:55:52

  【建议收藏】Mysql+Flink CDC+Doris 数据同步实战（上）

  【建议收藏】Mysql+Flink CDC+Doris 数据同步实战

  
• 01.01 11:53:21
  发表了文章 2023-01-01 11:53:21

  Spark3.2.1源码编译（傻瓜式图文教学）

  Spark3.2.1源码编译（傻瓜式图文教学）

  
• 01.01 11:48:45
  发表了文章 2023-01-01 11:48:45

  【源码解读】| LiveListenerBus源码解读（下）

  【源码解读】| LiveListenerBus源码解读

  
• 01.01 11:46:54
  发表了文章 2023-01-01 11:46:54

  【源码解读】| LiveListenerBus源码解读（上）

  【源码解读】| LiveListenerBus源码解读

  
• 01.01 11:45:09
  发表了文章 2023-01-01 11:45:09

  浅谈 Apache Doris FE 处理查询 SQL 源码解析

  浅谈 Apache Doris FE 处理查询 SQL 源码解析

  
• 01.01 11:43:17
  发表了文章 2023-01-01 11:43:17

  X86系统基于Centos8的Hadoop3.x源码编译

  X86系统基于Centos8的Hadoop3.x源码编译

  
• 01.01 11:41:32
  发表了文章 2023-01-01 11:41:32

  Doris FE源码解读系列之源码编译踩坑！！！（下）

  Doris FE源码解读系列之源码编译踩坑！！！

  
• 01.01 11:38:10
  发表了文章 2023-01-01 11:38:10

  Doris FE源码解读系列之源码编译踩坑！！！（上）

  Doris FE源码解读系列之源码编译踩坑！！！

  
• 01.01 11:33:33
  发表了文章 2023-01-01 11:33:33

  【源码解读】|SparkEnv源码解读

  【源码解读】|SparkEnv源码解读