昇腾AI4S图机器学习：DGL消息传递接口的PyG替换
DGL (Deep Graph Learning) 和 PyG (Pytorch Geometric) 是两个主流的图神经网络库，它们在API设计和底层实现上有一定差异，在不同场景下，研究人员会使用不同的依赖库，昇腾NPU对PyG图机器学习库的支持亲和度更高，因此有些时候需要做DGL接口的PyG替换。
OpenFold2.0 基于NPU的推理适配与测试
本教程详细介绍了 OpenFold 的环境搭建、代码部署、依赖安装、数据集准备及推理测试全流程。首先通过 Anaconda 创建 Python3.9 环境并配置相关库，接着克隆 OpenFold 代码仓库并安装必要依赖（如 PyTorch、dllogger、hhsuite 等）。随后准备 PDB 数据集与模型参数，调整脚本路径以适配运行环境。最后执行推理脚本完成测试，并针对常见报错提供了解决方案，例如更新 NumPy、SciPy 或调整 GPU 配置等，确保流程顺利运行。
昇腾AI4S图机器学习：DGL图构建接口的PyG替换
本文探讨了在图神经网络中将DGL接口替换为PyG实现的方法，重点以RFdiffusion蛋白质设计模型中的SE3Transformer为例。SE3Transformer通过SE(3)等变性提取三维几何特征，其图构建部分依赖DGL接口。文章详细介绍了两个关键函数的替换：`make_full_graph` 和 `make_topk_graph`。前者构建完全连接图，后者生成k近邻图。通过PyG的高效实现（如`knn_graph`），我们简化了图结构创建过程，并调整边特征处理逻辑以兼容不同框架，从而更好地支持昇腾NPU等硬件环境。此方法为跨库迁移提供了实用参考。
SnapViewer：解决PyTorch官方内存工具卡死问题，实现高效可视化
深度学习训练中，GPU内存不足（OOM）是常见难题。PyTorch虽提供内存分析工具，但其官方可视化方案存在严重性能瓶颈，尤其在处理大型模型快照时表现极差。为解决这一问题，SnapViewer项目应运而生。该项目通过将内存快照解析为三角形网格结构并借助成熟渲染库，充分发挥GPU并行计算优势，大幅提升大型快照处理效率。此外，SnapViewer优化了数据处理流水线，采用Rust和Python结合的方式，实现高效压缩与解析。项目不仅解决了现有工具的性能缺陷，还为开发者提供了更流畅的内存分析体验，对类似性能优化项目具有重要参考价值。
《深度剖析：Java利用ONNX Runtime部署ViT模型的关键路径》
ViT将Transformer引入视觉领域，通过自注意力机制捕捉图像长距离依赖，超越传统CNN局限，在图像分类等任务中表现卓越。PyTorch以其动态图机制和简洁API助力ViT开发，而ONNX Runtime作为跨平台推理引擎，实现从PyTorch到部署的无缝衔接。在Java环境中，借助ONNX Runtime加载ViT模型，优化性能并解决兼容性问题，为智能安防、自动驾驶等领域带来全新可能。这场技术融合之旅充满挑战与机遇，推动计算机视觉迈向新高度。
200行python代码实现从Bigram模型到LLM
本文从零基础出发，逐步实现了一个类似GPT的Transformer模型。首先通过Bigram模型生成诗词，接着加入Positional Encoding实现位置信息编码，再引入Single Head Self-Attention机制计算token间的关系，并扩展到Multi-Head Self-Attention以增强表现力。随后添加FeedForward、Block结构、残差连接(Residual Connection)、投影(Projection)、层归一化(Layer Normalization)及Dropout等组件，最终调整超参数完成一个6层、6头、384维度的“0.0155B”模型
从零开始200行python代码实现LLM
本文从零开始用Python实现了一个极简但完整的大语言模型，帮助读者理解LLM的工作原理。首先通过传统方法构建了一个诗词生成器，利用字符间的概率关系递归生成文本。接着引入PyTorch框架，逐步重构代码，实现了一个真正的Bigram模型。文中详细解释了词汇表（tokenizer）、张量（Tensor）、反向传播、梯度下降等关键概念，并展示了如何用Embedding层和线性层搭建模型。最终实现了babyGPT_v1.py，一个能生成类似诗词的简单语言模型。下一篇文章将在此基础上实现自注意力机制和完整的GPT模型。