AI 助理
备案控制台

pai_rec_coder_个人页

pai_rec_coder
个人头像照片
文章
17
问答
25
视频
0

个人介绍

推荐算法，python算法 熟悉MaxCompute、DataWorks用法

擅长的技术

  • Python
获得更多能力
通用技术能力：

暂时未有相关通用技术能力~

云产品技术能力：

阿里云技能认证

详细说明

暂无更多信息

2025年06月

  • 06.17 09:19:24
    发表了文章 2025-06-17 09:19:24

    基于PAI-FeatureStore的LLM embedding功能，结合通义千问大模型，可通过以下链路实现对物品标题、内容字段的离线和在线特征管理。

    本文介绍了基于PAI-FeatureStore和通义千问大模型的LLM embedding功能，实现物品标题、内容字段的离线与在线特征管理。核心内容包括：1) 离线特征生产（MaxCompute批处理），通过API生成Embedding并存储；2) 在线特征同步，实时接入数据并更新Embedding至在线存储；3) Python SDK代码示例解析；4) 关键步骤说明，如客户端初始化、参数配置等；5) 最佳实践，涵盖性能优化、数据一致性及异常处理；6) 应用场景示例，如推荐系统和搜索排序。该方案支持端到端文本特征管理，满足多种语义理解需求。

2025年03月

  • 03.19 10:13:02
    发表了文章 2025-03-19 10:13:02

    特征平台PAI-FeatureStore的功能列表

    本内容介绍了阿里云PAI FeatureStore的功能与使用方法，涵盖离线和在线特征管理、实时特征视图、行为序列特征视图、FeatureStore SDK的多语言支持（如Go、Java、Python）、特征生产简化方案、FeatureDB存储特性（高性能、低成本、及时性）、训练样本导出以及自动化特征工程（如AutoFE）。同时提供了相关文档链接和技术细节，帮助用户高效构建和管理特征工程。适用于推荐系统、模型训练等场景。
  • 03.11 16:51:14
    发表了文章 2025-03-11 16:51:14

    PAI-Rec推荐平台对于实时特征有三个层次

    PAI-Rec推荐平台针对实时特征有三个处理层次：1) 离线模拟反推历史请求时刻的实时特征；2) FeatureStore记录增量更新的实时特征，模型特征导出样本准确性达99%；3) 通过callback回调接口记录请求时刻的特征。各层次确保了实时特征的准确性和时效性。

2025年02月

  • 02.28 19:27:20
    发表了文章 2025-02-28 19:27:20

    为什么要用TorchEasyRec processor？

    TorchEasyRec处理器支持Intel和AMD的CPU服务器及GPU推理，兼容普通PyTorch模型。它具备TorchEasyRec的特征工程（FG）和模型推理功能，提供更快的推理性能，降低成本。通过Item Feature Cache特性，它能够缓存特征以减少网络传输，进一步提升特征工程与推理的速度。

2025年01月

2024年12月

2023年07月

2023年06月

  • 06.28 10:23:46
    发表了文章 2023-06-28 10:23:46

    EasyRec在公开数据集上的benchmark测试

    在pai平台上可公开读取的数据集，不用再费劲去下载和处理数据集： Taobao 数据集介绍 Avazu CTR 数据集 AliCCP 数据集 CENSUS 数据集
  • 06.25 09:35:13
    回答了问题 2023-06-25 09:35:13

    你印象最深的一道SQL题目是什么？

    踩0 评论0
  • 06.21 09:15:20
    发表了文章 2023-06-21 09:15:20

    PAI-Designer中的EasyRec组件和预制推荐模板介绍

    EasyRec是一个配置化的企业级推荐算法框架(https://github.com/alibaba/EasyRec)，是阿里云PAI平台自研的适用于推荐广告、搜索场景的深度学习算法库，它实现了多种业界常用的模型，包括DSSM、MIND召回模型，DeepFM、多塔、DIN排序模型，还有ESMM、DBMTL、MMoE等多目标排序模型。 本文介绍EasyRec的PAI-Designer组件和预制模板。

2023年05月

2021年10月

  • 发表了文章 2025-06-17

    基于PAI-FeatureStore的LLM embedding功能，结合通义千问大模型，可通过以下链路实现对物品标题、内容字段的离线和在线特征管理。

  • 发表了文章 2025-03-19

    特征平台PAI-FeatureStore的功能列表

  • 发表了文章 2025-03-11

    PAI-Rec推荐平台对于实时特征有三个层次

  • 发表了文章 2025-02-28

    为什么要用TorchEasyRec processor？

  • 发表了文章 2025-01-18

    DataWorks任务如何现在执行最长时间？

  • 发表了文章 2025-01-17

    如何看PAI产品下训练（train）模型任务的费用细节

  • 发表了文章 2025-01-09

    使用PAI-FeatureStore管理风控应用中的特征

  • 发表了文章 2025-01-08

    阿里云人工智能平台图像视频特征提取

  • 发表了文章 2025-01-06

    Restoring from checkpoint failed，Assign requires shapes of both tensors to match. lhs shape= [700,8] rhs shape= [660,8]

  • 发表了文章 2025-01-03

    如何让DataWorks调度依赖一个非DataWorks的任务结点，如数据上传任务？

  • 发表了文章 2024-12-31

    EasyRec用于特征选择的命令和参数解释 easy_rec/python/tools/feature_selection.py

  • 发表了文章 2024-12-18

    PAI下面的gbdt、xgboost、ps-smart 算法如何优化？

  • 发表了文章 2024-12-09

    PAI-Rec相关的各种功能

  • 发表了文章 2023-07-07

    为什么要使用阿里云pairec来搭建推荐系统？

  • 发表了文章 2023-06-28

    EasyRec在公开数据集上的benchmark测试

  • 发表了文章 2023-06-21

    PAI-Designer中的EasyRec组件和预制推荐模板介绍

  • 发表了文章 2023-05-26

    EasyRec中支持了在3个公开数据集上跑通模型并评估效果的examples实验

正在加载, 请稍后...
滑动查看更多
  • 提交了问题 2025-01-02

    为什么要用PAI-FeatureStore来管理特征？

  • 提交了问题 2024-12-14

    EasyRec在PAI平台训练怎么查模型评估效果？

  • 回答了问题 2024-12-14

    EasyRec在PAI平台训练怎么查模型评估效果？

    EasyRec可以在训练的时候，用一个worker来评估：https://easyrec.readthedocs.io/en/latest/train.html可以看单独评估模型：https://easyrec.readthedocs.io/en/latest/eval.html 在PAI上面训练的时候，可以在worker1上面看看评估结果。
    踩0 评论0
  • 回答了问题 2023-07-09

    基于 PAI 去搭建的推荐系统有什么优势？

    阿里云Pairec是一个用于搭建推荐系统的云原生解决方案，它可以帮助用户快速搭建高性能、高可用的推荐系统，并提供了代码生成、ab test服务、实验报表后台等多种功能和工具，使得搭建过程更加简单和高效。 以下是一些使用阿里云Pairec来搭建推荐系统的原因： 快速搭建：阿里云Pairec提供了丰富的召回组件、排序模型、推荐系统诊断工具，可以快速搭建出推荐系统的基础架构和核心算法，减少了开发人员的重复劳动和调试时间，提高了开发效率。高性能：阿里云Pairec采用了先进的计算和存储技术，如hologres、graphcompute等，可以支持大规模数据的处理和实时推荐，能够提供高效的推荐算法和用户交互体验。高可用性：阿里云Pairec提供了高可用性的设计和容错机制，能够保证推荐系统的稳定性和可靠性，避免因系统故障或数据丢失导致服务中断或数据损失。 降低成本：使用阿里云Pairec可以降低搭建推荐系统的成本，避免了开发、维护和管理大规模基础设施的费用和精力，同时也可以根据实际需求进行按需购买机器资源（如PAI-EAS打分资源），有效控制成本。总之，使用阿里云Pairec来搭建推荐系统可以大大提高开发效率、推荐系统性能和可靠性，同时也可以降低成本，对于需要搭建推荐系统的企业和机构来说，是一种非常有吸引力的选择。
    踩0 评论0
  • 回答了问题 2023-06-25

    你印象最深的一道SQL题目是什么？

    1、统计浙江省销量大于某量的销售城市排名： select city, SUM(amt) AS total_amt from table1 where province = '浙江省' group by city having count(*) > 1 and sum(amt) > 2000 order by total_amt desc limit 10;
    踩0 评论0
  • 回答了问题 2021-10-14

    gbdt跑出来的结果都是空值

    应该是用dcg 和ndcg 两个loss type来训练的时候需要
    踩0 评论0
  • 回答了问题 2021-10-14

    求助：运行深度学习案例报错

    提工单，带上 logview的url
    踩0 评论0
  • 回答了问题 2021-10-14

    深度学习阿里云GPU选择

    建议使用DSW，先编写代码，需要训练的时候才启用GPU dsw
    踩0 评论0
  • 回答了问题 2021-10-14

    PAI机器学习的模块里没有深度学习相关的模块

    pai深度学习 可以使用pai-tensorflow
    踩0 评论0
  • 回答了问题 2021-10-14

    租云服务器进行深度学习

    一个GPU 可以使用 dsw
    踩0 评论0
  • 回答了问题 2021-10-13

    机器学习的组件拖拽没反应

    刷新页面试试呢
    踩0 评论0
  • 回答了问题 2021-10-13

    在线预测部署和实验离线调度

    离线部署：是指放到调度系统中去使用 在线部署
    踩0 评论0
  • 回答了问题 2021-10-13

    求通过 PAI 进行权值标签进行相关推荐。

    把数据置为表t，然后t * t 做笛卡尔积，然后对两两图片的标签+权重字段计算相似度，相似度可以写一个udf来实现。
    踩0 评论0
  • 回答了问题 2021-10-13

    PAI里选择了部分有用的特征，怎么导入下一个组件？

    增加sql 组件，select 这10个特征
    踩0 评论0
  • 回答了问题 2021-10-13

    PAI-studio里面的notebook创建按钮点击无反应。

    建议使用pai 的dsw 产品
    踩0 评论0
  • 回答了问题 2021-10-13

    智能推荐怎么使用PAI平台

    可以参考这个推荐综述：链接 里面有etrec、als、FM等算法 ； 可以是使用deepfm 也可以使用EasyRec开源包
    踩0 评论0
  • 回答了问题 2021-10-13

    在pai中如何引入循环

    用shell 脚本，把pai 命令包在for 循环里面
    踩0 评论0
  • 回答了问题 2021-10-13

    pai 深度学习支持哪几种框架

    还支持pytorch https://help.aliyun.com/document_detail/148437.html
    踩0 评论0
  • 回答了问题 2021-10-13

    一个50G的数据文件,要在pai内频繁进行随机访问,采用什么方式读取比较好呢?

    参考这个：https://help.aliyun.com/document_detail/154188.html
    踩0 评论0
  • 回答了问题 2021-10-13

    pai命令行在哪里？各位大神，谢谢啦，本人刚刚接触，不太懂

    dataworks 中，或者odpscmd 命令行中使用。
    踩0 评论0
正在加载, 请稍后...
滑动查看更多
正在加载, 请稍后...
暂无更多信息