开发者社区 > 大数据与机器学习 > 人工智能平台PAI > 正文

机器学习PAI rtp_input 和rtp_input_v2是什么区别啊?这个只用于csv吗?

机器学习PAI rtp_input 和rtp_input_v2是什么区别啊?这个只用于csv吗?odps的表input只能是odps_input_v3?

展开
收起
真的很搞笑 2023-07-30 17:53:29 49 0
2 条回答
写回答
取消 提交回答
  • 在机器学习 PAI 中,rtp_inputrtp_input_v2 是用于实时预测模型的输入方式,可以用于除了 CSV 之外的多种数据格式。而 odps_input_v3 是用于读取 ODPS(MaxCompute)表格数据的输入方式。

    区别如下:

    1. rtp_input:适用于实时预测模型,支持多种数据格式。你可以使用这个输入方式读取并解析 CSV、TSV、LibSVM 等格式的数据。

    2. rtp_input_v2:是对 rtp_input 的改进版本,提供更多的功能和灵活性。除了支持 CSV、TSV、LibSVM 格式外,它还支持 JSONlines 等更多的数据格式。此外,rtp_input_v2 还支持数据转换、过滤和选择特定字段等功能。

    3. odps_input_v3:用于读取 ODPS 表格数据,即 MaxCompute 数据存储服务。它提供了与 MaxCompute 集成的功能,可以直接从 ODPS 表中读取数据进行训练和预测。

    需要注意的是,rtp_inputrtp_input_v2 适用于不同的场景和数据格式,而 odps_input_v3 则专门用于读取 ODPS 表格数据。具体使用哪个输入方式,取决于你的场景和数据源的格式。

    2023-07-31 16:45:29
    赞同 展开评论 打赏
  • 我认为答案是: OdpsInputV3 和 OdpsInputV2 是用于在 ODPS 上访问数据的不同方式。OdpsInputV3 用于在本地或 HDFS 上运行 EasyRec,而 OdpsInputV2 用于在 ODPS 上运行其他程序。
    对于 CSV 格式,OdpsInputV3 和 OdpsInputV2 都可以接受。但是,OdpsInputV2 需要指定 train_input_path 和 eval_input_path,而 OdpsInputV3 不需要指定。
    对于 RTP 格式,OdpsInputV3 和 OdpsInputV2 都可以接受。但是,OdpsInputV2 需要指定 RTP 和 RTCP 端口号,而 OdpsInputV3 不需要指定。
    对于 Hive 和 Hive RTP,OdpsInputV3 和 OdpsInputV2 都可以接受。但是,OdpsInputV2 只能在本地或 DataScience 上访问 Hive 表,而 OdpsInputV3 可以在 Hadoop 集群上访问 Hive 表。
    对于 Kafka 和 Datahub,OdpsInputV3 和 OdpsInputV2 都可以接受。但是,OdpsInputV2 只能在本地或 DataScience 上访问 Datahub,而 OdpsInputV3 可以在 Datahub 上访问 Datahub。,此回答整理自钉群“【EasyRec】推荐算法交流群”

    2023-07-30 18:09:28
    赞同 展开评论 打赏

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

相关产品

  • 人工智能平台 PAI
  • 热门讨论

    热门文章

    相关电子书

    更多
    微博机器学习平台架构和实践 立即下载
    机器学习及人机交互实战 立即下载
    大数据与机器学习支撑的个性化大屏 立即下载