开发者社区 > 大数据与机器学习 > 人工智能平台PAI > 正文

在机器学习PAI创建了一个实时的特征视图后,里面的数据是通过这个“实时计算控制台”往里传入数据吗?

在机器学习PAI创建了一个实时的特征视图后,里面的数据是通过这个“实时计算控制台”往里传入数据吗?特征平台 结合 实时计算 这部分操作有没有最佳实践案例呀?41415e3e79c1f19abc3f5bc98e3a47a4.png
0d924575ff1b61f448eee4d78666e86c.png

展开
收起
三分钟热度的鱼 2024-04-17 22:50:52 30 0
2 条回答
写回答
取消 提交回答
  • 在机器学习PAI中创建的实时特征视图,里面的数据不是通过“实时计算控制台”传入的。

    实时特征视图的数据通常来自于在线特征数据,这些数据会被注册到FeatureStore中的视图表。实时特征视图支持自定义表结构的写入方式,这意味着用户可以根据需要手动添加视图字段并配置字段属性。当外部数据进入特征平台时,它们会通过特征视图(FeatureView)进行指定,包括数据来源(DataSource)、数据进入特征存储(FeatureStore)所需的转换(特征工程/Transformation)、特征的模式(特征名称+类型),以及数据需要存放的位置(OnlineStore/OfflineStore)等。

    此外,PAI-FeatureStore设计上整合了在线和离线特征处理流程,可以自动完成在线和离线表的构建,并且保持特征定义和数据的一致性。对于实时特征,FeatureStore会直接对接线上实时数仓服务(如Hologres),使得线上服务可以直接从在线存储中获取最新的实时特征数据,而不需要额外的特征线上落盘步骤。
    因此,实时特征视图的数据通常是通过与线上实时数仓服务的对接来获取的,而不是通过某个单独的控制台传入。这种方式确保了线上线下特征数据的一致性,并且提供了统一的特征注册、管理和访问接口。

    2024-04-18 08:28:11
    赞同 展开评论 打赏
  • 可以看这个:https://help.aliyun.com/zh/flink/developer-reference/tablestore-connector
    flink 写入到 tablestore 此回答整理自钉群“PAI-FeatureStore特征平台应用交流”

    2024-04-17 23:19:51
    赞同 1 展开评论 打赏

热门讨论

热门文章

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载