开发者社区> 问答> 正文

ODPS新建数据源的作用是什么?如何访问数据源?

 ODPS新建数据源的作用是什么?如何访问数据源?

展开
收起
游客i2i5j3xkpqrwe 2023-02-23 08:27:18 530 0
3 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    数据源是一种用来提高数据库连接性能的常规手段,数据源会负责维持一个数据库连接池,当程序创建数据源实例时,系统会一次性地创建多个数据库连接,并把这些数据库连接保存在连接池中

    2023-02-23 16:50:55
    赞同 展开评论 打赏
  • 十年摸盘键,代码未曾试。 今日码示君,谁有上云事。

    大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。

    目前智能推荐系统的数据源只支持MaxCompute(ODPS),后续会陆续开放OSS,RDS等其他方式。

    表是MaxCompute的数据存储单元,它在逻辑上也是由行和列组成的二维结构,每行代表一条记录,每列表示相同数据类型的一个字段,一条记录可以包含一个或多个列,各个列的名称和类型构成这张表的Schema。智能推荐要求的全量数据的表结构schema参见数据规范。

    分区表是指在创建表时指定分区空间,即指定表内的某几个字段作为分区列。 项目空间(Project)是MaxCompute的基本组织单元,它类似于传统数据库的Database或Schema的概念,是进行多用户隔离和访问控制的主要边界。

    客户端:使用MaxCompute的命令行工具,详情参见 客户端。

    开通MaxCompute数据服务

    如果用户已经在使用MaxCompute(原ODPS)服务,可以忽略此步骤。如果没有,需要提前开通相关服务,才可以通过MaxCompute将全量数据上传至智能推荐系统中。 开通方法详情参见:https://help.aliyun.com/document_detail/73015.html?spm=a2c4g.11186623.0.0.10a97e6dj3ENVm

    MaxCompute支持多种数据上传方式,如果用户的数据已经存储在阿里云上(例如:OSS,RDS等),也可以使用DataWorks的数据集成功能。

    智能推荐服务需要相关权限,才可以从用户的MaxCompute项目空间,同步全量数据至推荐服务中。用户可以通过对子账号授权的方式,提供子账号的AK,具体的授权方式参见 智能推荐MAXCompute授权流程。

    智能推荐服务只会在初始化时同步一次全量数据,后续数据均通过SDK增量的方式推送,不会再使用数据源中相应的数据,用户如果没有新建数据版本,更换全量数据的需求,可以自行冻结删除掉之前开通的服务。

    什么是MaxCompute介绍详见: https://help.aliyun.com/document_detail/27800.html?spm=a2c4g.11186623.0.0.10a94901MfPY8c

    2023-02-23 11:07:57
    赞同 1 展开评论 打赏
  • 月移花影,暗香浮动

    ODPS新建数据源的作用是提供一个可以访问ODPS数据的接口,可以通过ODPS提供的API来访问数据源,也可以通过ODPS提供的控制台来访问数据源。

    2023-02-23 10:30:41
    赞同 1 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks高效数据分析最佳实践-2020飞天大数据平台实战应用第一季 立即下载
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载