spark将分析好的数据插入mysql,怎么判断重复-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

spark将分析好的数据插入mysql,怎么判断重复

2019-05-28 16:01:29 3806 2

spark将分析好的数据插入mysql,怎么判断重复

取消 提交回答
全部回答(2)
  • bigbigtree
    2020-03-19 20:00:27

    建议直接在mysql数据表中增加unique key约束,由数据库端做数据去重

    0 0
  • hbase小能手
    2019-07-17 23:36:12

    你是说 存在更新不存在 插入?那你得foreachpartition自己写mysql 。 update into on deplicate key这种方式写 官方没有 这种更新的方式写的

    0 0
添加回答
相关问答

1

回答

【RDS】RDS MySQL如何终止会话?

2022-01-12 16:17:02 458浏览量 回答数 1

1

回答

RDS MySQL如何终止会话?

2022-01-07 14:15:23 879浏览量 回答数 1

1

回答

RDS MySQL实例间的迁移中设置告警的说明是什么?

2021-12-14 15:39:48 114浏览量 回答数 1

1

回答

RDS MySQL实例间的迁移中目标库对象名称大小写策略的说明是什么?

2021-12-14 15:40:12 91浏览量 回答数 1

1

回答

RDS MySQL实例间的迁移中源表DMS_ONLINE_DDL过程中是否复制临时表的说明是什么?

2021-12-14 15:40:37 159浏览量 回答数 1

1

回答

RDS MySQL实例间的迁移中源库、目标库无法连接重试时间的说明是什么?

2021-12-14 15:41:10 177浏览量 回答数 1

1

回答

RDS SQL Server同步至RDS MySQL中支持同步的SQL操作是什么?

2021-12-13 16:41:41 161浏览量 回答数 1

1

回答

RDS SQL Server同步至RDS MySQL中其他限制的说明是什么?

2021-12-13 16:40:55 98浏览量 回答数 1

1

回答

RDS SQL Server同步至RDS MySQL中源库限制的说明是什么?

2021-12-13 16:40:31 89浏览量 回答数 1

1

回答

RDS SQL Server同步至RDS MySQL的前提条件是什么?

2021-12-13 16:40:01 145浏览量 回答数 1
+关注
hbase小能手
HBase是一个分布式的、面向列的开源数据库,一个结构化数据的分布式存储系统。HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库。阿里云HBase技术团队共同探讨HBase及其生态的问题。
112
文章
338
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载