开发者学堂课程【新电商大数据平台2020最新课程:电商项目之广告投放数据表执行测试】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/640/detail/10539
电商项目之广告投放数据表执行测试
测试
from tbrelease a
join ods nshop.dim pub_ page p
on a.release product page=p . page code and P . page_ type= '4'
join ods nshop.dim pub_ product f
on p. page target=f . product code Limit 10;
WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions, Consider us ing
a different execution engine (i.e, spark, tez) or using Hive 1.x releases .
Query ID = root 20200329141911 76a01e81- 3814-4441 -9981 836410528887
Total jobs = 7
如果执行不成功,后面会有一些执行失败的表,有些语句会执行失败,有的语法可能不支持,到2.0版本才可以执行一些语句。导入的时候 CT 是空的
在跑的时候不要执行插入语句,这样做的目的是
1.检测一下有没有问题
2.看一下结果对不对,如果直接插入的话,结果错误还得删,比较麻烦
创建一下表:
insert overwrite table dwd_ nshop. dwd. nshop. releasedatas partition(bdp. day=" 20200321' )
select
a.customer_ id,
a.device_ num ,
a.device_ type ,
I
a.0s,
a.os_ version,
a.manufacturer,
a.area code,
a.release_ sid,
a.release_ ip,
a.release_ session,
a.release_ sources,
f.category_ code release. category,
p.page_ target release. product,
a.release_ product. page,
a.ct
from tbrelease a
Jo1n ods_ nishop.dIn puD_ page P
每个表都是按照层级进行(ODS DWD DWS ADS).在建表的时候先从分析业务再从实现再从测试三个方面进行。
会产生如下数据:
-rWXT-XT-X
root
supergroup
1.09 MB
2020/3/29下午2:24:33