数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。

通常您需要遵照的命名规范为:dwd_{业务板块/pub}_{数据域缩写}_{业务过程缩写}[_{自定义表命名标签缩写}] _{单分区增量全量标识}
pub表示数据包括多个业务板块的数据。单分区增量全量标识通常为:i表示增量,f表示全量。
例如:dwd_asale_trd_ordcrt_trip_di(A电商公司航旅机票订单下单事实表,日刷新增量)及dwd_asale_itm_item_df(A电商商品快照事实表,日刷新全量)。
本教程中,DWD层主要由三个表构成:数字化转型网www.szhzxw.cn
交易商品信息事实表:dwd_asale_trd_itm_di。
交易会员信息事实表:ods_asale_trd_mbr_di。
交易订单信息事实表:dwd_asale_trd_ord_di。
DWD层数据存储及生命周期管理规范请参见CDM明细层设计规范。
建表示例
建表语句示例如下所示。
CREATE TABLE IF NOT EXISTS dwd_asale_trd_itm_di
(
item_id BIGINT COMMENT ‘商品ID’,
item_title STRING COMMENT ‘商品名称’,
item_price DOUBLE COMMENT ‘商品价格’,
item_stuff_status BIGINT COMMENT ‘商品新旧程度_0全新1闲置2二手’,
item_prov STRING COMMENT ‘商品省份’,
item_city STRING COMMENT ‘商品城市’,
cate_id BIGINT COMMENT ‘商品类目ID’,
cate_name STRING COMMENT ‘商品类目名称’,
commodity_id BIGINT COMMENT ‘品类ID’,数字化转型网www.szhzxw.cn
commodity_name STRING COMMENT ‘品类名称’,
buyer_id BIGINT COMMENT ‘买家ID’,
)
COMMENT ‘交易商品信息事实表’
PARTITIONED BY (ds STRING COMMENT ‘日期’)
LIFECYCLE 400;
公共汇总粒度事实层(DWS)
公共汇总粒度事实层以分析的主题对象作为建模驱动,基于上层的应用和产品的指标需求构建公共粒度的汇总指标事实表。公共汇总层的一个表通常会对应一个派生指标。
声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数字化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数字化转型网www.szhzxw.cn
数字化转型网数据专题包含哪些内容
数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。
数字化转型网数据专题包含: 数字化转型网(www.szhzxw.cn)
1、数据相关外脑支持:100+数据相关专家、100+数据实践者、1000+相关资料
2、数据研习社:与全球数据相关专家、实践者共同探讨相关问题,推动产业发展!
3、国际认证培训:目前已引进DAMA国际认证CDMP,其他国内外认证也在逐步引进中
4、典型案例参考:与数字化转型网数据要素X研习社社员一起学习典型案例,共探企业数据落地应用

本文由数字化转型网(www.szhzxw.cn)转载而成,来源于 数据仓库与Python大数据;编辑/翻译:数字化转型网Jack。








