移动通信数据仓库接口与ETL2设计论文.docx

移动通信数据仓库接口与ETL2设计论文关键词：移动通信；数据仓库；接口；ETL2；中图分类号:TP303文献标识码:ADOI：10.3969/j.issn.1003-6970.2015.12.0500引言在地市级移动通信数据集市的建设中，数据集市的接口设计主要通过数据仓库接口和ETL2设计来实现。数据仓库的接口由用户接口、业务量接口、帐务接口、新业务接口、大客户接口和竞争接口组成，并通过对相关表的设计具体实现。1实验方法在数据集市ETL的设计中，有两种思路：一是库到库的直接传输，不经过文件，直接从数据仓库的表中，把对应的记录插入到对应地市的数据集市的表中；二是从数据仓库生成各个地市文件，分别插入到对应地市数据集市的表中[1]。第一种方法，可以采用数据仓库工具来辅助完成；第二种方法，通过ETL过程来实现，生成各个地市文件，然后FTP到数据集市的服务器里，再进行加载，本文主要讨论第二种方法的设计。2数据仓库接口2.1用户接口设计2.1.1月表设计（1）DMD_PRODUCT_EXTFAMILYNO_YYYYMM：本表定义GSM语音服务用户的亲情号码，最多允许定义5个亲情号码，对应于用户状态为当前有效的GSM语音用户；（2）DMD_PRODUCT_EXPIP_YYYYMM：为IP直通车用户绑定固定电话用户附属属性表；（3）DMD_PRODUCT_EXTFUNC_YYYYMM：为用户功能产品信息，包括用户的主服务；（4）DMD_PRODUCT_EXTFUNCNEXT_MS：为DWD层用户程控功能产品信息下周期生效表；（5）DMD_PRODUCT_EXTGPS_YYYYMM：本表定义每个用户使用GPS所对应的附属属性信息表；（6）DMD_PRODUCT_PROMOTION_YYYYMM：本表定义每个用户对应的促销信息，一个用户可以有多个促销；2.1.2日表设计（1）DMD_PRODUCT_YYYYMMDD：为用户资料的日全量表，只存放到本日为止在网的所有用户资料，每日全量抽取在网用户资料。（2）DM_PRODUCT_YYYYMMDD：为用户日宽表，包括到本日为止所有在网用户和本月初到本日为止的离网用户。（3）DWD_PRODUCT_EXTFUNC_YYYYMMDD：为用户程控功能产品信息日表，保存一日数据，每日全量抽取。2.2业务量接口设计（1）详单相关表：主要包括语音详单、漫入详单以及相对应的滞后详单。语音详单表（CDR_CALL_XX_YYYYMMDD），本表按照“日+地市”的分表原则在数据仓库中存放，同时开放到数据集市；滞后语音详单表（CDR_LATER_CALL_XX_YYYYMM），存放每日滞后的语音详单；漫入详单表（CDR_CALL_ROAMIN_YYYYMMDD），记录其它省用户漫入到本省的详单；（2）业务量级别相关数据表：主要包括两类数据表，一类是业务量明细表，主要记录用户业务量级的数据，例如用户的长途漫游等情况的明细数据，是一个用户一天存放多条记录的信息表，包括语音话单用户业务量日统计表（DM_CALL_XX_YYYYMMDD）和语音话单用户业务量月统计表（DM_CALL_XX_YYYYMM）。另一类是呼转明细表，主要记录详单分离出来的和呼转相关的明细数据信息，包括用户呼转日明细表（DM_PRODUCT_CALLFW_YYYYMMDD）和用户呼转月表（DM_PRODUCT_CALLFW_YYYYMM）；（3）用户级业务量相关表：主要记录用户的业务量，一个用户一条记录，包含用户业务量日明细及累计表（DM_PRODUCT_CALL_YYYYMMDD）和用户业务量月明细表（DM_PRODUCT_CALL_YYYYMM）；2.3帐务接口设计2.3.1三级账单表（1）当前月帐单表：是指当月出帐、抵销预存后刚形成的帐单，本帐单等待用户在下个缴费周期缴费单，因此后付费用户不算在欠费用户中，同时由于本帐单和历史帐单的意义不同而单独存放，以便于数据处理和查询。包括帐户当前月帐单表（Dmd_Acct_Bill_yyyymm）、用户当前月帐单表（Dmd_Acct_Userbill_yyyymm）和用户明细当前月帐单表（Dmd_Acct_UserbillItem_yyyymm）。（2）历史月帐单表：是指除当前出帐月的帐单之外的其它月的帐单，本部分帐单是后付费用户欠费计算的主要来源表。包括帐户当前月帐单表（Dmd_Acct_Bill_H_yyyymm）、用户当前月帐单表（Dmd_Acct_Userbill_H_yyyymm）、用户明细当前月帐单表（Dmd_Acct_UserbillItem_H_yyyymm）。（3）预付费用户帐单表：是指全球通预付费用户的帐单，由于全球通预付费用户是实时扣费的，因此本部分帐单和预付费用户的帐单分开存放。包括预付