一种基于flink引擎的多接口xdr话单合成方法
合集下载
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
一种基于flink引擎的多接口xdr话单合成方法
1、在flink中定义元数据(元数据表存储所有涉及的接口xdr报文字段上报比对协议和校验,定义好每个接口字段,接口名称,运营商等数据)。
2、定义好连接关系,将上报的各种接口xdr数据源进行插入。
3、定义原数据结构,根据上述定义所有接口xdr字段,将连接关系构建成xdr 数据源表格格式,每行表示一条xdr数据。
4、将新的数据源接入,根据xdr报文校验数据的正确性,将正确的xdr数据插入原有的xdr报文数据源中,每条数据对应每行表示一条xdr数据。
5、启动定时监控任务,负责增量更新xdr报文数据变更,每条xdr数据变更或者新增时,都会触发报文更新任务,将报文更新保存到xdr报文数据源中,这一步骤功能与第四步类似。
6、使用flink sql语句连接xdr数据源,将各接口来源的xdr数据合成一条xdr 单元数据,输出xdr数据正则式的合成数据。
7、将最终合成的xdr单元数据保存到指定的落地表中,完成多接口xdr话单合成任务。