一种数据处理方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN106846065A(43)申请公布日2017.06.13(21)申请号201710066945.7(22)申请日2017.02.07(71)申请人咪咕互动娱乐有限公司地址210000江苏省南京市建邺区雨润大街88-1号(72)发明人张良海(74)专利代理机构北京派特恩知识产权代理有限公司11270代理人蒋雅洁张颖玲(51)Int.Cl.G06Q30/02(2012.01)G06Q30/06(2012.01)G06F17/30(2006.01)G06F17/21(2006.01)权利要求书2页说明书7页附图6页(54)发明名称一种数据处理方法及装置(57)摘要本发明公开了一种数据处理方法，所述方法包括：接收APP客户端发送的采集自不同类型设备的具有不同数据格式的第一数据，并将所述第一数据转换为统一数据格式的第二数据；根据已配置完成的数据过滤策略，对所述第二数据进行过滤处理，得到包含有效数据的第三数据；根据已配置完成的数据分发策略，将获取到的第三数据分发到不同的业务节点；对各个业务节点的所述第三数据分别进行处理。本发明还公开了一种数据处理装置。采用本发明提供的数据处理方法及装置，可增强系统的灵活性和稳定性。CN106846065ACN106846065A权利要求书1/2页1.一种数据处理方法，其特征在于，所述方法包括：接收APP客户端发送的采集自不同类型设备的具有不同数据格式的第一数据，并将所述第一数据转换为统一数据格式的第二数据；根据已配置完成的数据过滤策略，对所述第二数据进行过滤处理，得到包含有效数据的第三数据；根据已配置完成的数据分发策略，将获取到的第三数据分发到不同的业务节点；对各个业务节点的所述第三数据分别进行处理。2.根据权利要求1所述的方法，其特征在于，所述将所述第一数据转换为统一数据格式的第二数据，包括：将每个所述不同类型设备的对外接口协议进行适配；通过字段的映射策略将所述第一数据转换为统一数据格式的第二数据。3.根据权利要求1所述的方法，其特征在于，在所述接收APP客户端发送的采集自不同类型设备的具有不同数据格式的第一数据，并将所述第一数据转换为统一数据格式的第二数据后，所述方法还包括：针对不同类型设备的第二数据分别进行数据过滤策略的配置。4.根据权利要求3所述的方法，其特征在于，在所述根据已配置完成的数据过滤策略，对所述第二数据进行过滤处理，得到包含有效数据的第三数据后，所述方法还包括：根据不同的业务应用场景，对不同类型设备的第三数据进行数据分发策略的配置。5.根据权利要求1所述的方法，其特征在于，所述将获取到的第三数据分发到不同的业务节点，包括：使用观察者模式或中间件技术将所述第三数据向对应的不同业务节点分发。6.根据权利要求3所述的方法，其特征在于，所述针对不同类型设备的第二数据分别进行数据过滤策略的配置，具体包括：针对不同类型设备的第二数据使用主备模式的redis缓存进行数据过滤策略的配置。7.根据权利要求4所述的方法，其特征在于，所述根据不同的业务应用场景，对不同类型设备的第三数据进行数据分发策略的配置，具体包括：根据不同的业务应用场景，使用主备模式的redis缓存对不同类型设备的第三数据进行数据分发策略的配置。8.根据权利要求1至7中任一项所述的方法，其特征在于，所述方法还包括：记录数据处理过程中的过程数据到数据日志。9.根据权利要求1所述的方法，其特征在于，所述第一数据的数据格式包括json格式、数组格式和xml格式，所述统一数据格式为json格式。10.根据权利要求1所述的方法，其特征在于，所述设备为穿戴式运动设备，所述第一数据为运动数据。11.一种数据处理装置，其特征在于，所述装置包括：转换单元，用于接收APP客户端发送的采集自不同类型设备的具有不同数据格式的第一数据，并将所述第一数据转换为统一数据格式的第二数据；过滤单元，用于根据已配置完成的数据过滤策略，对所述第二数据进行过滤处理，得到包含有效数据的第三数据；2CN106846065A权利要求书2/2页分发单元，用于根据已配置完成的数据分发策略，将获取到的第三数据分发到不同的业务节点；处理单元，用于对对各个业务节点的所述第三数据分别进行处理。12.根据权利要求11所述的装置，其特征在于，所述转换单元包括：适配子单元，用于将每个所述不同类型设备的对外接口协议进行适配；映射子单元，用于通过字段的映射策略将所述第一数据转换为统一数据格式的第二数据。13.根据权利要求11所述的装置，其特征在于，所述装置还包括：第一配置单元，用于针对不同类型设备的第二数据分别进行数据过滤策略的配置。14.根据权利要求13所述的装置，其特征在于，所述装置还包括：第二配置单元，用于根据不同的业