logo好方法网

一种基于大数据处理的匹配推送系统


技术摘要:
本发明公开了一种基于大数据处理的匹配推送系统,包括:数据采集归类系统、数据处理匹配系统、匹配特征导入系统和数据推送显示系统;所述数据采集归类系统包括数据采集单元、数据整合群体归类单元和数据库。本发明中,通过数据整合群体归类单元实现将数据按照相同内容  全部
背景技术:
在大数据应用日益广泛的今天,数据资源的开放和共享已经成为促进大数据产业 发展的关键,数据的敏感性是数据开放和共享过程中需要重点关注的问题,我们需要解决 数据在开放和共享前的分类,从而为政府数据开放和共享工作稳步推进,为大数据发展应 用打好根基。 目前使用的基于大数据处理的匹配推送系统,虽然实现对数据进行匹配推送,但 是在数据匹配处理是,缺少对数据库中的数据进行预处理措施,使得在匹配分析时系统响 应速度慢,影响使用体验,同时在进行匹配时多为关键词直接检索匹配,匹配的准确性较 差。
技术实现要素:
本发明的目的是为了解决现有技术中缺少对数据库中的数据进行预处理措施,使 得在匹配分析时系统响应速度慢,影响使用体验,同时影响数据推送的准确性,而提出的一 种基于大数据处理的匹配推送系统。 为了实现上述目的,本发明采用了如下技术方案:一种基于大数据处理的匹配推 送系统,包括:数据采集归类系统、数据处理匹配系统、匹配特征导入系统和数据推送显示 系统; 所述数据采集归类系统包括数据采集单元、数据整合群体归类单元和数据库; 所述数据采集单元基于大数据技术进行收集数据; 所述数据整合群体归类单元用于将采集的数据按照相同内容、相同性质的数据以 及要求统一管理的信息集合在一起,把相异的和需要分别管理的数据区分开来,然后确定 各个集合之间的关系,形成一个有条理分类数据; 所述数据库用于对归类后的数据进行分类储存; 所述匹配特征导入系统用于导读进行匹配推送处理的特征数据信息; 所述数据处理匹配系统用于根据导入的特征数据信息对数据库中储存的数据信 息进行比较匹配获取相关数据信息; 所述数据推送显示系统用于将获取的相关数据信息进行整理推送进行显示。 作为上述技术方案的进一步描述: 所述数据整合群体归类单元包括数据整合处理模块、数据主题分类模块、数据编 码模块和分类储存模块; 所述数据整合处理模块用于对数据采集单元采集的数据进行汇总整合处理; 所述数据主题分类模块用于对整合后的数据基于数据类型,按照数据主题特征进 4 CN 111597416 A 说 明 书 2/4 页 行分类,实现将数据以自然属性为依据进行系统化分类; 所述数据编码模块以分类后的数据为依据赋予具有规律性、计算机容易识别与处 理的符号; 所述分类储存模块用于将分类处理后的数据导入的数据库中进行储存。 作为上述技术方案的进一步描述: 所述匹配特征导入系统由关键词录入模块、特征提取模块和数据类型确定模块组 成; 所述关键词录入模块用于用户根据数据匹配推送需要录入关键词信息; 所述特征提取模块用于对用户录入的关键词信息进捕捉,并对关键词信息中的特 征进行提取; 所述数据类型确定模块用于根据提取的关键词特征并依据数据整合群体归类单 元分类的数据主题类型分析确定匹配推送的数据主体类型。 作为上述技术方案的进一步描述: 所述数据类型确定模块在实训确定匹配推送的数据主体类型时可以为多种主题 类型,工作人员可以根据实际需要选择一种或者多种主题数据进行匹配推送。 作为上述技术方案的进一步描述: 所述特征提取模块提取的关键词特征包括位置特征、时间特征、类型特征以及逻 辑关联特征。 作为上述技术方案的进一步描述: 所述数据处理匹配系统包括特征点匹配模块、关联特征匹配模块和数据传输模 块; 所述特征点匹配模块用于根据匹配特征导入系统提取的特征,并确定数据类型与 数据库中储存的对应数据类型进行特征点匹配,获取匹配的相关数据; 所述关联特征匹配模块用于根据匹配特征导入系统提取的特征,并确定数据类型 与数据库中储存的对应数据类型进行特征点关联匹配,获取匹配的关联数据; 所述数据传输模块用于将获取匹配的相关数据和关联数据传输至数据推送显示 系统。 作为上述技术方案的进一步描述: 所述数据推送显示系统由权重分析模块、排序推送模块和数据显示终端组成; 所述权重分析模块用于分别对获取匹配的相关数据和关联数据进行比较异同,根 据相同占比进行权重分析,获取相关数据和关联数据的权重比例; 所述排序推送模块依据权重比例进行排序; 所述数据显示终端用于将排序好的相关数据和关联数据进行显示。 本发明提供了一种基于大数据处理的匹配推送系统。具备以下有益效果: (1):该基于大数据处理的匹配推送系统通过数据整合群体归类单元实现将数据 按照相同内容、相同性质的数据以及要求统一管理的信息集合在一起,把相异的和需要分 别管理的数据区分开来,然后确定各个集合之间的关系将整体数据进行分类,在对分类后 的数据进行编码,使得在进行数据处理匹配时可以根据数据类型进行选取匹配分析,不需 要对数据整体进行匹配分析,显著的提高了数据匹配推送响应的速度,同时增强数据匹配 5 CN 111597416 A 说 明 书 3/4 页 推送的准确性。 (2):该基于大数据处理的匹配推送系统通过在匹配特征导入系统中设置特征提 取模块,在录入关键词进行匹配推送时,相比于传统的直接将关键词进行与数据库进行匹 配,匹配的准确性较差,通过特征提取模块可以将关键词的特征进行提取,然后在进行匹配 分析,显著的提高匹配分析的的准确性。 附图说明 图1为本发明提出的一种基于大数据处理的匹配推送系统的整体示意图; 图2为本发明中数据采集归类系统的示意图; 图3为本发明中数据整合群体归类单元的示意图; 图4为本发明中匹配特征导入系统的示意图; 图5为本发明中数据处理匹配系统的示意图; 图6为本发明中数据推送显示系统的示意图。
下载此资料需消耗2积分,
分享到:
收藏