专利内容由知识产权出版社提供
专利名称：一种实现大数据处理的方法及装置专利类型：发明专利发明人：王志军,廖慧
申请号：CN2013106544.0申请日：20131204公开号：CN103617268A公开日：20140305
摘要：本申请公开了一种实现大数据处理的方法及装置，包括：在分布式系统基础架构（hadoop）外部环境，利用预先设置的拆分策略拆分hadoop总查询任务；按照拆分的hadoop查询任务，在hadoop的分布式存储系统中分别进行hadoop内部查询；将各内部查询结果按照预先设置的存储策略存储在hadoop外部环境；通过hadoop外部查询方式对存储信息进行统计并显示。本发明还包括与方法相对应的装置，通过本发明在hadoop外部环境对总查询任务进行拆分，在执行完拆分查询任务后，将内部查询结果按照任务拆分进行相应的分级存储，实现hadoop大数据访问的分页浏览和在不影响系统性能下进行数据统计。
申请人：中国联合网络通信集团有限公司
地址：100033 北京市西城区金融大街21号
国籍：CN
代理机构：北京安信方达知识产权代理有限公司
更多信息请下载全文后查看
