首页 > 技术交易 > 科技成果
异构数据汇交及挖掘共享平台的研发
发布时间: 2023-12-08 浏览量:20
  • 交易方式:面议
  • 联系电话:15945187909
  • 单位名称或姓名:刘德峰
  • 产业领域:数字经济
  • 成果类型:
项目基本情况Basic information of the project
利用计算机技术、网络、存储和数据抓取等数据传输和处理技术解决由于信息爆炸产生的大数据、多系统、多平台之间的信息孤立、数据重复、数据混乱、利用率低等问题,并采用异构、开源等方式,通过数据集成、转换、清洗、分析等大数据处理技术,挖掘信息,实现大数据、多系统、多平台之间的数据转换及高效利用。 主要技术性能指标: 完成基于"大数据"环境下的异构数据汇交及挖掘共享平台关键技术的研究,解决平台关键技术内容ETL异构数据库采集、垂直信息全文检索喝基于海量数据的数据挖掘的技术难点,实现大数据、多系统、多平台之间的数据转换及高效利用。完成基于"大数据"环境下的异构数据汇交及挖掘的关键技术研究和平台的研发。 1、解决检索速度问题,独立的文件系统架构,不依赖与传统查询时数据库的并发事务响应。 2、将解决搜索引擎的准实时索引技术,可根据实际需要将高更新频率的数据表集中在低IO压力的机器上配置,可获得1-3小时的高速更新效率。 3、解决异地共享机制和速度问题,利用中心服务器进行共享路由管理和IP验证,由中心控制地市间共享互访的权限,并将具体检索请求转发到其他城市(智能检索系统)的Webservice异地检索服务接口,最后将结果取回本地进行进行展示处理。
管理团队与技术团队Management team and technical team
黑龙江省计算机技能培训中心
效益分析Benefit analysis
该项目为储备库项目资源,暂无效益分析内容。
成果推荐Result recommendation