互联网地质数据检索与获取的方法及其装置
首页 企业 产品 技术 资讯 图库 视频 需求 会议 活动 产业
互联网地质数据检索与获取的方法及其装置
来源:北方有色网
访问:1336
简介: 本发明公开了一种互联网地质数据检索与获取的方法,包括:将地质叙词表转换成EXCEL格式的电子版叙词表;依据检索“关键词”,通过与电子版叙词表比对获取等级关系、等价关系、相关关系的关联词;利用相关性层级数的设置对关联词数量进行收敛控制;检索关键词和关联词,爬虫程序依据检索结果的页面数据和爬取规则,爬取该页面数据(主网页)以及该页面数据中每条网址链接的数据;对网页数据进行地质主题相关性计算,确定相关的数据。通过发明方法对地质数据抽取,可实现地质信息和新闻的定期、定向的精确提取,解决了采用传统数据爬取方法与地质大数据特性之间的矛盾,有效提升数据发现的全面性,可以高效的获取互联网地质相关数据。
本发明公开了一种互联网地质数据检索与获取的方法,包括:将地质叙词表转换成EXCEL格式的电子版叙词表;依据检索“关键词”,通过与电子版叙词表比对获取等级关系、等价关系、相关关系的关联词;利用相关性层级数的设置对关联词数量进行收敛控制;检索关键词和关联词,爬虫程序依据检索结果的页面数据和爬取规则,爬取该页面数据(主网页)以及该页面数据中每条网址链接的数据;对网页数据进行地质主题相关性计算,确定相关的数据。通过发明方法对地质数据抽取,可实现地质信息和新闻的定期、定向的精确提取,解决了采用传统数据爬取方法与地质大数据特性之间的矛盾,有效提升数据发现的全面性,可以高效的获取互联网地质相关数据。
0
0
0
0
0
         
标签:探矿技术
广州铭谦选矿设备有限公司宣传
广州铭谦选矿设备有限公司宣传
相关技术
评论(0条)
200/200
牛津仪器科技(上海)有限公司宣传
发布
技术

顶部
北方有色网-互联网服务平台-关于我们
Copyright 2025 China-mcc.com All Rights Reserved
备案号:京ICP备11044340号-3
电信业务经营许可证编号:京B2-20242293
京公网安备 11010702002294号