(64位)本体学习程序(ontoEnrich)系统使用说明文档
系统运行:文件夹system下,可执行文件ontoEnrichment
概念学习
--------------------------------------------------------1、简单概念学习
语料库配置文件:corpusDir(可自行配置,第一行为领域语料文件所在目录,其他为背景语料文件所在目录,每个目录占一行)
------------程序执行:
请输入语料库配置文件(第一行为领域语料):./corpusDir
请输入经过分词预处理的领域文档存放目录:./语料/domainSegment
请输入输出文件名:./shuchu/simple_concept
请输入简单概念筛选阈值(默认x=0.5,y=1.0),如果未输入则选择默认值:
0.5
1.0
--------程序执行结果:./shuchu/simple_concept
-------------------------------------------------------2、复合概念学习
------------程序执行:
请输入构成复合概念词根文件:./Data/root.txt (可以包含多个,每个词一行)
请输入构成复合概念模板文件(按R学习模板文件):./Data/rule (复合概念词性构成规则)
若要重新学习复合概念规则
规则获取文件:./Data/ruleTrainData.txt (每行为一个记录,其格式为:句子 该句中包含的复合概念)
请输入领域文档集合所在目录名:./语料/domainWeapon
是否进行复合概念词频统计进行筛选(Y/N):Y
是否进行上下文依赖筛选(Y/N):Y
请输入上下文依赖筛选阈值(未输入则使用默认值0.5):0.5
通过上下文依赖筛选的复合概念存储在(输入文件名):./shuchu/compoundConcept.txt
--------程序执行结果:
终端输出的结果:【复合概念 上下文依赖值/复合概念在领域文档中出现的频率】
./shuchu/compoundConcept.txt 文件中的内容:【与终端输出的结果差别是:“上下文依赖值/复合概念在领域文档中出现的频率”的值大于上下文依赖筛选阈值才存入输出文件中】
关系学习
1、使用维基百科信息盒进行关系学习
2、使用维基百科分类名进行关系学习
3、使用维基百科链接进行关系学习
4、使用广义后缀树识别概念分类关系
5、使用层次聚类学习概念间分类关系
6、模板匹配法学习特定概念间关系(方法一)
7、模板匹配法学习特定概念间关系(方法二)
1、前提:并不是wiki文件里面所有的概念都有其对应的infobox这一条目,故不是输入任何概念都可以得到信息盒抽取的概念间的关系
拥有infobox这一条目的所有概念:./wikiData/infoboxWords.txt ,一个概念一行
----------------程序运行
***********************************************
****维基百科信息盒(infobox)抽取概念间关系****
***********************************************
请输入概念名:航空器
arg1 : ./wikiData/zhwiki-latest-pages-articles.xml
arg2 : ./wikiData/outputConceptPage
total concepts : 1
./scripts/extract_wiki_page.sh ./wikiData/zhwiki-latest-pages-articles.xml ./wikiData/outputConceptPage 航空器
lines : 157
4 of 157 in Infobox.
attributes size :2
航空器 包含如下关系三元组:
SuperClass : aircraft begin
ISA : aircraft begin
caption : 空客A380
caption : 空客A380,人类目前最大的民用固定翼航空器。
image : Image:Airbus A380 blue sky.jpg
name : 航空器
infobox关系抽取完成!
是否继续(Y/N)?
-------------------程序运行结果:
航空器 ISA aircraft
航空器 ISA begin
航空器 caption 空客A380
2、前提:并不是wiki文件里面所有的概念都有其对应的“分类名”这一条目,故不是输入任何概念都可以得到概念关系三元组
拥有“分类名”这一条目的所有概念:./wikiData/categoryWord.txt ,一个概念一行
----------------------程序运行:
请输入待扩展的概念名:航空器
请输入结果存储文件名:./shuchu/test
是否继续(Y/N)?
-------------------程序运行结果:./shuchu/test中的结果:
3、 程序运行前预处理:
运行./wikiData/wikiGraph程序【该程序是对wiki的
xml文件进行预处理,得到维基百科连接图文件】,改程序的输入是:./wikiData/wikiNet.txt【wiki百科文件中每个概念的链接关
系】和./wikiData/wikiNetRedict.txt【wiki百科文件中概念的重定向关系】两个文件,最终输出wikiNetGraph文
件(名字可以任意自定)【得到的维基百科连接图文件】,该输出文件作为“维基百科链接抽取相关概念”的相关输入之一。
------------------------程序运行:
*******************************
****维基百科链接抽取相关概念****
*******************************
请输入维基百科重定向文件,维基百科链接图文件(input 0 to get default config):
> 0 #或者手动输入: ./wikiData/wikiNetRedirect.txt ./wikiData/wikiNetGraph (包含两行记录)
title and redirects loading ...
Wiki TitleRedirect file opened!
213366 basic titles loaded.
211572 redirect relationship loaded.
2505 redirect_failed inputs.
TitleRedirects file completed 100%
empty wikiGraph created!
begin to read wikiGraph from ./wikiData/wikinetGraph
open wikiGraph success.
ready to deal with 213366 elems wikiGraph
finish dealing with 213366 elems wikiGraph
open (../system/wordVector/)conceptWikiFile Waiting for writing...
#根据用户输入的概念,程序最终运行得到的概念相关概念向量的结果以追加的方式写入到文件 ./wordVector/conceptWikiFile中
wiKnows (q to quit) > 航空器
------------------------------------程序运行结果
终端输出的中间结果:与概念“航空器”相关的所有概念以及相关程度,该值是一个大于0小于1的值,且一般都远小于1
./wordVector/conceptWikiFile文件中追加的结果:从所有相关概念中选择相关度最高的前50个得到的结果
4、 *********************************
****广义后缀树构建概念间层次结构****
**********************************
请输入领域概念文件:./Data/concept(待建立层次关系的概念集合,该文件中每行数据为一个领域概念,此处的输入可以是复合概念学习的输出)
请输入存储文件名:./shuchu/test
press any key to continue!
------------------------------程序运行结果
./shuchu/test中的内容:
5、输入:./wordVector/conceptKeyFile(从自然文本中得到的概念集合的上下文词向量) ./wordVector/conceptWikiFile (通过
模块2从维基百科链接图得到的概念相关概念向量,其具体格式见相应的文件)
-----程序运行时,实际是没有输入选项的
6、训练文件: ./6/train
模板个数:根据训练文件可以自己调整
测试文件:./Data/test(格式跟训练文件一样)
7、训练文件: ./7/train
测试文件:./7/test
---------------程序运行结果
(64位)本体学习程序(ontoEnrich)系统使用说明文档的更多相关文章
- (64位)本体学习程序(ontoEnrich)系统配置说明文档
1系统环境 64位 Ubuntu 2 第三方依赖库配置 boost_1_44_0 #解压boost_1_44_0.tar.gz 到 /usr/local.如果出现权限问题,请用sudo执行该命令 ta ...
- (32位)本体学习程序(ontoEnrich)系统配置说明文档
1.系统环境 32位 Ubuntu 源代码中已经包含在32位下编译生成的.o文件,配置好依赖库(步骤2)后,参考步骤3则可重新link. link无误即可运行程序. 2.依赖库 2.1 boost_ ...
- 关于64位 windows&linux双系统引导问题
换了台本子win7 64位,抽空做个双系统,装了下linux. 遇到开机问题:进linux可以正常使用,进win7花屏死机,初步估计是grub(此时的boot sector位grub)的问题,启动器被 ...
- Print2flash在.NET(C#)64位中的使用,即文档在线预览
转:http://www.cnblogs.com/flowwind/p/3411106.html Print2flash在.NET(C#)中的使用,即文档在线预览 office文档(word,ex ...
- OWL库(叙词表构建本体OWL库)程序说明文档
本体程序(叙词表转化OWL)及相关数据 程序已有资源:
- (32位)本体学习程序(ontoEnrich)系统使用说明文档
系统运行:文件夹system下,可执行文件ontoEnrichment --------------------------------------------------------1.简单概念学习 ...
- 在PE32位下安装64位2003、2008系统
步骤 1.进PE(这里是老毛桃为例) 2.将系统(这里windows2008 r2 为例)拷到本地硬盘 3.将ios镜像出来 4.在PE桌面找到 “windows系统安装”,浏览 系统文件 \sou ...
- 树莓派3B+和3B 安装64位debian GUN/Linux系统
请直接参考如下博客: https://blog.csdn.net/u013451404/article/details/80710136 如果是3B的树莓派用户,只需要把第一个分区boot里的.dtb ...
- 【腾讯GAD暑期训练营游戏程序班】游戏中的特效系统作业说明文档
随机推荐
- mongodump备份小量分片集群数据
1.使用mongodump备份小量分片集群数据 如果一个分片集群的数据集比较小,可以直接使用mongodump连接到mongos实例进行数据备份.默认情况下,mongodump到非primary的节点 ...
- Kaggle: Google Analytics Customer Revenue Prediction EDA
前言 内容提要 本文为Kaggle竞赛 Google Analytics Customer Revenue Prediction 的探索性分析 题目要求根据历史顾客访问GStore的数据,预测其中部分 ...
- Accer 4752G添加固态硬盘 双系统
(此文一直在草稿箱里躺了一年,略作修改后发布~) 背景:电脑是2011年年末买的,用到现在也已经5年多了,好在没坏过什么硬件,有过2年疯狂打LOL的经历,之后电脑就打不动了,FPS始终上不去,启动游戏 ...
- Magento 总结
ZEND EAV 速度 作者:李淼链接:https://www.zhihu.com/question/20656910/answer/25793452来源:知乎著作权归作者所有.商业转载请联系作者获得 ...
- 【读书笔记】Linux内核设计与实现(第十八章)
18.1 准备开始 需要: 1.一个确定的bug.但是,大部分bug通常都不是行为可靠定义明确的. 2.一个藏匿bug的内核版本. 18.2 内核中的bug bug发作时的症状: 明白无误的错误代码( ...
- Daily Scrum 10.20
今天进行了团队第一次scrum meeting,在这次会议中,我们针对NABC模型以及开发前期的工作进行了探讨. 第一次会议 主要内容如下: 为了大家接下来几周的开发效率,需要共同商量团队的一些规则 ...
- sqlserver附加数据库时,无法打开物理文件 "xx.mdf"。操作系统错误 5:"5
sqlserver在附加数据库时,提示无法打开物理文件 "xx.mdf".操作系统错误 5:"5 此时可能你是用window验证方式登陆数据库的? 如果是这样,断开连接, ...
- servlet编码乱码问题
继承HttpServlet 重写doGet(HttpServletRequest req,HttpServletResponse resp),doPost()方法 post提交时: protected ...
- Software-Defined Networking:A Comprehensive Survey--Day4
V. ONGOING RESEARCH EFFORTS AND CHALLENGES 这一节主要介绍了对SDN潜力的发挥有着重要推动作用的一些研究成果. A. Switch Designs 目前Ope ...
- dotTrace 每行执行时间和执行次数
如果代码中出现效率问题,使用dotTrace来跟踪分析代码的效率问题还是很方便的.使用dotTrace不但可以看到每一个方法被调用的次数和总时间,而且可以引入源代码,查看源代码中每一行执行的次数和时间 ...