[发明专利]面向电子图书的语义空间表示方法及系统在审
申请号: | 201310634080.1 | 申请日: | 2013-11-29 |
公开(公告)号: | CN103593339A | 公开(公告)日: | 2014-02-19 |
发明(设计)人: | 张海军;黄晓辉;叶允明;张晓利 | 申请(专利权)人: | 哈尔滨工业大学深圳研究生院 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F17/30 |
代理公司: | 深圳市科吉华烽知识产权事务所(普通合伙) 44248 | 代理人: | 于标 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面向 电子图书 语义 空间 表示 方法 系统 | ||
1.一种面向电子图书的语义空间表示方法,其特征在于,包括如下步骤:
A.文档分割:将电子图书按语义结构分成若干个语义单元;
B.权重计算:首先构建全文的词汇表,从而电子图书的每一个语义单元用一个词频向量表示,整个电子图书用一个词频矩阵来表示;然后根据权重计算方法针对每个词计算其权重;
C.关系图构建:根据电子图书的词频矩阵和词的权重构建一个词邻接关系图,词邻接关系图用一个邻接矩阵表示,矩阵中的每个元素值表示词邻接关系图中边的权重;
D.多维压缩:利用多维主成分分析将词邻接关系图映射到一个低维语义空间上,用该低维语义空间模型表示电子图书。
2.根据权利要求1所述的语义空间表示方法,其特征在于,在所述文档分割步骤中,将电子图书按照自然段落划分为不同的语义单元,划分过程如下:
(1).把全文按自然段落划分,每一个段落成为一个单独的语义单元;
(2).如果某一个自然段落的词数目少于一个给定阀值,则把该段落合并到下个一个语义单元中。
3.根据权利要求1所述的语义空间表示方法,其特征在于,在所述权重计算步骤中,构建词汇表的方法步骤如下:
(1).去停词:将文档中没有具体意义的词去掉;
(2).提取词干或提取词组:在英文中,需要对词做词干;中文需要提取文章中的词语;
(3).计算每个词的tfidf值:计算公式如下,其中,是第u个词在整个文档中的频率,idf表示逆文档频率,n是文档的数目;
(4).根据tfidf值选择前m个词作为文档集的词汇表。
4.根据权利要求1所述的语义空间表示方法,其特征在于,在所述关系图构建步骤中,为了表示词空间分布,对每一个文档构建一个词关系邻接图,词汇表中每一个词作为一个顶点;在同一个语义单元中共同出现的词之间有一条边,这样,文档Gi可以用一个m×m的矩阵表示其邻接关系图,图中边的权重计算如下:
其中,||.||2为Frobenius范数,Fu,v为在文档i词u,词v共同在一段中发生的词频,DFu,v为词u,词v共同出的文档数,为词u在所有文档中的频率之和,为第u个词的文档频率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学深圳研究生院,未经哈尔滨工业大学深圳研究生院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310634080.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:细胞培养物得到的α1 蛋白酶抑制剂的纯化
- 下一篇:山楂曲奇饼干预拌粉