[发明专利]表格问答的数据处理方法、电子设备及可读存储介质有效

专利信息
申请号: 202210062848.1 申请日: 2022-01-20
公开(公告)号: CN114090760B 公开(公告)日: 2022-04-26
发明(设计)人: 杨旭强;罗雪峰;蒋宗亨 申请(专利权)人: 阿里巴巴达摩院(杭州)科技有限公司
主分类号: G06F16/332 分类号: G06F16/332;G06F16/242;G06F16/22
代理公司: 北京同钧律师事务所 16037 代理人: 许怀远
地址: 310023 浙江省杭州市余杭*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 表格 问答 数据处理 方法 电子设备 可读 存储 介质
【说明书】:

本申请提供一种表格问答的数据处理方法、电子设备及可读存储介质,本申请的方法,将数据表格所包含的表格数据存储在ES的文档数据中,数据表格的一行数据对应于一个文档数据,文档数据的字段名根据对应列的数据类型和对应列在同数据类型的列中出现的次序确定,字段类型根据字段名称确定,不需要提前预置所有的字段名及其类型,即可实现动态数据表格的存储,支持大数据量表格数据的存储,支持数据表格结构的灵活变化。在表格问答时将输入的问题信息转化为结构化查询语句,将结构化查询语句转化为DSL语句,通过在ES中执行DSL语句,即可实现从文档数据中查询得到问题信息的答案信息,实现实时检索,保证表格问答的响应及时性。

技术领域

本申请涉及人工智能技术,尤其涉及一种表格问答的数据处理方法、电子设备及可读存储介质。

背景技术

表格问答是针对自然语言(Natural Language,简称NL)问题,基于自然语言技术根据数据表格的内容给出答案。在商品信息咨询等表格问答场景中,表格数据通常在十万甚至百万的级别,表格数据的数据量非常大。

目前,通过将表格数据存储在关系型数据库中,在管理表格数据和问答时进行检索均使用关系型数据库所存储的表格数据,对于复杂且数据量较大的场景,比如需要支持模糊查询(LIKE)的场景的,很难做到实时响应。为了提高问答响应的及时性,可以将表格数据存储在ElasticSearch(简称ES)中,基于ElasticSearch实现问答的检索。

但是在ElasticSearch中存表格数据时,需要在ElasticSearch中预先设置所有数据表格中每一列在文档(document)中的字段名和字段类型,数据表格增加新的列时,须在ES中指定新增列对应的字段名和字段类型,不利于数据表格的动态维护;随着数据表格中列的数量的增加,ElasticSearch的document中字段的数量不断增加,当存储大数据量的表格数据时,基于ElasticSearch的检索性能下降,导致表格问答的响应时间长、及时性差。

发明内容

本申请提供一种表格问答的数据处理方法、电子设备及可读存储介质。

一方面,本申请提供一种表格问答的数据处理方法,包括:

接收输入的问题信息;

根据当前场景下所有数据表格的结构信息,将所述问题信息转化为结构化查询语句,所述结构化查询语句用于从关系型数据库中与所述数据表格对应的数据库表中查询得到所述问题信息的答案信息,所述数据表格所包含的列与对应的数据库表所包含的字段一一对应;

根据每一所述数据表格所包含的列与ElasticSearch中存储的文档数据的字段的第一映射关系,将所述结构化查询语句转化为DSL语句,其中,所述文档数据包括所有数据表格中所包含的数据,每一所述数据表格中的一行数据对应于所述文档数据中的一个文档数据,所述文档数据包括第一字段和数据字段,所述第一字段用于存储所述数据表格的标识,所述数据字段与所述数据表格的列一一对应,每一所述数据字段的字段名根据所述数据表格中对应列的数据类型和所述对应列在同数据类型的列中出现的次序确定;

通过在ElasticSearch中执行所述DSL语句,从所述文档数据中查询得到所述问题信息的答案信息;

输出所述答案信息。

另一方面,本申请提供一种电子设备,包括:

处理器,以及与所述处理器通信连接的存储器;

所述存储器存储计算机执行指令;

所述处理器执行所述存储器存储的计算机执行指令,以实现上述所述的表格问答的数据处理方法。

另一方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现上述所述的表格问答的数据处理方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴达摩院(杭州)科技有限公司,未经阿里巴巴达摩院(杭州)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210062848.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top