[发明专利]一种基于Hadoop集群架构的智慧城市大数据处理系统在审
| 申请号： | 201910827032.1 | 申请日： | 2019-09-03 |
| 公开（公告）号： | CN110532283A | 公开（公告）日： | 2019-12-03 |
| 发明（设计）人： | 张露 | 申请（专利权）人： | 衢州学院 |
| 主分类号： | G06F16/242 | 分类号： | G06F16/242;G06F16/26;G06F16/28;G06F16/11;G06F16/182 |
| 代理公司： | 11573 北京华智则铭知识产权代理有限公司 | 代理人： | 孟杰<国际申请>=<国际公布>=<进入国 |
| 地址： | 324000 *** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明属于资源信息处理技术领域，公开了一种基于Hadoop集群架构的智慧城市大数据处理系统，采集层用于采集数据；共享层用于对采集的数据进行聚集处理，实现对多种数据源的数据进行统一载入、分类、处理以及存储；应用层用于基于功能不同采用不同算法建模并利用移动设备、平板、电脑或其他终端设备呈现各个功能模块。本发明可预测各区域人口流动，探讨合理分配社会资源和可持续发展战略，为政府决策提供数据支撑，具有较好的执行效率和可扩展性；本发明采用SPARK开源并行架构设计，能更好地适用于数据挖掘与机器学习，运行速度快捷。 | ||
| 搜索关键词： | 数据处理系统 资源信息处理 并行架构 采集数据 机器学习 可扩展性 区域人口 社会资源 数据挖掘 数据支撑 移动设备 政府决策 智慧城市 终端设备 采集层 共享层 可预测 数据源 应用层 建模 算法 存储 架构 载入 采集 分类 分配 流动 电脑 统一 | ||
【主权项】：
1.一种基于Hadoop集群架构的智慧城市大数据处理系统，其特征在于，所述基于Hadoop集群架构的智慧城市大数据处理系统包括：/n采集层：与共享层连接，用于采集数据；/n共享层：与采集层、应用层连接，用于对采集的数据进行聚集处理，并对多种数据源的数据进行统一载入、分类、处理以及存储；/n应用层：与共享层连接，建模后利用移动设备、平板、电脑或终端设备呈现各个功能模块。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于衢州学院，未经衢州学院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910827032.1/，转载请声明来源钻瓜专利网。
- 同类专利
- 基于BS架构的环保舆情系统-201910853147.8
- 常俊龙 - 紫光云技术有限公司
- 2019-09-10 - 2020-02-14 - G06F16/242
- 本发明提供了一种基于BS架构的环保舆情系统，包括舆情地图子模块、舆情管理子模块，所述舆情地图子模块用于对不同区域的环保舆情数据进行统计及筛选；所述舆情管理子模块用于为环保舆情系统用户提供全文模糊检索与精确检索功能，从舆情地图子模块中的舆情信息中搜索出输入关键信息的相关环保舆情。本发明实现对环保舆情信息的数字化管理，为环保监管人员开展数字化、信息化办公提供了技术性平台，在环保舆情系统的支撑下可以从海量舆情信息中爬取、分析与挖掘出有价值信息与潜在规律，助力环保监管工作的开展，提高环保监管的成效与效率，推动环境保护工作的信息化建设。
- SQL处理方法及装置-201910863939.3
- 宋城;孔万群 - 连连银通电子支付有限公司
- 2019-09-12 - 2020-02-14 - G06F16/242
- 本发明提供的SQL处理方法及装置，获取SQL文本中的至少一条SQL语句，针对每条SQL语句，提取SQL语句的特征信息，依据SQL语句的特征信息，判断每条SQL语句是否符合预设的审核标准，若所有的SQL语句都符合审核标准，则在测试环境中，判断每条SQL语句的语法是否正确，若所有的SQL语句的语法都正确，则在数据库中执行SQL文本。本发明提供的方法，通过预设的审核标准，对SQL语句进行审核，并且，在确定SQL语句符合审核标准后，在测试环境中对语法的准确性进行进一步的判断，从而提高了审核SQL语句的规范性的正确率，最终提高了数据库变更的准确性。
- 一种基于关系数据库自动构建RDF的方法-201911006404.0
- 杨天社;樊恒海;徐一鸣;刘帆;武帅;吴冠;冯军华;邢楠;钟文冬;杨旭;高波;傅娜;杨怀军 - 中国西安卫星测控中心;复旦大学
- 2019-10-22 - 2020-02-14 - G06F16/242
- 本发明提供一种基于关系数据库自动构建RDF的方法，包含步骤：S1、任意选取若干个关系型数据库，提取属性间的数据库模式特征值、数据库内容实例特征值；S2、选取部分关系型数据库作为训练数据库,剩余的作为测试数据库；通过机器学习训练所述训练数据库属性间的数据库模式特征值、数据库内容实例特征值，生成实体关系发现模型；通过实体关系发现模型得到测试数据库包含的属性间引用关系；S3、为所述测试数据库包含的属性间引用关系生成对应的数据库关系图；S4、根据关系型数据库的RDF转换规则，转换所述测试数据库包含的引用关系为对应的RDF语句。本发明能准确的发现关系型数据库中各属性间的潜在关系。
- 一种服务请求方法、装置、服务器及存储介质-201911052709.5
- 梁子民;张延堂;赵焕芳;程呈;黄勤 - 中国农业银行股份有限公司
- 2019-10-31 - 2020-02-14 - G06F16/242
- 本发明提供的一种服务请求方法、装置、服务器及存储介质，应用于基于目标架构开发的应用，目标架构由服务层和组件层组成，通过接收服务请求，确定服务请求所请求的服务，确定服务调用的至少一个组件，至少一个组件包括数据库组件和/或业务功能组件，数据库组件用于调用数据库，业务功能组件用于实现服务的业务逻辑功能，最后通过调用至少一个组件经过计算和/或操作数据库生成服务请求的请求结果，当请求结果包括至少一条数据信息时，自动构建并返回承载有请求结果的对象。本发明提供的技术方案，不仅能够大幅度降低开发要求，还能够减少开发代码量，进而提高开发效率。
- 一种自定义选择框的数据处理方法及系统-201710153422.6
- 何龙浩;危明武;钟娜;刘祥涛;赵彦晖;孙淏添 - 国信电子票据平台信息服务有限公司
- 2017-03-15 - 2020-02-14 - G06F16/242
- 本发明实施例公开了一种自定义选择框的数据处理方法及系统，用于降低开发应用程序的时间成本和经济成本。本发明实施例方法包括：接收输入的选择框的标识及数据来源；根据数据来源，获取选择框的字段信息；接收输入的字段信息的属性；将选择框的标识、选择框的字段信息及字段信息的属性关联存储在数据库中；当触发选择框加载请求时，接收输入的选择框的标识及选择框控件，根据选择框的标识从数据库中获取选择框的字段信息及字段信息的属性；根据选择框的字段信息获取字段信息在数据来源中对应的数据取值，并将选择框的字段信息及数据取值按照字段信息的属性显示在选择框控件中。本发明还提供了相关系统，可降低开发应用程序的时间成本和经济成本。
- 基于搜索的数据的检测、链接和获取的方法和系统-201610051916.9
- M.雷斯-加塞姆;R.N.格罗塞特 - 国际商业机器公司
- 2016-01-26 - 2020-02-14 - G06F16/242
- 计算装置可以接收自然语言查询。计算装置可以基于该自然语言查询来确定搜索条件集合。计算装置可以至少部分地基于在搜索条件集合和多个数据集合的属性之间的匹配，从多个数据集合中确定与该自然语言查询相关的两个或更多数据集合。计算装置可以联合两个或更多数据集合，包括联合两个或更多数据集合的一个或多个行以及一个或多个列以产生联合数据集合。计算装置可以输出联合数据集合的表示。
- 一种数据宽表的确定方法及装置-201910849187.5
- 张宾;武斌;于晓昆;高亚斌;姚悦;李海茹 - 国网电子商务有限公司;英大商务服务有限公司
- 2019-09-09 - 2020-02-11 - G06F16/242
- 本申请公开了数据宽表的确定方法及装置，涉及数据处理技术领域，用于提高电商服务器的查询效率。应用于电商服务器，所述电商服务器包括多张单表；所述多张单表中每张单表包括至少一种商品的数据信息；所述方法包括：根据用户的检索数据信息确定所述数据宽表的字段；其中，所述检索数据信息包括商品名称，所述字段与所述商品名称之间具有对应关系；根据所述字段查询所述每张单表中与所述字段对应的数据信息；根据所述字段及所述字段对应的数据信息，确定所述数据宽表。
- 目标对象的标识信息确定方法、装置、设备及存储介质-201910849794.1
- 江小天;卢俊之;杨璧嘉 - 腾讯大地通途(北京)科技有限公司;腾讯科技(深圳)有限公司
- 2019-09-09 - 2020-02-11 - G06F16/242
- 本申请提供一种目标对象的标识信息确定方法、装置、设备及存储介质，该方法包括：基于目标对象的自然语言处理结果，确定目标对象的召回信息集；获取每个召回信息对应的关联属性特征；将每个召回信息对应的关联属性特征输入信息匹配模型进行信息匹配处理，得到每个召回信息与目标对象的第一匹配结果；将每个召回信息与目标对象分别按照预设自然语言匹配策略以及预设字符串匹配策略进行匹配，得到每个召回信息与目标对象的第二、第三匹配结果；基于第一、第二和第三匹配结果，确定目标对象的候选召回信息；将候选召回信息对应的标识信息确定为目标对象的标识信息。本申请能够提高目标对象的标识信息确定的准确率，降低错判和漏判的概率。
- 一种基于JDBC的数据库直查方法、装置及系统-201910864709.9
- 王纯斌;赖文文;其他发明人请求不公开姓名 - 成都四方伟业软件股份有限公司
- 2019-09-12 - 2020-02-11 - G06F16/242
- 本发明公开了一种基于JDBC的数据库直查方法、装置及系统，首先用户通过平台在数据集中通过数据处理节点操作数据源。系统会根据用户配置的数据源及处理节点动态生成适配各个关系型数据库的sql语句然后系统采用jdbc形式将sql提交到数据库，由数据库解析，处理并返回数据，中间过程所产生的内存消耗远远低于目前内存计算型查询引擎，且效率往往是内存计算型查询引擎的数倍。解决了Presto，Impala可高效对Hive，HBase等大数据产品进行快速检索，但是对传统关系型数据库效率低下的问题。
- 一种计算公式处理方法及装置-201810848137.0
- 张鹏 - 北京国双科技有限公司
- 2018-07-27 - 2020-02-07 - G06F16/242
- 本发明实施例提供了一种计算公式处理方法及装置。通过本发明，当用户在系统中配置该自定义指标的计算公式之后，无需开发人员在多个预设数据引擎中人工确定存储有该基础指标的目标数据引擎，也无需根据该基础指标和该计算表达式人工编写用于在目标数据引擎中查询该自定义指标的查询语句，进而也无需人工存储该查询语句。本发明可以在多个预设数据引擎中自动确定存储有该基础指标的目标数据引擎，再自动根据该基础指标和该计算表达式生成用于在目标数据引擎中查询该自定义指标的查询语句；并自动存储该自定义指标、目标数据引擎的引擎标识与该查询语句之间的对应关系，全程无需开发人员人工参与，从而可以减少开发人员的工作量，以节省人工成本。
- 火电厂海量实时生成数据的处理方法及装置-201910984802.3
- 白帆;蒋蓬勃;李友志;王继强;苏涛;卢意;苏京彬;宋峰 - 华电莱州发电有限公司;华电国际电力股份有限公司技术服务分公司
- 2019-10-16 - 2020-02-07 - G06F16/242
- 本发明属于电厂运行数据处理领域，尤其涉及一种火电厂海量实时生成数据的处理方法及装置。在基于键值数据模型火电厂生产过程中产生的海量时间序列数据进行建模和存储的基础上，将时间序列数据按照时间维度进行切片存放至HBase中，同时融入了Spark SQL执行过程对海量时间序列数据进行查询。Spark SQL是spark用来处理结构化数据的一个模块，它提供了一个编程抽象叫做DataFrame并且作为分布式SQL查询引擎的作用。它通过将数据查询转换成Spark RDD，然后提交到集群执行，具有极高的数据查询效率。
- 一种数据处理的方法及装置-201610135963.1
- 邬金国 - 宁波金唐软件有限公司
- 2016-03-10 - 2020-02-07 - G06F16/242
- 本发明适用于医疗领域，提供了一种数据处理的方法及装置，所述方法包括如下步骤：接收客户端发送的条件入参参数以及结果出参参数，所述条件入参参数携带有条件数据标识信息；根据所述条件数据标识信息，从预设的标准参数集合中获取与所述条件入参参数对应的条件出参参数；判断所述条件出参参数与所述结果出参参数是否一致；当所述条件出参参数与所述结果出参参数一致时，从预设的条件数据集合中获取与所述结果出参参数匹配的目标条件数据并输出。在本发明实施例中，通过接收条件入参参数以及结果出参参数，就可以获取到与结果出参对应的条件数据，实现了数据的高效便捷的复用，同时减少了操作步骤，提高了使用效率。
- 一种在业务管理系统中对数据进行自定义导出的方法-201910822667.2
- 熊维军;陈欢 - 成都市知用科技有限公司
- 2019-09-02 - 2020-02-04 - G06F16/242
- 本发明公开了一种在业务管理系统中对数据进行自定义导出的方法，第一阶段,a.客户端传递完整类名至服务端；b.服务端进行动态加载，并通过反射方式获取属性信息列表；c.通过对字段列表获取注解和扩展信息；d.生成用户交互界面；第二阶段a.用户在交互界面上进行选取；b.服务端进行SQL的拼接；c.将查询出的结果进行导出。与现有技术相比，本发明的优点在于：本发明将导出功能模块进行抽取，与具体业务系统进行解耦，并实现用户可视化、可理解化的字段选取、自定义查询条件、排序方式功能。节省了大量重复的工作量，提高了工作效率，降低了开发成本，并提升了用户感知和满意度，更灵活得满足用户各方面的查询需求。
- 用于生成索引的方法、装置、计算设备以及介质-201911010711.6
- 胡嘉裕;林欢哲;韩涛 - 中国工商银行股份有限公司
- 2019-10-22 - 2020-02-04 - G06F16/242
- 本公开提供了一种用于生成索引的方法，包括：获取目标查询语句，处理目标查询语句，得到多个目标字段，确定多个目标字段中每个目标字段的目标权重，其中，目标权重表征目标字段在与目标查询语句对应的数据表中的过滤能力，过滤能力与目标字段在数据表中具有的字段值的个数相关联，基于多个目标字段中每个目标字段的目标权重，对多个目标字段进行排序处理得到目标索引结果，关联目标索引结果和目标查询语句。本公开还提供了一种用于生成索引的装置、计算设备以及计算机可读存储介质。
- 险企通道的管理方法及装置-201911042667.7
- 范瑞;何聪 - 海腾保险代理有限公司
- 2019-10-29 - 2020-02-04 - G06F16/242
- 本申请公开了一种险企通道的管理方法。该方法包括：构建条件选项和目标选项的映射关系，其中，条件选项至少包括城市选项，目标选项至少包括险企通道选项；接收第一用户在第一终端配置的条件信息，并在所述第一终端输出与所述条件信息具有映射关系的目标信息。本申请解决了由于管理人员无法根据实际情况对险企通道进行任意选择的管理造成的不易管理的技术问题。
- 一种数据处理方法、装置、电子设备及存储介质-201811520657.5
- 张奇;王纯斌;李森林;王诗强 - 成都四方伟业软件股份有限公司
- 2018-12-12 - 2020-02-04 - G06F16/242
- 本申请提供一种数据处理方法、装置、电子设备及存储介质，用于解决现有技术中传统的关系型数据库的结构化查询语言中的函数无法在非关系型数据库里使用的问题。该数据处理方法，应用于电子设备，包括：接收用户终端发送的数据处理语句，数据处理语句包括预设函数；对数据处理语句进行解析，获得预设函数；根据预设函数与位置的对应关系，查找到与预设函数对应的功能实现函数的位置，功能实现函数用于实现预设函数的功能。
- 一种面向时序大数据的查询事件识别与检测方法及系统-201610292213.5
- 钟将;妙晓龙 - 重庆大学
- 2016-05-05 - 2020-02-04 - G06F16/242
- 本发明公开了一种面向时序大数据的查询事件识别与检测方法，首先构建领域本体库和定义原子特征算子集合；然后获取用户需求并根据语义得到推理结果，并与时序数据集获得关联数据集；基于大数据数据特征计算平台处理关联数据集得到时序数据特征集；最后根据时序数据特征集构造高级查询事件反馈识别检测结果。本发明提供的面向时序大数据的查询事件识别与检测方法，针对大数据查询中，用户自然语言查询请求无法直接被计算机识别这一难题，利用领域本体技术构建为大数据高级查询事件，解决海量数据与传统数据库之间的鸿沟；解决非专业人士与复杂数据查询系统之间的鸿沟；减少传统数据库系统开发人员的工作压力，同时，让数据查询系统变得更加灵活方便。
- 基于人工智能的搜索方法和装置-201610971877.4
- 徐新超;王丽杰;朱曼瑜;张军 - 北京百度网讯科技有限公司
- 2016-10-31 - 2020-02-04 - G06F16/242
- 本发明公开了一种基于人工智能的搜索方法和装置，其中，方法包括以下步骤：接收输入的查询语句；基于预先训练的冗余词识别模型确定查询语句中的冗余词；从查询语句中删除冗余词，以生成新的查询语句；根据新的查询语句进行搜索。该方法能够有效地对查询语句进行纠错，去掉冗余词，从而获取更准确的搜索结果，满足用户需求。
- 基于表格的检索方法和装置-201810717340.4
- 陈林;李昱昕;吴伟佳;卜建辉 - 百度在线网络技术(北京)有限公司
- 2018-07-03 - 2020-01-31 - G06F16/242
- 本发明实施例提出一种基于表格的检索方法和装置。其中该方法包括：根据初始问题对应的槽位进行检索，得到检索结果；判断检索结果的数量是否超出阈值；如果检索结果的数量超过设定阈值，则进行至少一次交互检索步骤；其中，所述交互检索步骤包括：根据槽位排序信息确定未使用槽位，利用所述未使用槽位生成询问语句，根据所述询问语句收集交互问题，将交互问题对应的槽位和已使用槽位结合再次进行检索，得到检索结果。本发明实施例能够根据检索结果来决定是否进行交互检索，不需要提前固定槽位收集流程，根据槽位排序信息确定未使用槽位，从而使得基于表格进行检索时的多轮对话显得更智能和灵活，有利于提升用户问题解决率。
- 一种数据可视化方法及装置-201810805456.3
- 杜伟;陈昌敏;李巍 - 武汉烽火众智智慧之星科技有限公司
- 2018-07-20 - 2020-01-31 - G06F16/242
- 本发明提供了一种数据可视化方法及装置，方法包括：获得多个图表，从所获得的多个图表中确定各个待组合图表，对各个待组合图表进行组合显示；其中，通过以下方式获得每一图表：获得界面打开指令，显示数据库连接界面，获得用户通过数据库连接界面输入的待连接数据库的连接信息；利用连接信息，与待连接数据库建立连接；在成功建立连接后，显示数据配置界面，获得用户通过数据配置界面输入的数据表信息和图表配置信息，基于数据表信息生成查询语句；并利用查询语句，得到待显示数据；对图表配置信息和待显示数据进行渲染，得到包含待显示数据的图表。应用本发明实施例，简化了操作过程，提高了通用性。
- 可视化图表查询方法、装置、设备及计算机存储介质-201910975679.9
- 黄山;李为;尹强;王和平;刘有;杨峙岳;邸帅;卢道和 - 深圳前海微众银行股份有限公司
- 2019-10-14 - 2020-01-31 - G06F16/242
- 本发明涉及金融科技(Fintech)技术领域，并公开了一种可视化图表查询方法，该方法包括：系统获取第三方应用发送的唯一标识，并在系统的数据库中获取唯一标识对应的目标参数；根据目标参数确定系统中的仪表盘和仪表盘中的多个待更新图表，并根据目标参数对各待更新图表进行参数更新，以获取多个更新图表；获取仪表盘中未进行参数更新的初级图表，并在各初级图表中确定与各更新图表关联的关联图表，根据预设的联动方式对各关联图表进行参数更新；将各更新图表和已完成参数更新的各关联图表放置在系统中的图表展示页面进行展示。本发明还公开了一种可视化图表查询装置、设备和一种计算机存储介质。本发明提高了对系统中图表查询的效率。
- 关联ID查询方法、装置、电子设备和存储介质-201910987223.4
- 邵真奇;张波 - 恩亿科(北京)数据科技有限公司
- 2019-10-16 - 2020-01-31 - G06F16/242
- 本发明实施例提供了一种关联ID查询方法、装置、电子设备和存储介质，涉及数据处理技术领域。本发明实施例提供的关联ID查询方法、装置、电子设备和存储介质，通过在数据库中存储相互关联的各原始ID，以及相互关联的各原始ID与同一统一标识信息的关联关系，进而，在获取待查询原始ID后，即可根据待查询原始ID在数据库中查找与待查询原始ID关联的统一标识信息，根据统一标识信息，从数据库中查找与统一标识信息关联的所有目标原始ID，将查找出的所有目标原始ID作为待查询原始ID的关联ID，实现了对所有关联ID的便捷查询。
- 一种信息扩展方法及装置-201610214393.5
- 邢宁;刘明荣;许静芳;常晓夫 - 北京搜狗信息服务有限公司
- 2016-04-07 - 2020-01-31 - G06F16/242
- 本发明公开了一种信息扩展方法及装置，包括：接收用户输入的第一搜索词；查询词向量库，获取所述第一搜索词的第一词向量；获取至少一个第二搜索词，所述第二搜索词是所述词向量库中距离上靠近所述第一词向量的第二词向量对应的历史搜索词；所述词向量库中包括历史搜索词与所述历史搜索词对应的词向量；其中，所述词向量是依据至少一组包括所述历史搜索词的搜索序列生成的；所述搜索序列为已发生的一个用户搜索行为对应的一组历史搜索词。本发明可以更加全面且准确的扩展出表达用户搜索意图的搜索词。
- 访问异构数据库的方法、装置、设备、插件及存储介质-201810776045.6
- 刘素京 - 中兴通讯股份有限公司
- 2018-07-16 - 2020-01-24 - G06F16/242
- 本申请实施例公开一种分布式数据库访问异构数据库的方法、装置、设备、异构查询插件以及计算机可读存储介质，该方法包括：修改数据存储节点接收到的包含分布式数据库的提示信息的查询语句；将修改后的查询语句转发给异构数据库，以使得所述异构数据库执行所述修改后的查询语句。本申请实施例实现分布式数据库对异构数据库表的操作，支持本地表和异构数据库表的联合查询，具有很好的可扩展性和可操作性。
- 数据处理方法、装置、电子设备及存储介质-201910959934.0
- 李博洋;杨波 - 北京字节跳动网络技术有限公司
- 2019-10-10 - 2020-01-24 - G06F16/242
- 本公开的实施例提供了一种数据处理方法、装置、电子设备及存储介质。该方法包括：响应于数据库的数据变更，通过所述数据库发出增量信息；通过采集组件接收所述增量信息并且进行解析，得到解析信息；通过第一数据节点接收所述解析信息并且进行处理，得到变更后的数据。本公开的数据处理方法降低了对数据库DB的查询依赖。另外，通过消息通知方式降低了数据的同步延迟，获得了更好的数据一致性和时效性。
- 结构化查询语句自动优化方法、装置、介质及电子设备-201910853947.X
- 胡鹏强 - 平安普惠企业管理有限公司
- 2019-09-10 - 2020-01-21 - G06F16/242
- 本申请是关于一种结构化查询语句自动优化方法、装置、介质及电子设备，属于代码优化技术领域，该方法包括：扫描目标文件中的结构化查询语句，得到所述目标文件中的可优化结构化查询语句；判断所述可优化结构化查询语句是否满足对应的预设优化条件；当所述可优化结构化查询语句满足对应的预设优化条件时，获取所述可优化结构化查询语句对应的预设优化模板；根据所述预设优化模板及所述可优化结构化查询语句，获取所述可优化结构化查询语句的优化后结构化查询语句；用所述优化后结构化查询语句替换所述可优化结构化查询语句。本申请在结构化查询语句的满足优化条件时，通过优化模板实现结构化查询语句的高效、准确优化。
- 一种口径系统建立方法、装置、设备及计算机存储介质-201910895112.0
- 黄沙沙 - 黄沙沙
- 2019-09-20 - 2020-01-21 - G06F16/242
- 本发明提供一种口径系统建立方法、装置、设备及计算机存储介质，所述方法具体包括：本发明实施例通过建立关键字表；基于所述关键字表的关键字，根据预设规则选取至少一个所述关键字作为维度关键字；基于所述关键字表的关键字，根据预设规则选取至少一个所述关键字作为指标关键字；根据所述维度关键字和所述指标关键字自动生成维度‑指标组合对应的查询指令，并利用所述维度‑指标组合及其对应的查询指令建立口径系统。通过这种方式不需要认为地设定维度‑指标，从而能够自动生成维度‑指标组合对应的查询指令的口径，建立口径系统，减少了用户的工作量，提高对大数据的处理效率。
- 一种多源异构数据处理方法、装置和存储介质-201910903339.5
- 郑作亚;仇林遥;陈旭;呙维;贾向阳;潘一凡;柳罡;李黔湘;鲁续坤 - 中国电子科技集团公司电子科学研究院;武汉大学
- 2019-09-24 - 2020-01-21 - G06F16/242
- 本发明提出了一种多源异构数据处理方法、装置和存储介质，用以提供一种实现多源数据统一接入和管理。本发明实施例提供一种多源异构数据处理方法，包括：接收数据源系统上传的结构化数据，所述结构化数据为利用预先定义的可扩展标记语言XML模板对元数据进行处理后得到的；利用XSL文本转换器将所述结构化数据转换为键值对K‑V类型数据，所述XSL文本转换器为根据所述XML模板生成的，所述K‑V类型数据中包含有混合字段，所述混合字段为利用需要被搜索的字段拼接得到的；从所述K‑V类型数据中抽取数据值存储至地理空间关系型数据库中。
- 一种Elasticsearch数据查询方法及系统-201910982405.2
- 王帝;王光武;饶鑫淞 - 北京搜狐新媒体信息技术有限公司
- 2019-10-15 - 2020-01-21 - G06F16/242
- 本发明公开了一种Elasticsearch数据查询方法及系统，方法包括：在代码开源网站上获取Elasticsearch‑SQL插件的源码，对Elasticsearch‑SQL插件的源码进行编辑，以使编辑后的源码支持更多的SQL查询功能。本发明通过进一步对Elasticsearch‑SQL插件的源码进行编辑，能够通过SQL更加完善的进行Elasticsearch数据查询，提升了用户体验。
- 项目推荐装置以及项目推荐方法-201510724756.5
- 浜田伸一郎 - 株式会社东芝;东芝解决方案株式会社
- 2015-10-29 - 2020-01-21 - G06F16/242
- 一种项目推荐装置以及项目推荐方法。实施方式涉及项目推荐装置以及项目推荐方法。实施方式的项目推荐装置具备上下文信息生成部以及排序部。上下文信息生成部对所输入的自然语言请求进行语义解析，生成包括用户的意图在内的上下文信息并输出。排序部基于上述上下文信息、对用户的属性进行表示的用户信息、以及对用户的项目利用履历进行表示的履历信息，进行对于向用户提示的项目的候选的排序。
- 专利分类
