[发明专利]一种基于文法网络获取深度学习训练数据的方法

摘要

本发明公开了一种基于文法网络获取深度学习训练数据的方法，通过逆向文法网络与爬虫爬取数据生成大量语言数据，首先利用垂直领域网络爬虫抓取符合该需求的数据并保存，然后根据需求编写文法网络规则语句，通过文法网络规则语句可以获得语言数据和对应的标签数据，通过文法网络语句扩展或与爬取数据相结合的方式可以生成大量的语言数据，生成的语言数据和与其对应的标签数据可分别作为深度学习模型训练输入和输出。本发明通过逆向使用文法网络规则获得大量的、可以直接用于深度学习模型训练的数据，该语言数据不仅更为通顺，数量巨大，同时还可获得该语句的标签语句，非常适用于深度学习的模型训练。

主权项

一种基于文法网络获取深度学习训练数据的方法，其特征在于：其方法步骤如下：A、依靠网络爬虫定向爬取所需领域的基础数据，采用垂直领域分布式爬虫获取基础数据；B、对步骤A中的基础数据编写文法网络规则语句；C、根据爬取的基础数据与步骤B的文法网络规则语句相结合，并通过逆向文法网络程序生成所输出的语言数据；D、根据获取文法网络规则语句的子规则名称生成输出语句所对应的标签语句；E、通过文法网络规则语句与爬取的基础数据相结合的方式生成大量语言数据，步骤C所生成的语言数据和与其步骤D所对应的标签数据分别作为深度学习模型训练输入数据和输出数据。