[发明专利]一种语音大数据存储调用方法在审
申请号: | 201910585874.0 | 申请日: | 2019-07-01 |
公开(公告)号: | CN110278282A | 公开(公告)日: | 2019-09-24 |
发明(设计)人: | 游萌;何云鹏;高君效;许兵 | 申请(专利权)人: | 成都启英泰伦科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;H04L29/06;G06F16/172 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 610041 四川省成都市高新区*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 调用 焦点数据 大数据 子文件 存储 访问频率 语音 分布式存储 软件可靠性 存储地址 存储区域 经济成本 连续拼接 时间开销 数据迭代 网络空间 应用场景 硬件条件 语音数据 交互性 更新 改进 统计 维护 | ||
一种语音大数据存储调用方法,包括如下步骤:统计语音数据的访问频率,对访问频率高的焦点数据X做如下处理:构成焦点数据X的分散子文件X1,X2,X3......的存储地址连续拼接,并形成更大的分散子文件;确保减少分散子文件的存储区域。本发明针对语音大数据在分布式存储下的特点进行改进,对于频繁使用的焦点数据调用方法进行特殊处理,实现了数据的合理存储和快速调用,在不需要提高现有网络空间大小及硬件条件的情况下提升了性能,在经济成本,软件可靠性,维护成本,整体交互性等方面具有一定优势;在实际应用场景中也取得了较好的实践效果,减少了时间开销并提高了数据迭代更新的速度。
技术领域
本发明属于语音大数据处理领域,具体涉及一种语音大数据存储调用方法。
背景技术
一般的分布式存储在性能方面普遍被人诟病,而且安全性和可维护程度也很低,必须有专业的系统管理员维护值守,并且分布式数据存储在可靠性方面也存在技术难度,依赖性等也存在严重挑战,专业的管理软件和高昂的造价成本等都限制了分布式存储更广泛的运用。
发明内容
为克服现有技术存在的缺陷,本发明公开了一种语音大数据存储调用方法。
本发明所述语音大数据存储调用方法,包括如下步骤:
统计语音数据的访问频率,对访问频率高的焦点数据X做如下处理:
构成焦点数据X的分散子文件X1,X2,X3......的存储地址连续拼接,并形成更大的分散子文件;确保减少分散子文件的存储区域。
优选的,对构成数据每一分散子文件的访问都视为对该数据的访问。
优选的,统计频率是根据统计时前推一定时间段内访问次数的统计。
优选的, 所述处理还包括:检测到发现焦点数据X的任一分散子文件正在被访问时,启动其他分散子文件的存储节点进入数据读取状态。
优选的, 所述处理还包括:检测到发现焦点数据X的任一分散子文件正在被访问时, 启动一个空闲复制程序复制其他分散子文件,并向各个闲置节点分发复制完成的数据包;数据包分发到达时间发生在非数据访问的高峰时间。
优选的,所述处理还包括, 检测到发现焦点数据X的任一分散子文件正在被访问时, 发出请求SSD做缓存的数据存储请求。
优选的, 分散子文件组合成原始数据的过程中进行加密编码处理,并在头文件中添加安全认证证书链接,同时在服务器中添加所述链接对应的证书。
本发明针对语音大数据在分布式存储下的特点进行改进,对于频繁使用的焦点数据调用方法进行特殊处理,实现了数据的合理存储和快速调用,在不需要提高现有网络空间大小及硬件条件的情况下提升了性能,在经济成本,软件可靠性,维护成本,整体交互性等方面具有一定优势;在实际应用场景中也取得了较好的实践效果,减少了时间开销并提高了数据迭代更新的速度。
附图说明
图1为本发明所述数据存储调整前的一种具体实施方式示意图,
图2为本发明所述数据存储调整后的一种具体实施方式示意图,图中附图标记X1、X2、X3、 Y1、Y2、Y3表示不同的分散子文件,为Z1、Z2、Z3、Z4、Z5表示不同的存储区域,D1、D2、D3、D4、D5表示不同的节点。
具体实施方式
下面对本发明的具体实施方式作进一步的详细说明。
本发明主要针对大数据在分布式存储下的状态, 分布式存储系统是将数据分散存储在多台独立的设备上。分布式网络存储系统采用可扩展的系统结构,将数据分散在多个节点上.进而解决了元数据服务器的性能瓶颈等问题。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都启英泰伦科技有限公司,未经成都启英泰伦科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910585874.0/2.html,转载请声明来源钻瓜专利网。