[发明专利]一种基于celery的分布式机器学习调参系统在审
申请号: | 201910400730.3 | 申请日: | 2019-05-15 |
公开(公告)号: | CN110110863A | 公开(公告)日: | 2019-08-09 |
发明(设计)人: | 刘宇为;夏凡;饶雪云 | 申请(专利权)人: | 成都理工大学 |
主分类号: | G06N20/00 | 分类号: | G06N20/00;G06F9/54 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 610059 四川*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种以Celery 任务队列框架为核心的分布式机器学习自动寻参系统,包括以下步骤:整个系统包括一个主节点和若干从节点。主节点根据配置的超参数生成初始参数任务放入消息中间件,从节点对消息中间件进行监听,当监听到任务时,从节点获取任务并运行,运行结束后,从节点将运行结果发送给主节点,主节点根据已经运行的结果使用参数生成算法来生成参数任务再放入消息中间件,如此往复,直至达到设定的迭代次数,系统停止,最终找到比较合适的超参数。 | ||
搜索关键词: | 主节点 消息中间件 机器学习 监听 放入 参数生成算法 参数生成 初始参数 节点获取 结果使用 任务队列 生成参数 系统停止 运行结果 运行结束 配置的 迭代 | ||
【主权项】:
1.一种基于celery的机器学习分布式调参系统,其特征在于,包括以下步骤:S1、通过网页界面提交代码和数据到指定目录并分发到远程主机;S2、页面配置超参数类型和范围;S3、系统根据配置生成初始参数任务放入消息中间件;S4、从节点到消息中间件获取任务并执行;S5、从节点执行完任务后,将结果回传给主节点;S6、主节点根据之前训练好的结果使用参数生成算法继续生成超参数任务存储到消息中间件供从节点消费;S7、当训练次数达到指定的值,整个系统就停止。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都理工大学,未经成都理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910400730.3/,转载请声明来源钻瓜专利网。