专利名称
主分类
A 农业
B 作业;运输
C 化学;冶金
D 纺织;造纸
E 固定建筑物
F 机械工程、照明、加热
G 物理
H 电学
专利下载VIP
公布日期
2023-10-24 公布专利
2023-10-20 公布专利
2023-10-17 公布专利
2023-10-13 公布专利
2023-10-10 公布专利
2023-10-03 公布专利
2023-09-29 公布专利
2023-09-26 公布专利
2023-09-22 公布专利
2023-09-19 公布专利
更多 »
专利权人
国家电网公司
华为技术有限公司
浙江大学
中兴通讯股份有限公司
三星电子株式会社
中国石油化工股份有限公司
清华大学
鸿海精密工业股份有限公司
松下电器产业株式会社
上海交通大学
更多 »
钻瓜专利网为您找到相关结果175个,建议您升级VIP下载更多相关专利
  • [发明专利]一种基于VR技术的虚拟展厅3D云展示系统及方法-CN202310164336.0在审
  • 张为海;周艳丽;张志豪;孔燕 - 浙江图布数字科技有限公司
  • 2023-02-24 - 2023-09-08 - G06T19/00
  • 本发明涉及VR虚拟展示技术领域,具体公开一种基于VR技术的虚拟展厅3D云展示系统及方法,包括服装图像获取模块、参展展区分析模块、参展展位分析模块、展位虚拟环境分析模块、参展用户信息采集模块、参展用户需求分析模块、参展用户服装筛选模块、显示终端和云数据库,通过对各参展商的展区和展位进行分析,进而对各参展商对应虚拟展区中虚拟展位的虚拟环境信息和参展者与各待选服装的适配性进行分析,解决了当前技术存在局限和片面的问题,实现了虚拟服装展示的智能化的展示,大大的提高了虚拟参展服装的展示效果,提高了展示服装的美观性,同时也有效的增加了参展者的选购的便利性和体验感。
  • 一种基于vr技术虚拟展厅展示系统方法
  • [实用新型]一种方便携带的医学检验采集器-CN202320813824.5有效
  • 孔燕 - 曲阜市人民医院
  • 2023-04-13 - 2023-08-04 - G01N1/14
  • 本实用新型公开了一种方便携带的医学检验采集器,包括:底板,其上端设置有连接板,且连接板的内部安装有放置组件,所述放置组件由放置板和弹簧构成;采集管,其设置在放置组件的上端,且采集管的上端设置有控制组件,所述控制组件由控制板、衔接杆、螺纹杆、连接柱和通孔构成;收集斗,其安装在控制组件的上端,且稳定杆的右侧设置有与底板连接的稳定杆;支撑杆,其通过螺栓连接在稳定杆的左端上侧,且支撑杆的右端中部设置有手把,所述连接板的上端中部设置有放置板。该方便携带的医学检验采集器,解决了现有的采集器,在采集后不便于进行携带,同时在采集时,会误触使液体流出,不方便采集的问题。
  • 一种方便携带医学检验采集
  • [发明专利]一种基于多任务思想下的深度强化学习交通灯控制方法-CN202310278110.3在审
  • 孔燕;曹任捷;杨智超 - 南京信息工程大学
  • 2023-03-21 - 2023-08-01 - G08G1/07
  • 本发明公开了一种基于多任务思想下的深度强化学习交通灯控制方法,将平衡压力作为奖励函数构建深度强化学习框架,对交通信号灯进行智能调控。与以往信号灯控制的方法不同的是,本发明保留了以往方法的优越性,增强了相邻路口之间的互相协作,更是在最大压力概念的基础上更科学地平衡了各条出车道上的压力,从而更好地缓解了交通拥堵的情况,推进了智能交通的发展;本发明提出的一个交通灯控制算法TaskLight,它引用了多任务学习的思想,引入一种噪声机制并引入到了多任务学习框架,以此来权衡不同时间段每个任务的重要性程度。对于中心路口的效果更佳,对于缓解市中心路段的交通拥堵具有重要的现实意义。
  • 一种基于任务思想深度强化学习交通灯控制方法
  • [发明专利]一种基于动态范围的深度强化学习塑造奖励方法-CN202310274985.6在审
  • 孔燕;魏俊锋 - 南京信息工程大学
  • 2023-03-21 - 2023-07-28 - G06N3/08
  • 本发明公开了一种基于动态范围的深度强化学习塑造奖励方法,步骤如下:对稀疏奖励环境通过距离函数进行预处理,设定关于目标的初始范围以及塑造奖励函数,利用深度强化学习算法PPO进行训练,记录智能体在关于目标范围内外的轨迹数,根据智能体在关于目标范围内外的轨迹数量比例,更新目标范围以及重新塑造奖励函数。本发明为强化学习大规模的稀疏奖励环境问题提供了一种新的思路,保留了以往方法的优越性,也引入了新思路的先进性,对于稀疏奖励问题具有重要的参考意义;本发明提出的动态范围,对于何时进行更新范围以及重新塑造奖励函数进行了合理的设计,对于稀疏奖励这一经典问题具有重要的研究意义。
  • 一种基于动态范围深度强化学习塑造奖励方法
  • [实用新型]一种水利工程防汛报警机构-CN202320770877.3有效
  • 孔燕;姜雪娟 - 姜雪娟
  • 2023-04-04 - 2023-07-21 - G01F23/64
  • 本实用新型公开了水利工程防汛技术领域的一种水利工程防汛报警机构,包括底板,底板的顶部安装有支撑柱,支撑柱的外侧套设有滑套,滑套与支撑柱滑动配合,滑套的正面安装有浮板,支撑柱的顶部安装有顶板,顶板的正面对称安装有两个距离传感器,距离传感器与浮板的位置相对应,顶板的顶部安装有无线报警器,无线报警器的一侧安装有蓄电池,本实用新型便于对工作人员进行及时预警,有利于防汛工作的快速展开。
  • 一种水利工程防汛报警机构
  • [发明专利]一种基于样本排序的深度强化学习随机采样方法-CN202310277221.2在审
  • 魏俊锋;孔燕 - 南京信息工程大学
  • 2023-03-21 - 2023-06-27 - G06F30/27
  • 本发明公开了一种基于样本排序的深度强化学习随机采样方法,步骤如下:智能体与稀疏奖励环境进行交互,形成轨迹样本数据集存入经验池;对经验池中的样本数据进行标记;对经验池中的样本进行随机采样,并且生成图结构;将图结构的样本根据标记,并按照每个子图从后往前将样本进行优先级排序;利用DQN算法对网络进行更新。本发明为强化学习中的稀疏奖励对样本的利用效率不高提供了解决方案,能够更好地提升深度强化学习算法性能,为强化学习算法解决现实世界问题的发展提供了有效的理论基础;本发明提出的对随机采样的样本进行图结构转化,能够更直接地体现每个样本之间的联系,并且利用它们之间的联系使得每个样本在训练的过程中发挥充分。
  • 一种基于样本排序深度强化学习随机采样方法
  • [发明专利]一种在强化学习中基于变分自动编码器的内部激励方法-CN202310247094.1在审
  • 曹俊豪;孔燕 - 南京信息工程大学
  • 2023-03-15 - 2023-06-23 - G06N3/0464
  • 本发明公开了一种在强化学习中基于变分自动编码器的内部激励方法,通过构建Advantage Actor‑Critic(A2C)深度强化学习框架并采用变分自动编码器(VAE)将状态空间投射到一个潜在空间,该空间将表示环境的内在结构;通过使用VAE容易地得到智能体对于状态好奇度的度量,并将其定义为在潜在空间上后验分布偏离先验分布的程度。本发明所述方法为探索与利用困境提供了一种新的思路,保留了以往方法的优越性,也引入了新思路的先进性,对于探索与利用问题具有重要的参考意义;本发明提出的使用变分自动编码对状态进行编码,对于何时进行探索何时进行利用进行了合理的设计,对于探索与利用这一经典问题具有重要的研究意义。
  • 一种强化学习基于自动编码器内部激励方法
  • [发明专利]一种基于目标导向的深度强化学习中优先经验回放方法-CN202310274087.0在审
  • 曹任捷;孔燕 - 南京信息工程大学
  • 2023-03-21 - 2023-05-30 - G06F9/48
  • 本发明公开了一种基于目标导向的深度强化学习中优先经验回放方法,步骤如下:对gym mountain_carv0的数据进行预处理;根据智能体小车在不同状态下与目标状态下的差异作为目标导向因子;利用DQN算法构建深度强化学习框架;根据行为值函数的TD‑error去量化经验的优先级的第一部分;将目标导向因子加入到优先级定义中成为优先级的第二部分,不断对整个网络进行更新,以求得到更好的结果。本发明保留了以往优先经验回放的优越性,也科学地完善了优先级的重新定义,对优先级的定义具有重要的参考意义;本发明提出的目标导向因子α,对于不同状态之间进行了合理的量化,对于经验回放中的优先级具有重要的研究意义。
  • 一种基于目标导向深度强化学习优先经验回放方法

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top