科技 technology
您现在的位置:首页 > 科技 > 研究人员介绍了减少机器学习时间的新算法

新闻

MORROR ART歌词音箱的全新颠覆体验,在照片中看见如歌的岁月。 MORROR ART歌词音箱的全新颠覆体验,在照片中看见...

MORROR ART软装艺术理念的新尝试, 探索时光之美,赋予相册和台历更多可能 让时光和音乐一样能被看见。

  • 门窗行业复刻定制家居高光时刻,森鹰窗业上市成起点?

    据悉,9月26日,森鹰窗业股份有限公司(以下简称森鹰窗业)将举办上市敲钟仪式,正式登陆深交所。 森鹰窗业是目前沪深两市第一家细分行业为“C2032木门窗制造”的上市公司。 这让笔者不禁想起2011年定制家居...

  • 百年变局新机遇 第九届岭南论坛在广州举行

    11月21日,第九届岭南论坛在广州成功举办。本次论坛围绕“百年变局新机遇”主题,原中国银行业监督管理委员会主席刘明康,中山大学岭南学院教授、博导、广东省人民政府参事陆军,斯坦福大学教授、2001年诺贝尔经济...

  • 《风雨之后总有阳光》——产业人物访谈:益宸康旅创...

    2019年,国务院发布了《“健康中国2030”规划纲要》和第七次人口普查,把中国的康养产业推上了最大的风口。紧接着,2021年4月15日,中国央视网、新浪财经、搜狐网接连报道了“七亿养老项目暴雷:老人养老积蓄人间蒸发”。...

财经

唯品会经营范围变更 新增医疗器械、蔬菜水果零售等业务 唯品会经营范围变更 新增医疗器械、蔬菜水果零售等...

天眼查数据显示,3月31日,唯品会(中国)有限公司发生工商变更,经营范围新增蔬菜零售;非许可类医疗器...

  • 品钛旗下赣州爱信小贷正式接入人民银行征信系统

        北京2020年4月7日 /美通社/ -- 领先的金融科技解决方案提供商品钛(Pintec Technology Holdings Ltd., Nasdaq: PT) 今日宣布旗下的赣州爱信网络小额贷款有限公司(下称“爱信小贷”)正式接入中国人民银行...

  • 特斯拉空头近一个月减少超200万股

      据金融分析机构S3 Partner数据显示,截至4月3日,特斯拉未平仓空头头寸为1604万股,占流通股的10.97%。过去30天,特斯拉未平仓空头头寸减少222万股或12.18%,期间股价上涨32%;过去一周,特斯拉未平仓空头头...

  • 特斯拉展示新型自研呼吸机:与Model 3共用零件

      特斯拉之前宣布将开发新的呼吸机,而现在他们展示了这种新型设计。特斯拉在YouTube发布了视频,其工程师演示了两个版本的呼吸机,一个是把所有零件摆在桌子上的原型,另外一个则是组装好的设备,用于显示在医...

  • 特朗普称将在下一轮刺激计划中为美国民众发放更多的钱

      北京时间4月7日消息,美国总统特朗普称将在下一轮刺激计划中为美国民众发放更多的钱。在白宫新闻发布会上表示,特朗普“肯定”想听取下一次刺激计划的想法,并补充道他希望其中包括“切切实实的基础设施”。  ...

研究人员介绍了减少机器学习时间的新算法

发布时间:2020/03/11 科技 浏览:368

 
由科学院深圳先进技术研究所(SIAT)的李慧云教授领导的研究团队介绍了一种简单的深度强化学习(DRL)算法,该算法具有m-out-of-n引导程序技术和汇总的多个深度确定性策略梯度(DDPG)算法结构。
新算法被称为“自举聚合多DDPG”(BAMDDPG),加速了训练过程,并提高了智能人工研究领域的性能。
研究人员在二维机器人和开放式赛车模拟器(TORCS)上测试了他们的算法。二维机器人手臂博弈的实验结果表明,集合策略所获得的报酬比子策略所获得的报酬要高10%-50%,而TORCS上的实验结果表明,该新算法可以学习到成功的控制策略。培训时间减少了56.7%。
在连续动作空间上运行的DDPG算法引起了强化学习的极大关注。然而,即使对于简单的系统,通过贝叶斯信念状态空间中的动态编程进行的探索策略也是相当低效的。学习最佳策略时,这通常会导致标准引导失败。
所提出的算法使用集中式体验重放缓冲区来提高探索效率。具有随机初始化功能的n出n引导程序可以以较低的计算成本生成合理的不确定性估计,从而有助于训练的收敛。建议的自举和聚合DDPG可以减少学习时间。
BAMDDPG使每个代理可以使用其他代理遇到的经验。由于每个代理拥有更广阔的视野和更多的环境信息,因此这使BAMDDPG子政策的培训更加有效。
此方法对于顺序和迭代训练数据有效,在该数据中,数据表现出长尾分布,而不是独立的相同分布的数据假设所暗示的范数分布。对于具有连续动作和状态空间的任务,它可以用更少的培训时间来学习最佳策略。
这项研究的标题为“具有多个深度确定性策略梯度算法的深度集合强化学习”,已在Hindawi中发布。