深度强化学习理论及其在机器人运动控制中的应用实践

深度强化学习理论及其在机器人运动控制中的应用实践

查阅电子书
手机扫码
  • 微信扫一扫

    关注微信公众号

因版权原因待上架

编辑推荐

本书为基于深度强化学习的机器人控制问题提供一定的理论指导和技术支撑。

内容简介

深度强化学习理论的提出为机器人控制中的动力学模型建立、环境状态信息感知等问题提供了丰富的解决思路。

本书在现有的深度强化学习算法基础上,针对机器人控制中的机器人姿态平衡控制、机器人持物平衡控制、机器人抓取控制3个方面的问题展开研究。

本书适合机器人运动控制领域的研究者,以及对机器人运动控制方法感兴趣的读者阅读参考。

作者简介

作者姚世选,男,1976年5月出生,工学博士,副教授,研究生导师,兼大连理工计算机控制工程有限公司总工程师,全国工业过程测量控制和自动化标准化技术委员会可编程序控制器分技术委员会(SAC/TC124/SC5)委员。主要从事工业互联网、智能控制、运动控制和机器人控制等技术方面研究。

章节目录

版权信息

内容简介

前言

第1章 绪论

1.1 研究背景与意义

1.2 国内外研究现状

1.2.1 深度强化学习的研究现状

1.2.2 机器人控制的研究现状

1.3 本书主要内容

第2章 深度强化学习及非线性最优化基础理论

2.1 引言

2.2 强化学习理论

2.2.1 马尔可夫决策过程

2.2.2 动态规划

2.2.3 蒙特卡罗方法

2.2.4 时间差分学习

2.2.5 强化学习算法概述

2.3 深度强化学习理论

2.3.1 深度学习

2.3.2 深度强化学习算法概述

2.4 非线性系统

2.4.1 非线性系统描述

2.4.2 李雅普诺夫稳定性理论

2.4.3 控制系统中的动态规划问题

2.4.4 连续系统最优控制问题

2.4.5 离散系统最优控制问题

2.4.6 ADP方法分析

2.4.7 关于性能指标函数的讨论

2.5 本章小结

第3章 机器人运动控制方法及问题分析

3.1 引言

3.2 机器人平衡问题及方法提出

3.2.1 问题描述

3.2.2 方法提出

3.3 机器人抓取问题及方法提出

3.3.1 问题描述

3.3.2 方法提出

3.4 本章小结

第4章 基于深度强化学习的机器人姿态平衡控制

4.1 引言

4.2 倒立摆双轮式机器人基础模型

4.3 平衡系统控制模型设计

4.3.1 系统特点分析

4.3.2 姿态平衡系统强化学习模型构建

4.3.3 细节奖励函数设计

4.3.4 强化学习算法

4.4 实验结果及分析

4.4.1 倒立摆动力学模型软件设计

4.4.2 倒立摆内核系统设计

4.4.3 训练和测试环境

4.4.4 实验分析

4.5 本章小结

第5章 基于深度强化学习的机器人持物平衡控制

5.1 引言

5.2 机器人球杆系统模型

5.3 平衡系统控制模型设计

5.3.1 持物平衡系统强化学习模型构建

5.3.2 细节奖励函数设计

5.3.3 强化学习算法

5.4 视觉定位方法设计

5.5 实验结果及分析

5.5.1 训练和测试环境

5.5.2 实验分析

5.6 本章小结

第6章 基于深度强化学习的机器人抓取控制

6.1 引言

6.2 机器人运动学模型建立

6.3 抓取系统控制模型设计

6.3.1 抓取系统强化学习模型构建

6.3.2 奖励函数设计

6.3.3 强化学习算法

6.3.4 算法网络设计

6.4 实验结果及分析

6.4.1 训练和测试环境

6.4.2 实验分析

6.5 本章小结

第7章 移动机器人的运动控制问题

7.1 引言

7.2 智能体学习环境及问题

7.3 用细节奖励机制解决智能体学习问题

7.4 本章小结

第8章 并联机器人的逆解问题

8.1 引言

8.2 并联机器人深度强化学习建模

8.2.1 状态空间设计

8.2.2 输出动作选取

8.2.3 奖励函数分析

8.3 改进双延迟深度确定性策略梯度

8.3.1 TD3算法流程

8.3.2 基于Sumtree优先采样

8.4 实验结果及分析

8.4.1 仿真环境下的模型训练和评价

8.4.2 实物平台模型测试

8.5 本章小结

第9章 结论与展望

9.1 结论

9.2 创新点

9.3 展望

参考文献

反侵权盗版声明

深度强化学习理论及其在机器人运动控制中的应用实践是2023年由电子工业出版社出版,作者姚世选。

得书感谢您对《深度强化学习理论及其在机器人运动控制中的应用实践》关注和支持,如本书内容有不良信息或侵权等情形的,请联系本网站。

购买这本书

你可能喜欢
网络智能化中的深度强化学习技术 电子书
随着人工智能技术的广泛应用,网络智能化近年来受到广泛的关注,已经成为下一代移动通信与未来网络的重要技术。阿尔法围棋(AlphaGo)之后,深度强化学习不断推陈出新,为网络中的决策问题提供了有效的潜在解决方案。本书系统介绍了网络智能化中深度强化学习的基本理论、算法及应用场景。全书共8章,针对互联网、移动通信网、边缘网络、数据中心等典型网络,阐述了网络管理、网络控制、任务调度等决策需求,深入论述了深度
Excel在财务中的应用 电子书
Excel是微软办公套装软件的重要组成部分,它可以进行各种数据的处理、统计、分析等操作,广泛应用于管理、金融等众多领域。
Excel在财务中的应用 电子书
本书对Excel在会计核算和财务中的各种应用进行了详细介绍。本书内容翔实、结构清晰、图文并茂、通俗易懂。每章都穿插了大量极富实用价值的示例,并对重要的知识和应用技巧进行了归纳和总结。每章末尾都安排了有针对性的实战演练,来培养读者实际应用能力。
Excel在会计中的应用 电子书
本书介绍Excel在财务会计应用方面的主要内容,主要包括Excel的基本操作、Excel的数据操作、Excel的高级操作、Excel在会计凭证中的应用、Excel在会计账簿中的应用、Excel在会计报表中的应用、Excel在工资管理中的应用等内容。
Excel在会计中的应用 电子书
本书以一套完整的账务处理为主线,结合Excel知识进行具体的应用。全书共分三个部分:一是Excel的基础知识及常规应用;二是原始单据、会计凭证、账簿、会计报表等会计资料的制作及使用;三是深化Eccel重要公式的应用。