【内容简介】
《如何创建MATLAB环境及程序详解视频》共8章31节视频，总学时265分钟，合4.4小时。把自己的强化学习问题，通过创建MATLAB环境，就可以利用MATLAB现有程序求解。
主要内容包括：视频课程内容介绍及慎拍不拍说明与参考文献，创建强化学习环境的作用与两个途径，重置函数dsResetFnc改编及两个典型实例的重置函数dsResetFnc详解，单步函数dsStepFnc改编与两个实例的dsStepFnc演示详解，利用dsResetFnc和dsStepFnc函数及语句创建MATLAB环境并仿真，利用公式创建MATLAB环境及DQN智能体求解车杆平衡控制问题，利用数据创建MATLAB环境及AC智能体求解金融交易操作策略，导入自己问题创建的MATLAB环境利用强化学习设计器进行训练及仿真演示。
拍付费视频课程后，全部免费提供MATLAB程序，免费提供辅导答疑，免费提供PPT课件。
【如何为己所用】：
（1）只需具有自己的问题，代入所给的程序求解即可。
（2）利用提供的程序即可完整得到深度强化学习的问题环境，利用环境就可以进一步求解深度强化学习问题。
【前期基础】课程或知识：
(1)《强化学习RL及其应用与MATLAB程序详解视频》
【后期选学】课程推荐：
(1)《强化学习RL及其应用与MATLAB程序详解视频》
(2)《强化学习设计器使用与MATLAB程序详解视频》
(3)《深度强化学习(DRL)及其应用与MATLAB程序详解视频》
(4)《如何创建强化学习问题的Simulink环境及程序详解视频》
(5)《AC算法实现股票交易操作深度强化学习与MATLAB程序》
【深度强化学习算法视频课程】推荐：
(1)《强化学习RL及其应用与MATLAB程序详解视频》
(2)《深度强化学习DRL及其应用与MATLAB程序详解视频》
(3)《强化学习设计器使用与MATLAB程序详解视频》
(4)《如何创建强化学习问题的MATLAB环境及程序详解视频》
(5)《如何创建强化学习问题的Simulink环境及程序详解视频》
(6)《AC算法实现股票交易操作深度强化学习与MATLAB程序》
(7)《DDPG算法实现双积分系统控制与MATLAB程序详解视频》
一、学习指导方案
1、全部视频都在网上。请首先按照视频文件序号由小到大（若前序号相同，说明视频内容密切联系，再看后面序号大小）的序号观看，保证内容由浅入深地顺序学习。
2、在看视频的同时，利用【倍速】【暂停】【倒回】操作，最好运行程序文件。
3、将存在的问题记录下来，看看视频是否讲解。对视频还是没有讲解的问题，尽快问【面对面数学】答疑。
4、视频观看结束后，看看PPT课件，复习、巩固学习效果。
5、视频清晰度：（1）建议屏幕分辨率设置为1920x1080 或者屏幕分辨率1280x720。（2）全屏播放。这样看视频更加清晰。
6、倍速播放：现在【淘宝新平台】已经具备【倍速播放】视频功能。
四、目 录
第一章 视频课程内容介绍及慎拍不拍说明与参考文献（23分钟）
0、先看全面讲解9个关键重点问题和店主预言先告必看第三版（38+4分钟）
1、RLD1_1视频讲些什么内容及能干什么说明（8分钟，网络上免费“试看”）
2、RLD1_2MATLAB程序免费提供及课程亮点特点说明（5分钟，网络上免费“试看”）
3、RLD1_3慎拍不拍建议与学习基础要求及参考文献（5分钟，网络上免费“试看”）
4、RLD1_4教学顾虑及教与学对策建议（5分钟，网络上免费“试看”）
第二章 创建强化学习环境的作用与两个途径（15分钟）
5、ENVM2-1环境与智能体结构及车杆平衡控制系统简介（11分钟）
6、ENVM2-2学习目标及两类环境特点解读（4分钟，网络上免费“试看”）
第三章 重置函数dsResetFnc改编及两个典型实例的重置函数dsResetFnc详解（74分钟）
7、ENVM3-1重置函数dsResetFnc设置原则与2个方法及2处可改建议（8钟，有程序）
8、ENVM3-2物理公式驱动的车杆平衡控制系统简介及其重置函数4个分量设置意图（12分钟，有程序）
9、ENVM3-3用数据驱动的金融交易强化学习问题简介及环境组成（12分钟，有程序）
10、ENVM3-4智能体与状态组成及动作数量化针对金融交易问题（10分钟，有程序）
11、ENVM3-5奖励和交易规则与策略及下一个状态详解分析（15分钟，有程序）
12、ENVM3-6数据驱动模型的重置函数解读及3个重置函数对比（12分钟，有程序）
14、ENVM3-7重置函数dsResetFnc的深入理解及全面思考（5分钟，，有程序，网络上免费“试看”）
第四章 单步函数dsStepFnc改编与两个实例的dsStepFnc演示详解（57分钟）
15、ENVM4-1单步函数dsStepFnc的功能与实例及如何设置下一个状态（6分钟，有程序）
16、ENVM4-2下一个状态NextState与观测值及奖励Reward和标识符设置（11分钟，有程序）
17、ENVM4-3利用物理公式建模的车杆平衡问题的单步函数dsStepFnc输入与输出变量（14分钟，有程序）
18、ENVM4-4金融交易问题单步函数dsStepFnc的5个输入变量详解（8分钟，有程序）
19、ENVM4-5单步函数dsStepFnc的9个输入输出变量得来和设置问题详解（12分钟，有程序）
20、ENVM4-6数据驱动的强化学习模型的5个思考问题及总结（6分钟，有程序）
第五章 利用dsResetFnc和dsStepFnc函数及语句创建MATLAB环境并仿真（27分钟）
21、ENVM5-1信息oinfo和ainfo及环境menv变量讲解及属性查看（8分钟，有程序）
22、ENVM5-2模拟仿真AC智能体及其结果解读及4处可改建议（10分钟，有程序）
23、ENVM5-3思考问题6个及创建环境后下一步出口（9分钟，有程序，网络上免费“试看”）
第六章 利用公式创建MATLAB环境及DQN智能体求解车杆平衡控制问题（34分钟）
24、ENVM6-1创建环境所需的全部3个函数的功能及语法分析详解（12分钟，有程序）
25、ENVM6-2提取环境env的观测信息和动作信息及动作个数（6分钟，有程序）
26、ENVM6-3如何导入预训练智能体进行仿真测试操作讲解（9分钟，有程序）
27、ENVM6-4思考如何利用模版程序寻找自己的问题与改写程序及总结（7分钟，有程序，网络上免费“试看”）
第七章 利用数据创建MATLAB环境及AC智能体求解金融交易操作策略（29分钟）
28、ENVM7-1数据驱动程序命令及程序正常运行处理（8分钟，有程序）
29、ENVM7-2数据驱动的金融交易策略程序逻辑关系解读与分析（13分钟，有程序）
30、ENVM7-3思考如何利用数据驱动的程序求解自己问题及总结（8分钟，有程序）
第八章 导入自己问题创建的MATLAB环境利用强化学习设计器进行训练及仿真演示（9分钟）
31、ENVM8-1利用强化学习设计器导入MATLAB环境体求解车杆平衡控制问题（9分钟，有程序）
五、下载文件
1、必先看_如何创建MATLAB环境及程序视频学习指导.doc
2、ENVM_PPT课件.rar
3、ENVM_m.rar
