卢梅丽，女，出生于1981年，本硕博均毕业于985高校天津大学，并在世界知名外企从事了三年的研发工作，目前任职于天津一所二本高校，主要从事类脑计算，神经工程，最优控制和机器学习方面的研究。目前主持一项国家自然科学基金项目，参与多项国家自然科学基金项目和天津市应用基础及前沿研究项目。在所研究领域发表了多篇高水平论文，曾经在美国访学一年，与美国教授Professor Loparo合作在高水平期刊IEEE Transactions on Neural System and Rehabilitation Engineering上发表了一篇论文。

第1章  绪论 1
1．1  脑科学 1
1．1．1  类脑研究 1
1．1．2  脑疾病 2
1．2  帕金森病及其诊疗技术 3
1．2．1  帕金森病与神经电生理特性 4
1．2．2  深部脑刺激技术 6
1．3  闭环控制技术 7
1．3．1  PID闭环调制 7
1．3．2  自适应神经调制 8
1．3．3  最优控制策略 8
第2章  帕金森病的脉冲模型 10
2．1  单神经元脉冲模型 10
2．1．1  神经元生物模型 10
2．1．2  单间室电生理模型 11
2．1．3  双间室电生理模型 16
2．1．4  电缆模型 22
2．1．5  简化模型 25
2．2  脉冲网络模型 36
2．2．1  功能性神经网络模型 37
2．2．2  基底核电生理网络模型 42
2．3  本章小结 68
第3章  脉冲模型的非线性动态 69
3．1  相关理论 69
3．1．1  奇异摄动理论 70
3．1．2  Zeeman模型渐近结构分析 72
3．2  脉冲模型的典型非线性动力学分析 76
3．2．1  脉冲模型的快慢时间系统渐近结构分析 76
3．2．2  脉冲模型的相平面分析 80
3．2．3  脉冲模型的分岔动态 84
3．2．4  脉冲模型的同步分析 87
3．3  相响应曲线分析 97
3．3．1  单峰脉冲神经元的相响应曲线与同步 97
3．3．2  簇放电神经元的相响应曲线与同步 105
3．4  本章小结 116
第4章  基于相重置的帕金森病最优控制 117
4．1  帕金森病的治疗机制 117
4．1．1  帕金森病与同步现象 117
4．1．2  神经系统的去同步控制 118
4．2  帕金森病的相重置优化控制 119
4．2．1  从状态方程到相模型 120
4．2．2  外部强扰动下的PRC 122
4．2．3  耦合对模型PRC的影响 125
4．2．4  神经元的相重置控制 128
4．3  本章小结 129
第5章  基于动态规划的帕金森病最优控制 130
5．1  动态规划 130
5．1．1  动态规划概念 130
5．1．2  离散的动态规划 131
5．1．3  连续的动态规划 136
5．2  帕金森病的动态规划最优控制 139
5．2．1  控制问题描述 139
5．2．2  动态规划算法描述 140
5．2．3  控制结果 142
5．3  本章小结 153
第6章  基于强化学习的帕金森病最优控制 155
6．1  强化学习基本概念 156
6．2  强化学习的算法 157
6．2．1  蒙特卡罗法 158
6．2．2  瞬时差分法 160
6．2．3  Sarsa算法 161
6．2．4  Q学习算法 163
6．3  连续的强化学习 166
6．3．1  RBF神经网络Q学习 167
6．3．2  BP神经网络 172
6．3．3  CMAC神经网络 173
6．4  帕金森病的强化学习最优控制 174
6．4．1  控制问题描述 174
6．4．2  算法实现 176
6．5  本章小结 179
参考文献 180