-
题名一种用于连续动作空间的最小二乘行动者-评论家方法
被引量：9
- 1
-
-
作者
朱斐
刘全
傅启明
伏玉琛
-
机构
苏州大学计算机科学与技术学院
苏州大学系统生物学研究中心
符号计算与知识工程教育部重点实验室(吉林大学)
-
出处
《计算机研究与发展》
EI
CSCD
北大核心
2014年第3期548-558,共11页
-
基金
国家自然科学基金项目(61303108
61373094
+3 种基金
61272005)
江苏省高校自然科学研究项目(13KJB520020)
江苏省自然科学基金项目(BK2012616)
吉林大学符号计算与知识工程教育部重点实验室基金项目(93K172012K04)
-
文摘
解决具有连续动作空间的问题是当前强化学习领域的一个研究热点和难点.在处理这类问题时,传统的强化学习算法通常利用先验信息对连续动作空间进行离散化处理,然后再求解最优策略.然而,在很多实际应用中,由于缺乏用于离散化处理的先验信息,算法效果会变差甚至算法失效.针对这类问题,提出了一种最小二乘行动者-评论家方法(least square actor-critic algorithm,LSAC),使用函数逼近器近似表示值函数及策略,利用最小二乘法在线动态求解近似值函数参数及近似策略参数,以近似值函数作为评论家指导近似策略参数的求解.将LSAC算法用于解决经典的具有连续动作空间的小车平衡杆问题和mountain car问题,并与Cacla(continuous actor-critic learning automaton)算法和eNAC(episodic natural actor-critic)算法进行比较.结果表明,LSAC算法能有效地解决连续动作空间问题,并具有较优的执行性能.
-
关键词
强化学习
行动者-评论家算法
连续动作空间
最小二乘法
小车平衡杆问题
MOUNTAIN
car问题
-
Keywords
reinforcement learning
actor-critic algorithm
continuous action space
least squares method
cart pole balancing
mountain car
-
分类号
TP181
[自动化与计算机技术—控制理论与控制工程]
-
-
题名家蚕核型多角体病毒水平转移基因分析
被引量：7
- 2
-
-
作者
段海蓉
丘德彬
贡成良
黄茉莉
-
机构
苏州大学系统生物学研究中心
苏州大学医学部
苏州大学数学科学学院
-
出处
《遗传》
CAS
CSCD
北大核心
2011年第6期636-647,665-667,共12页
-
基金
国家重点基础研究发展计划"973"项目(编号:2005CB121000)
江苏省高校自然科学研究项目(编号:SZ107917)
2009年度大学生创新性实验计划项目(编号:57315969)资助
-
文摘
为了探讨杆状病毒基因组的遗传进化模式,文章利用家蚕核型多角体病毒(BmNPV)和其宿主家蚕全基因组数据,进行了全基因组的同源性搜索和系统进化分析,结果显示,BmNPV的几丁质酶(Chi)基因、凋亡抑制蛋白3(IAP3)基因和尿苷二磷酸葡萄糖转移酶(UGT)基因为水平转移基因。这3个基因都来源于其宿主昆虫。通过核苷酸组成、密码子偏好性、选择压力等基因特征分析,发现BmNPV水平转移基因与其基因组序列存在明显差异,进一步验证水平转移基因的外源性。对3个水平转移基因的功能分析发现它们有利于杆状病毒在宿主昆虫中的侵染与繁殖,并提高杆状病毒在昆虫中的生存能力。
-
关键词
家蚕核型多角体病毒
家蚕
杆状病毒
水平转移基因
-
Keywords
BmNPV
Bombyx mori
baculoviruses
horizontal gene transfer
-
分类号
Q78
[生物学—分子生物学]
-
-
题名一种蛋白质点突变计算机预测的并行模型
被引量：1
- 3
-
-
作者
栾忠兰
吕强
杨凌云
徐超
-
机构
苏州大学计算机科学与技术学院
江苏省计算机信息处理技术重点实验室
苏州大学系统生物学研究中心
-
出处
《小型微型计算机系统》
CSCD
北大核心
2012年第5期963-966,共4页
-
基金
国家自然科学基金项目(60970055)资助
-
文摘
认识和预测蛋白质天然构象的波动对蛋白质-蛋白质对接和设计等应用是非常重要的.但是许多骨架柔性的方法会导致骨架较大幅度的波动.Backrub模型能够对骨架进行微小的扰动,符合高分辨率晶体结构中观察到的构象的微妙变化.本文提出了一种基于Backrub的并行扰动骨架和侧链的模型,可以对天然构象的等价状态进行模拟.这种并行扰动方式更加接近于真实情况下蛋白质构象的运动方式,更好地模拟了实验数据.通过预测10个点突变实例,相比串行随机扰动模型产生的构象,并行模型不仅从时间上提高了产生构象的速度,更提高了侧链的预测精度.
-
关键词
蛋白质骨架
侧链
Backrub
并行扰动
-
Keywords
protein backbone
side-chain
Backrub
simultaneous perturbation
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
