基于增强学习的摄像机网络节点动态选择方法

来源：软件学报杂志2015年第S2期北京时间：

作者：李骞,孙正兴,陈松乐,夏士明

单位：李骞，计算机软件新技术国家重点实验室(南京大学), 江苏南京 210093;解放军理工大学气象海洋学院, 江苏南京 21110111,孙正兴，计算机软件新技术国家重点实验室(南京大学), 江苏南京 21009302,陈松乐，计算机软件新技术国家重点实验室(南京大学), 江苏南京 21009303,夏士明，解放军理工大学气象海洋学院, 江苏南京 21110104

摘要：摄像机节点动态选择问题是摄像机网络应用中的一个难点.提出了一种基于增强学习的节点动态选择方法.采用视觉信息评分作为单步回报设计了节点选择策略的Q-学习算法,为了加速算法收敛速度,利用摄像机空间拓扑关系初始化Q值表,并基于Gibbs分布进行非贪心尝试.从目标可见性、朝向、清晰度和切换次数设计视觉评价函数反映视频信息丰富程度和视觉舒适度.实验结果表明,该节点动态选择方法能够有效地反映视频中的目标状态信息,选择结果切换平滑,满足实际应用需要.

关键词：摄像机选择;增强学习;视频分析;摄像机网络

基金资助：国家自然科学基金(61272219, 61100110, 61321491, 41305138);教育部新世纪优秀人才资助计划(NCET-04-0460);江苏省科技计划(BE2010072, BE2011058, BY2012190, BY2013072-04);计算机软件新技术国家重点实验室创新基金(ZZKT2013A12)