周一帆
- 作品数：28 被引量：30H指数：3
- 供职机构：东南大学更多>>
- 发文基金：国家自然科学基金国家教育部博士点基金江苏省自然科学基金更多>>
- 相关领域：自动化与计算机技术机械工程交通运输工程金属学及工艺更多>>
- 基于多智能体强化学习的多部件系统维修优化
- 2023年
- 【目的】研究多智能体强化学习算法用于多部件生产系统维修优化的有效性,及维修优化领域知识用于强化学习的可行性。【方法】将生产系统的维修决策建模为马尔可夫决策过程(Markov decision process,MDP),并采用一种基于奖励塑造的分布式Q学习(shaped reward distributed Q-learning,SR-DQL)算法对其进行求解。通过对智能体的设计和奖励塑造,把维修优化的领域知识应用于强化学习中。【结果】使用包含5个生产单元和4个缓冲库存的生产系统对本文所提出的SR-DQL算法进行验证。相较于Q学习算法,SRDQL算法能够提升6%的平均收益。此外,由该算法计算得到的平均收益也比由分布式Q学习算法和深度强化学习算法计算得到的大。【结论】多智能体强化学习能有效处理大规模生产系统的维修优化问题,添加奖励塑造可以提升算法性能,并得到更优的维修策略。
- 周一帆郭凯李帮诚
- 关键词：多智能体强化学习
- 一种双水平呼吸机的呼吸状态识别装置及其识别方法
- 本发明公开了一种双水平呼吸机的呼吸状态识别装置及其识别方法，交互模块和采集模块分别与比较模块相连，采集模块包括压力采集模块、流量采集模块和时间记录模块，交互模块接收用户设定的信息并确定触发值，比较模块将采集模块采集到的气...
- 张志胜戴敏王健周一帆
- 文献传递
- 基于半参数回归模型的制造过程加工误差流建模与分析被引量：10
- 2013年
- 针对多工序制造过程中加工误差流的传递和累积问题,研究工序输入尺寸误差、系统误差和随机误差与工序输出尺寸误差间的关系,构建数学模型并给出了模型解算方法。基于泰勒公式展开和实际加工经验假设,建立工序输出尺寸误差与工序输入尺寸误差间的参数化表达式,并将与工序输出尺寸误差关系未知的工序系统误差非参数化表达,建立制造过程加工误差流的半参数回归模型;采用广义交叉核实函数计算平滑因子,以实际机械加工经验确定正规化矩阵,由补偿最小二乘法求解了所建立半参数回归模型的参数和非参数估计。以二工序磨削加工实例证明,采用半参数回归模型描述加工误差流,不仅能够反映工序间误差传递关系,分离工序系统误差和随机误差,而且比完全参数建模方法和非参数建模方法具有更好的解释性和适用性。
- 张磊张磊张志胜周一帆戴敏
- 关键词：半参数回归模型
- 应用改进的ALP算法优化并串联系统维修的方法
- 本发明公开了一种应用改进的近似线性规格(ALP)算法优化并串联系统维修的方法，本ALP算法用于求解可分解马尔可夫决策过程（FMDP）模型。该算法可以有效减少线性规划中的约束条件，提高算法的效率，从而扩大了FMDP模型的使...
- 周一帆张志胜
- 一种PLC的指令编码及识别系统
- 本发明公开了一种PLC的指令编码方法及其识别方法，所述编码方法的指令分为纯单步指令、单步指令以及多步指令三大类；指令的处理单位为4位16进制码，第1位用于表示指令类型，纯单步指令的后3位用于表示纯单步指令编码号，单步指令...
- 张志胜卓文涛周一帆卞扬清
- 文献传递
- 液态金属线圈的制造装置及制造方法
- 本发明公开了一种液态金属线圈的制造装置及制造方法，涉及液态金属线圈制造技术领域，解决了液态金属线圈制造装置的温度场内温度变化较小的技术问题，其技术方案要点是通过温控模块阵列和电阻抗监控模块阵列，可对液态金属线圈所在空间的...
- 张驰舟周一帆张延文韩煜
- 文献传递
- 两部件串联系统拟周期预防性维修策略优化(英文)被引量：2
- 2013年
- 为研究多种随机因素对一类两部件串联系统预防性维修决策的影响,提出一种拟周期预防性维修策略优化模型.假设预防性维修对部件1为完整修,对部件2为保养,预防性活动在实施区间内根据动态计划随机进行;意外更换和预防性更换的竞争结果决定系统的更换,当部件2发生严重故障时引发系统的意外更换,当预防性维修次数达到设定的阈值N时实施预防性更换.通过建模和优化分析,给出了最优预防性维修实施区间和最佳维修次数的求解算法,并通过数值案例对模型的优化过程和参数的敏感性做了说明.分析结果表明,在满足实际生产需求的前提下,尽可能地缩短实施区间能提高系统的平均运行时间和降低系统的长期运行成本率.
- 高文科张志胜周一帆甘淑媛
- 基于改进随机分支定界算法的复杂制造系统维修优化方法
- 本发明公开了基于改进随机分支定界算法的复杂制造系统维修优化方法，包括以下步骤，步骤1，改进SB&B算法的初始化；步骤2，改进SB&B算法的分区；步骤3，采样可行解；步骤4，对采样解进行仿真；步骤5，对子区...
- 周一帆袁超张志胜戴敏
- 基于ASP.NET技术的新闻发布系统的设计与实现被引量：3
- 2006年
- 完整描述了一种在部队师旅级单位通用的新闻发布系统。首先根据用户的特点,对系统进行了需求分析与功能模块划分,然后在此基础上从系统架构、系统流程和数据库设计等3个方面阐述了系统设计中的关键点,并以设计用户登录界面为例写出了部分功能的实现程序,最后对其在中小型企业建站中的应用进行了展望。
- 孙伯周一帆史金飞
- 关键词：新闻发布系统ASP.NET数据库设计例程
- 基于改进随机分支定界算法的复杂制造系统维修优化方法
- 本发明公开了基于改进随机分支定界算法的复杂制造系统维修优化方法，包括以下步骤，步骤1，改进SB&B算法的初始化；步骤2，改进SB&B算法的分区；步骤3，采样可行解；步骤4，对采样解进行仿真；步骤5，对子区...
- 周一帆袁超张志胜戴敏
- 文献传递
