朱海勇 作品数:47 被引量:1 H指数:1 供职机构: 厦门市美亚柏科信息股份有限公司 更多>> 相关领域: 自动化与计算机技术 文化科学 更多>>
一种用户自定义函数的实现方法和系统 公开了用户自定义函数的实现方法和系统,包括系统服务接口接受并解析从用户提交的Flink SQL任务及UDF请求参数;响应于用户提交的UDF请求参数中仅提供UDF唯一标识,从系统缓存中获取UDF唯一标识;响应于UDF请求参... 张凤 周成祖 魏超 朱海勇 王杰诚 苏海峰一种基于规则引擎的主题检索方法和系统 本发明给出了一种基于规则引擎的主题检索方法和系统,包括分析检索条件的关键特征和不同类型对象主题的数据特征,根据不同主题同一属性的互斥关系和同一主题不同属性的关联关系,动态调整主题检索的路径规则;根据路径规则检索对应的主题... 周成祖 林文楷 魏超 林海 魏炜途 朱海勇一种Spark轻量级客户端实现方法研究 被引量:1 2023年 【目的】满足前端用户频繁交互需求,克服传统重客户端与Spark应用服务保持长连接会话的弊端。【方法】在边缘节点服务器上部署高性能负载均衡和动态代理组件(HAProxy),提供一种通过轻量级客户端提交Spark作业的实现方法,对Spark作业进行动态调度与全生命周期管理。【结果】通过Spark on YARN模式将多个具有相同功能、相互之间能独立运行的Rest服务部署到YARN集群上,利用HAProxy的自动重载机制进行动态更新和加载后端服务配置,使前端用户在对后端变动无感知的情况下,通过HAProxy统一对外接口,将Spark作业提交到分散运行在Yarn集群上无差别的Rest服务中执行。【结论】该方法无须保持边缘节点服务器与集群节点服务器之间的长连接会话,通过HAProxy能有效避免外部用户直接访问集群内部节点,实现集群内外安全隔离的目的,同时可在Spark on YARN运行模式下实现Spark作业的交互式提交与异步调度,完成对Spark作业全生命周期的自主控制。 张凤 卢居辉 朱海勇 吴文关键词:SPARK YARN 一种人脸图像聚类中非活体过滤的方法、装置、介质 本发明提出了一种人脸图像聚类中非活体过滤的方法、装置及存储介质,该方法包括:分组步骤S101,对聚类后的人脸图像根据摄像头的ID进行分组,其中n≥2;计算步骤S102,针对每一个分组计算所有人脸图像位置的区域及该区域对应... 毕永辉 陈子沣 朱海勇 梁煜麓 周利民 古松景基于面部稀疏关键点和相似变换的侧脸评价方法及其系统 本发明提出了一种基于面部稀疏关键点和相似变换的侧脸评价方法,包括:响应于获取目标人脸图像的面部关键点坐标和标准面部关键点坐标;基于获取的所述目标人脸图像的关键点坐标和标准面部关键点坐标,计算获得其两者之间的相似变换矩阵M... 钟敏 吴文 罗雅英 朱海勇 詹俊豪 张秋霞一种自动巡检采集设备的方法、装置和存储介质 本发明提供了一种自动巡检采集设备的方法、装置及存储介质,该方法包括:S1,获取各采集设备的采集日志数据;S2,对采集日志数据进行对象归一化处理和地址归一化处理,获得各区域的区域分析信息;S3,分析各区域的区域分析信息,根... 林文楷 周成祖 魏超 吴文 朱海勇一种PPTP数据实时解析的处理方法和装置 本发明公开了一种PPTP数据实时解析的处理方法,包括如下过程:步骤一:读取客户端和服务端的通信报文,落地成文件并解析,获取已知数据值;步骤二:计算nthash的值,得到解密后续业务报文所需要的密钥;步骤三:在计算过程中,... 高华东 陈志飞 鄢小征 魏超 朱海勇 张永光文献传递 一种多域数据融合的方法、装置和存储介质 本发明提供了一种多域数据融合的方法、装置和存储介质,该方法包括:S1,在预先设置的多域调度融合区建立任务规则库;S2,提取任务规则库中选定的所有任务,针对选定的每一任务确定对应的数据域组及对应的执行引擎组,并获得与同一数... 林文楷 周成祖 魏超 吴文 朱海勇一种基于多计算引擎的海量数据在线分析方法及其系统 本发明提出了一种基于多计算引擎的海量数据在线分析方法及其系统,包括:响应于第三方应用发起的作业请求,并将所述作业请求提交到web端在线引擎作业队列;引擎作业提交执行器EJSR轮询会话计算引擎作业队列,并取出作业信息JCI... 卢居辉 甘朗杰 周成祖 朱海勇 吴文 林至贤一种基于类别信息对神经网络分步训练的方法、装置、介质 本发明提出了一种基于类别信息对神经网络分步训练的方法、装置及存储介质,该方法包括:获取步骤,获取所述神经网络的初始权重数据,并将所述初始权重数据存储在一指定存储区中;选择步骤,从待训练的N个类别训练样本集合中选择n个未标... 袁泉 陈子沣 魏超 朱海勇 齐战胜 李铭文献传递