贾宁
- 作品数:44 被引量:121H指数:6
- 供职机构:大连东软信息学院更多>>
- 发文基金:辽宁省自然科学基金辽宁省教育厅高等学校科学研究项目国家级大学生创新创业训练计划更多>>
- 相关领域:自动化与计算机技术电子电信文化科学经济管理更多>>
- 融合音频、文本、表情动作的多模态情感识别被引量:6
- 2023年
- 针对机器识别人类情感过程中的精度不高、泛化能力不强等问题,提出了一种基于语音、文本和表情动作的3种模态情感识别融合方法。在语音模态中,设计深度波场延拓和改进波动物理模型,模拟长短期记忆(long short-term memory,LSTM)网络的序列信息挖掘过程;在文本模态中,利用含有多头注意力机制的Transformer模型捕捉语义上潜在的情感表达;在表情动作模态中,将提取面部表情和手部动作的序列特征与双向三层含有注意力机制的LSTM模型相结合。最终提出一种多性能指标下的模态融合方案,以实现高精度的、强泛化能力的情感识别。在通用的交互式情感二元运动捕捉语料库IEMOCAP中,将所提出的方法与现有的情感识别算法进行对比,实验结果表明:所提出的算法在单个模态和多个模态中的识别精度均较高,平均精度改善达到16.4%和10.5%,有效提升了人机交互中情感识别的能力。
- 贾宁郑纯军
- 关键词:语音情感识别
- 一种基于多模态信息的二阶段农作物生长预测方法
- 本发明公开了一种基于多模态信息的二阶段农作物生长预测方法,包括采集农作物的生长状态的视频图像,并记录视频图像拍摄时间;提取视频图像中的关键区域获取特征图;基于3D卷积神经网络识别模型对特征图进行识别训练获取获得完整的农作...
- 贾宁郑纯军王庆军王锡纲王洪岩王江浩崔新明王文腾
- 基于Qt Quick的跨平台移动应用开发关键技术研究被引量:3
- 2015年
- Qt Quick是一项新技术,基于Qt Quick编写的应用程序可跨平台运行,本文描述了Qt Quick的应用在移动终端的自适应,QML与C++、Java语言的交互,QML连接数据库、Http下载与JSON解析技术,并阐述了Qt Quick的移动应用打包过程。
- 郑纯军贾宁
- 关键词:QT跨平台
- 语音任务下声学特征提取综述被引量:12
- 2020年
- 语音是一种重要的信息资源传递与交流方式,人们经常使用语音作为交流信息的媒介,在语音的声学信号中包含大量的说话者信息、语义信息和丰富的情感信息,因此形成了解决语音学任务的3个不同方向,即声纹识别(Speaker Recognition,SR)、语音识别(Auto Speech Recognition,ASR)和情感识别(Speech Emotion Recognition,SER),3个任务均在各自的领域使用不同的技术与特定的方法进行信息提取与模型设计。文中首先综述了3个任务在国内外早期的发展历史路线,将语音任务的发展归纳为4个不同阶段,同时总结了3个语音学任务在特征提取时所采用的公共语音学特征,并针对每类特征的侧重点进行了说明。然后,随着近年来深度学习技术在各个领域中的广泛应用,语音任务也得到了很好的发展,文中针对目前流行的深度学习模型在声学建模中的应用分别进行了分析,按照有监督、无监督的方式总结了针对3种不同语音任务的声学特征提取方式及技术路线,还总结了基于多通道并融合注意力机制的模型,用于语音的特征提取。为了同时完成语音识别、声纹识别和情感识别任务,针对声学信号的个性化特征提出了一个基于多任务的Tandem模型;此外,提出了一个多通道协作网络模型,利用这种设计思路可以提升多任务特征提取的准确度。
- 郑纯军郑纯军王春立
- 关键词:声纹识别语音识别情感识别
- 一种适用于鱼植共生的组合装置
- 本实用新型提供的一种适用于鱼植共生的组合装置,包括鱼缸与种植盆,鱼缸与种植盆设置定位销或定位槽相配合,种植箱坐于鱼缸之上,种植箱上方还可以安置种植箱,可以结合家庭需要及空间条件自由选择种植箱的层数,采用中空杆为框架制作鱼...
- 贾宁郑纯军王凯宋晓慧
- 文献传递
- 一种多模态羊肚菌生长状态快速判别方法
- 本发明公开了一种多模态羊肚菌生长状态快速判别方法,包括基于Mask R‑CNN的骨干网络对图像I进行特征提取并得到特征图,基于NSCT算法和Canny算子对图像I进行边界特征提取并得到子带集合,对特征图和边界特征图的空间...
- 贾宁郑纯军
- 一种基于音色的平行语音合成方法
- 本发明公开了一种基于音色的平行语音合成方法,包括构建多通道时频域GAN模型,多通道时频域GAN模型包括用于对原始声音信号进行时频域声学信号的提取和生成的第一通道和用于对原始声音信号进行显著性区域时域声学信号的提取和生成的...
- 贾宁郑纯军周伊佳叶剑锋杨涛崔新明王江浩
- 文献传递
- 基于MeeGo平台APPS开发的实践课程教学方法探讨
- 2015年
- 针对目前流行的移动应用开发,在调研学生就业情况的基础上,阐述基于MeeGo平台的APPS开发课程的教学内容设计,介绍该课程的几种教学方法,如任务驱动、发散式教学方法等,帮助学生快速掌握APPS的开发流程、开发技术,锻炼学生的实践能力,提升学习兴趣,为学生提供良好的就业基础。
- 贾宁
- 关键词:MEEGOAPPS发散式
- CDIO理念下的大数据人才培养混合式教育探索——以数据获取与预处理实践课程为例被引量:9
- 2021年
- 以大数据的人才培养为例,以人才能力培养为导向,探讨OBE-CDIO教育理念下的培养目标、毕业要求、混合式教学的一体化课程体系、产教融合构建项目体系、导师为指导的一体化课外实践体系、素质教师与专业教师相结合的素质教育体系的制订,以数据获取与预处理实践课程为例,介绍在混合式教育下的课程设计、资源建设与使用。
- 贾宁郑纯军
- 基于可复用技术的敏捷开发流程研究被引量:6
- 2015年
- 随着软件开发规模的扩大和复杂度的不断提高,软件开发效率成为各个开发团队尤为关注的课题。可复用技术是提高效率的有效途径之一,设计将可复用技术与敏捷开发相互融合,结合跨平台的移动应用程序开发模式,可帮助开发人员快速、高质量地完成批量程序的开发。完成此种开发模式需要制订统一的移动应用程序开发标准和规范,并遵循指定的开发流程,在具备基础条件和正确性的基础上进行资源复用。通过在跨平台上的实际项目开发,验证此种开发流程的可靠性和高效性。
- 贾宁郑纯军高志君
- 关键词:复用技术敏捷开发