基于3D分层卷积融合的多模态生理信号情绪识别

凌文芬, 陈思含, 彭勇, 孔万增

Multi-modal physiological signal emotion recognition based on 3D hierarchical convolution fusion

Wenfen LING, Sihan CHEN, Yong PENG, Wanzeng KONG

表3 不同多模态特征融合方法在DEAP数据集上的分类准确率

方法 模态 效价 唤醒度 效价-唤醒度 CNN[19] EEG+全部外围生理信号 85.5 87.3 — DCCA[11] EEG+全部外围生理信号 85.62 84.33 85.51 MM-ResLSTM[20] EEG+全部外围生理信号 92.3±1.55 92.87±2.11 — CNN+LSTM[10] EEG+全部外围生理信号 91.95 93.06 — 本文方法 EEG+EOG+EMG $98.55\pm 1.33$ $98.77\pm 1.57$ $98.67\pm 1.38$