Graph-based Modality Alignment for Robustness in Conversational Emotion Recognition
포스터
연구 내용
화자와 모달 관계를 이종 그래프로 인코딩하고, 교차모달 대조 정렬로 대화 감정 인식을 수행했다.
결과
Weighted F1: IEMOCAP 73.13%, MELD 68.99%. 음성만 남긴 IEMOCAP 조건에서는 60.26%이며, 전체 입력과 결손 조건의 기준 모델이 다르다.
| 평가 조건 | 기준 모델 | 제안 모델 |
|---|---|---|
| IEMOCAP 전체 | 68.99 | 73.13 |
| MELD 전체 | 66.75 | 68.99 |
| IEMOCAP 음성만 | 54.09 | 60.26 |
해석 범위Weighted F1 (%). 전체 입력 기준 모델은 Transformer, 음성만 조건은 GRACE. 10회 랜덤 분할 평균
전체 논문 목록