멀티모달 기반 인공감성지능 모델 개발

23.11.28(화) 학술관 로비 및 제2컨퍼러스 홀에서 교수-학생이 연구 커뮤니티를 구성하여 전공 관련 주제를 설정하고, 연구를 수행하는 "전공역량 강화 프로그램"이 시행 되었습니다.

프로젝트 : 멀티모달 기반 인공감성지능 모델 개발
참가자 : 송미화 교수님, 에드워드 카야디 외 5명 학생

프로젝트 설명 : 멀티모달 머신러닝 기법을 이용한 감성인식에 관한 것입니다. 첫 번째 모델은 CNN 알고리즘을 이용하여 음성 데이터를 인식할 수 있는 SER 모델을 만듭니다. 그리고 두 번째 모델은 텍스트 데이터 인식을 담당하는 TER로 BERT 모델을 이용하여 만들어집니다. 그런 다음 이 두 모델의 결과를 멀티모달 머신러닝 모델을 통해 결합합니다.