IIP Lab
Board

메뉴 건너뛰기

2024년 1월 25일부터 3월 27일까지 약 두 달 동안 국제 멀티미디어 학술대회 (ICME, International Conference on Multimedia and Expo)에서 립리딩 챌린지 'ChatCLR Challenge'가 개최되었습니다.
https://mispchallenge.github.io/ICME2024/index.html

지능정보처리연구실팀(박정균,김연진,백재은 석사과정)은 본 대회의 'Task 2: Target Speaker Lipreading' 부분에서 우수한 성적으로 최종 3위를 차지하였습니다.

ChatCLR 챌린지는 일상적인 대화를 포함한 실세계 다중 화자 시나리오에서 원거리 촬영된 영상을 바탕으로, 시각 정보만을 활용하여 립리딩 인식을 수행하는 대회입니다. 'Task2: Target Speaker Lipreading'은 특정 화자의 립리딩 인식률을 향상시키는 것을 목표로 하며, 참가자들은 특정 화자에 모델을 최적화하여 성능을 개선해야 합니다. 이번 대회에서 대회에서는 2-6명의 화자가 중국어로 발화하는 영상이 제공되었습니다.

연구팀은 원거리 촬영된 영상에 적합한 학습 데이터 증강 방법을 개발하고, 중국어 인식률을 향상하기 위해 사전 학습 모델 기반 cross-lingual 학습 전략을 적용함으로써 뛰어난 결과를 달성하였습니다.

제안한 립리딩 시스템 개요.png

Notice & News

번호 제목 글쓴이 날짜 조회 수
notifications [정보] 2023년 IIPLAB 연구실 소개 자료 IIP연구실 2023.04.13 920
notifications [안내] 지능정보처리연구실 학부연구생 모집 IIP연구실 2022.12.23 926
notifications [정보] 박형민교수 인공지능학과 겸직 참여 및 전자공학과/인공지능학과 학생 모집 IIP연구실 2021.11.15 1652
55 [축하] 2024학년도 하계 학위 수여식 (정원, 이상윤, 박정균) file IIP연구실 2024.08.20 76
54 [안내] 2024 지능정보처리 우수 연구 세미나 개최 file IIP연구실 2024.05.13 213
» [축하] ChatCLR Challenge Task 2, 최종 3위 file IIP연구실 2024.04.29 225
52 [News] Smilegate AI News편 (박정균 석사과정) IIP연구실 2024.03.19 237
51 [축하] 2023학년도 학위 수여식 (고재현, 김석현, 박영후, 허현준 / 김승진, 백재은) file IIP연구실 2024.02.20 228
50 [News] SBS Biz 참 좋은 하루 방송 출연(박형민 교수) file IIP연구실 2024.01.25 296
49 [수상] 2023 한국음성학회 가을 학술대회 우수 논문 발표상 수상(구본혁 석박통합과정) file IIP연구실 2023.12.05 175
48 [수상] 교수 창업 기업((주)엠피웨이브) ‘CES 2024‘ 혁신상 2개 부문 수상 file IIP연구실 2023.11.28 242
47 [수상] 2022학년도 교육업적 최우수 교원 선정 file IIP연구실 2023.11.28 85
46 [수상] 2023 한국어 AI 경진대회, 제1분야(일반부-최우수상) / 제2분야(더존비즈온-우수상) 수상 file IIP연구실 2023.11.17 169
45 [언론보도] 최연소 뇌공학회장 박형민 교수 과학기술X학회 특집 인터뷰 IIP연구실 2023.06.09 276
44 [축하] 한국뇌공학회 회장 취임(박형민 교수) file IIP연구실 2023.05.10 161
43 [정보] 2023년 IIPLAB 연구실 소개 자료 IIP연구실 2023.04.13 920
42 [축하] 2022학년도 학위 수여식 (유호건, 김도희, 박진영, 이승현, 조준희) file IIP연구실 2023.02.21 305
41 [수상] 2022 퀄컴논문대전 장려상 수상(신의협 박사과정) file IIP연구실 2023.01.18 226
40 [안내] 지능정보처리연구실 학부연구생 모집 IIP연구실 2022.12.23 926
39 [News] 서강가젯 73호, '서강을 만나다' 박형민교수 인터뷰 file IIP연구실 2022.12.14 258
38 [수상] 2022 인공지능 그랜드 챌린지 3차 대회 최종 1위 수상 file IIP연구실 2022.11.30 338
37 [수상] 2021학년도 교육 및 연구업적 최우수 교원 선정 file IIP연구실 2022.11.25 160
36 [수상] 2022학년도 서강 리치 공학상(강의상,학술상) 수상 file IIP연구실 2022.10.28 189