광주과학기술원(GIST·총장 임기철) 융합기술학제학부 소속 '팀 지스트(연구책임자 홍진혁 교수)' 연구팀이 음악의 리듬과 선율을 피부로 느낄 수 있는 '햅틱 밴드'를 개발, 26일 장벽 없는(배리어 프리) 기획공연에서 선보일 예정이라고 24일 밝혔다.
팀 지스트는 씨케이머티리얼즈랩, 한국과학기술원(KAIST), 세종대, 핸드스피크 등의 기업 및 기관과 공동으로 '청각장애인의 음악 향유를 위한 음악·댄스 실감가시화 기술 개발' 과제 성과물인 '햅틱 밴드'를 개발했다.
이번 연구과제는 지난 2021년 6월부터 올해 12월 말까지 2년 7개월간 진행한다. 기획공연에서 사용성에 대한 프로토타입을 검증하기 위해 신청자 8명을 모집해 햅틱 밴드를 착용하고 공연을 관람할 수 있도록 할 예정이다.
햅틱 밴드는 외부 공연 음악(사운드)을 감지해 엔벨롭 팔로어(최저음 분석), 트랜션트(리듬 시작 부분), 음악의 빠르기(BPM) 등의 요소를 분석해 햅틱의 강도와 진동수로 변환해주는 장치다. 수어 공연이 전달하는 리듬감을 더 풍부하게 전달하기 위해 리듬 중심으로 사운드 분석-진동 변환을 통해 공연 감상을 지원하는 도구로 활용할 수 있다.
충남음악창작소에서 열리는 기획공연 '어디 왓(What) 수어? 공연 왓(What) 수어!'는 농인과 비장애인 아티스트의 협업을 통해 모두가 함께 관람할 수 있다. 공연을 제작하고 문화적인 소외 현상을 극복하기 위한 프로젝트로 2021년부터 매년 개최하고 있다.
올해는 예비사회적 기업 '핸드스피크'소속 아티스트와 충남음악창작소가 발굴한 지역 뮤지션들이 함께 무대에 올라 음악과 수어의 콜라보로 공연을 선보일 예정이다. 음악의 리듬을 피부로 느낄 수 있을뿐 아니라 수어 퍼포먼스를 시각으로 즐기는 공감각적 융복합의 특별한 공연이 될 것으로 기대하고 있다.
핸드스피크와 몽돌, 원태림 가수가 함께 최초 기획 단계부터 곡 선정, 수어 번역·감수, 연습 등의 과정을 거쳐 충남음악창작소 라이브홀에서 26일 오후 4시와 저녁 6시30분 2회에 걸쳐 열린다. 포스터의 QR코드 또는 사전예약 링크를 통해 누구나 예약할 수 있으며 전석 무료다.
홍진혁 교수는 “이번 공연은 청각이 아닌 감각으로 음악을 경험하도록 지원한다는 점 뿐만 아니라 수어를 통해 음악의 분위기, 가사, 리듬감을 표현하는 '농문화'의 음악 장르에 참여한다는 점에서 뜻깊다”며 “햅틱 밴드를 통해 청각장애가 없는 '청인'과 청각장애가 있는 '농인'이 함께 즐길 수 있고, 농인 청중에게 피드백을 받아 볼 수 있는 귀한 기회가 될 것으로 예상한다”고 말했다.
한편, 연구팀은 후속 연구 계획으로 현재 한국전자통신연구원(ETRI)이 주관하는 '정보통신기획평과원(IITP)의 청각장애인을 위한 다감각 음악 실감시스템 및 교육 솔루션 개발' 공동연구기관으로 참여하고 있다. 청각장애인의 음악 교육 콘텐츠로 확장 실증할 예정이다.
광주=김한식 기자 hskim@etnews.com
