인공지능(AI)이 관객의 감정 데이터를 분석해 음악을 만들고, 국악관현악단과 협연하는 공연이 국립극장 무대에 오른다.

AI 음악 스타트업 포자랩스는 오는 26일 개막하는 국립극장 공연에서 작곡 AI ‘지음’을 선보인다고 25일 밝혔다.

이번 공연에서 지음은 관객이 사전에 작성한 ‘최근 일상에서 느끼는 감정’ 등 비정형 한글 텍스트를 자연어 처리 기술로 분석한다. 포자랩스는 텍스트의 맥락과 감정의 정도를 데이터로 추출한 뒤, 이를 코드 진행과 템포, 악기 구성 등 작곡 요소로 바꿔 음악에 반영했다고 설명했다.

AI는 ‘불안과 두려움’, ‘휴식과 희망’ 등 관객의 감정값을 바탕으로 음악의 분위기와 전개를 구성했다. 공연에서는 지음이 무대 위 사회자와 관객의 발화를 인식하고 대화를 주고받는 방식으로 공연 흐름에도 참여한다.

포자랩스는 국악 특유의 정서를 반영하기 위해 5음 음계를 작곡 조건으로 설정했다. 느림과 보통, 빠름 등 곡의 구간별 장단 변화에 맞춰 음악 소스를 나눠 생성하는 방식도 적용했다.

이번 공연을 위해 개발자와 AI 연구원, 음악감독, 작곡가 등 전문 인력이 약 4개월간 협업했다. 포자랩스는 서양 음악 문법을 기반으로 한 AI 모델로 약 10분 길이의 국악 작품 초안을 만드는 과정에서 국악관현악단 협업에 필요한 수정 작업이 중요했다고 밝혔다.

포자랩스의 AI는 완성된 음악 전체뿐 아니라 세부 구간 단위로 음악을 생성할 수 있다. 국악 작곡가와 연주자의 피드백에 따라 특정 악기나 구간을 다시 생성해 수정 작업에 활용했다.

최종 음악은 국악 작곡가의 편곡을 거쳐 국악관현악 작품으로 완성했다. 국악 특유의 시김새는 AI가 자동으로 처리하기보다 작곡가와 연주자의 해석에 맡겼다.

관련기사

무대 위 지음은 음성 인식(STT)과 거대언어모델(LLM), 음성 합성(TTS) 기술을 연결해 작동한다. 포자랩스는 이를 통해 지음이 단순 음성 안내를 넘어 사회자와 관객의 대화에 반응하며 공연 전반의 이야기를 이끌도록 구성했다고 설명했다.

허원길 포자랩스 대표는 “전통 예술인 국악의 깊은 호흡과 AI 기술을 융합하는 과정은 기술적으로 도전적인 프로젝트였다”며 “관객의 마음을 위로하는 AI 기술의 가능성을 국립극장 무대에서 보여주고 싶다”고 말했다.