생성형 AI 기반 미디어아트의 상호작용 유형 및 특성 분석

초록

(연구배경 및 목적) AI 기술의 급속한 발전으로 생성형 AI가 예술 분야에 점점 더 많이 활용되고 있으며, 이를 통해 미디어아트에서 관객과의 상호작용 방식이 새롭게 정의되고 있다. 생성형 AI 기반 미디어아트는 예술 표현의 경계를 확장하며, 관객이 작품과 실시간으로 상호작용할 수 있도록 한다. 그러나 이러한 AI 기반 미디어아트의 급속한 발전과는 달리, 생성형 AI 기반 미디어아트와 관객과의 상호작용에 관한 체계적인 연구는 아직 미흡한 실정이다. 따라서 본 연구는 텍스트와 음성 입력을 활용하여 관객의 상호작용을 처리하는 생성형 AI 기반 미디어아트를 중심으로 상호작용 유형을 분석하고, 그 고유한 특성을 규명하는 것을 목적으로 한다. (연구방법) 본 연구는 생성형 AI를 활용하여 관객과 상호작용하는 미디어아트의 대표사례를 대상으로 하였다. 상호작용 유형은 대화형 인터페이스의 상호작용 유형을 분류한 기존 연구를 바탕으로 하여 AI 상호작용 유형을 음성을 통한 상호작용과 텍스트를 통한 상호작용으로 분류하였다. 미디어아트 상호작용 개념은 선행연구를 참조하여, 관객의 입력에서 AI의 변환, 그리고 최종적인 퍼포먼스적 효과로 이어지는 단계별 상호작용 과정을 적용하였다. 분석 틀을 바탕으로 각 사례에서 음성과 텍스트 입력이 미디어아트 상호작용 방식과 관객의 경험에 미치는 영향을 유형별로 분석하였다. (결과) 분석 결과, 음성을 통한 상호작용은 관객에게 직관적이고 몰입적인 경험을 제공하여 자연스러운 참여를 가능하게 한다. 실시간 피드백을 통해 즉각적인 상호작용이 이루어져, 높은 몰입감을 유도하는 데 효과적이다. 음성 생성 상호작용의 경우, 관객의 음성 명령에 따라 AI가 음성 응답을 실시간으로 생성하여 참여의 즉각성과 직관성을 제공한다. 이미지 생성 상호작용에서는 관객의 음성 입력을 시각적 이미지로 변환하여 언어와 시각을 결합한 새로운 예술적 경험을 가능하게 한다. 텍스트를 통한 상호작용은 관객이 입력한 특정 명령에 대해 비교적 정밀하고 논리적인 피드백을 얻을 수 있도록 한다. 특히, 간결하고 정확한 명령 입력이 필요한 경우에 효과적이다. 텍스트와 음성을 결합한 상호작용의 경우, 관객의 텍스트 입력을 기반으로 음성 응답을 제공하여 다층적인 경험을 제공한다. 텍스트와 이미지를 결합한 상호작용에서는 입력된 텍스트가 시각적 요소와 융합되어 언어와 시각의 조화를 통한 예술적 경험을 가능하게 한다. (결론) 본 연구는 생성형 AI 기반 미디어아트에서 상호작용 유형을 음성을 통한 상호작용과 텍스트를 통한 상호작용으로 분류하고, 각 세부 유형을 분석하여, 그 특성을 분석하였다. 음성 입력은 즉각성과 직관성을 통해 관객의 몰입을 증대시키고, 텍스트 입력은 정밀하고 논리적인 상호작용을 지원하여 정확한 명령을 수용한다. 향후 연구에서는 다양한 상호작용 유형이 예술적 경험에 미치는 영향을 심층적으로 탐구하고, AI와 예술의 융합을 통해 표현 가능성이 확장되기를 기대한다.

키워드