Augmented auditory feedback has been a powerful tool for augmenting motor behavior. As reported in Human Computer Interaction community, sonifying body actions helps perceiving one’s physical activity in more precision. On the other hand, in some other studies sonification of body actions altered perception of activity, resulting in a significant change of emotional response and behavior of participants. In this study, such technique is applied to sports activities, using sound effects to sonify body actions. This study specifies the targeted sports as boxing training and badminton single, and specifies their actions as physical impact and physical movement. The goal of the study is to design a method to sonify targeted sports to alter perception, emotional response, and exertion, and explore the value of the concept. To achieve the goal, prototypes and sonification method were designed to conduct user test of the concept. Results of user test showed overall emotional improvement on sports activities. Sound effects resembling recorded sample from actual actions significantly improved participants’ physical exertion. Sound effects implying different situation (e.g. water-related sounds) provided virtual-reality-like experience. Sound effects expressing denser medium such as water made participants to feel resisted to their body movements, and therefore they perceived their body as less agile. In the process, this study proposes a guideline for designing sonification method for the concept proposed in this study. Finally, design applications are proposed, and field-tested in real sports environment using prototypes to discuss about further insights.
보강 청각 피드백은 운동행동을 인지적으로 보강하는데 있어 중요한 도구로 사용된다. 인간-컴퓨터 상호작용 분야에서는 신체 활동에 대한 소리화를 통해 본인 움직임에 대한 인지의 정확도를 높이는 데 도움을 주는 것으로 알려져있다. 반면 인지의 정확도 뿐만 아니라, 소리화를 통해 신체 활동에 대한 인지를 변화시켜 감성적 반응과 행동적 반응의 변화를 가져오는 기법에 대한 사례가 있다. 본 연구는 이러한 기법을 스포츠 활동에 적용시켰으며, 그 소리화의 수단으로 음향효과를 사용하였다. 본 연구에서는 타겟 스포츠를 복싱 훈련과 단식 배드민턴으로 선정하였고, 두 활동의 동작을 물리적 타격과 움직임으로 정의하여 탐구하였다. 본 연구의 목표는 신체 동작의 소리화를 이용해 스포츠 활동에 대한 인지를 변화시키고, 이를 통해 감성적 반응과 스포츠에 대한 노력을 증진시키는 기법을 탐구하는 것이다. 이를 달성하기 위해 체험 가능한 프로토타입과 소리화 방법을 디자인하였으며, 이를 이용해 사용자 경험 평가를 실시하였다. 평가 결과 전반적인 감정적 증진이 관찰되었으며, 본래 운동시 발생하는 소리와 비슷한 음향효과로 소리화한 경우 노력의 유의한 증가가 관찰되었다. 운동 상황과 전혀 다른 음향효과(예: 물살을 가르는 소리)로 소리화 할 시 피실험자는 가상현실과 같은 경험을 했다. 물과 같이 공기보다 밀도가 높은 소리로 소리화를 하면 신체 동작에 대한 저항력을 상상하여 본인의 민첩성이 떨어지는 것으로 인지하였다. 이러한 탐구 과정을 통해 본 컨셉을 디자인 할때 가이드라인을 제시하였다. 결론적으로 본 연구에서는 이러한 컨셉의 디자인 응용 방안을 제시하고, 이를 실제 스포츠 상황에 자유롭게 적용시키는 체험 평가를 실시하여 그에 대해 심층적으로 논의하였다.
