우리의 움직임을 통해 우리의 감정을 해독하는 것이 가능합니까? 실험적 방법을 사용하여 “외부에서” 감정을 어떻게 연구할 수 있습니까? 이러한 질문에 답하기 위해 독일 프랑크푸르트 암 마인에 있는 막스 플랑크 실험 미학 연구소(MPIEA)가 이끄는 대규모 국제 및 학제간 연구 팀이 통합적인 과학적 방법론을 개발했습니다. 연구원들은 모션 캡처 기술과 같은 예술적, 디지털 수단을 사용하여 감정을 표현하는 움직임의 객관적인 운동학적 특징을 측정하기 위해 EMOKINE 소프트웨어를 개발했습니다. 이번 연구 결과는 최근 저널에 게재됐다. 행동 연구 방법.

팀은 전문 댄서에게 녹색 화면 앞에서 짧은 춤을 반복해 달라고 요청했습니다. 그녀는 자신의 움직임을 통해 분노, 만족, 두려움, 행복, 중립, 슬픔 등 다양한 감정을 표현하도록 요청 받았습니다. 댄스 동작을 “데이터”로 기록하기 위해 과학자들은 Max Planck Institute for Applied Physics의 기술 제품군을 사용했습니다. 댄서는 총 17개의 고감도 센서가 장착된 XSENS®의 전신 모션 캡처 슈트를 입었습니다. 필름 카메라와 함께 역동적인 신체 움직임을 측정하고 기록했습니다. 그런 다음 연구원들은 객관적인 운동학적 특성(동작 매개변수)을 추출하고 프로그래밍된 EMOKINE 소프트웨어를 추출했습니다. 이 소프트웨어는 버튼 하나만 누르면 데이터세트에서 이러한 동작 매개변수를 제공합니다.

전신 움직임의 컴퓨터화된 추적

12개의 동작 매개변수로부터 총 32개의 통계가 수집되어 실험적인 댄스 데이터세트에서 추출되었습니다. 기록된 운동학적 매개변수는 예를 들어 속도, 가속도 또는 사지 수축이었습니다.

“우리는 이전 연구에 대한 문헌에서 별도로 논의된 전신 감정 운동의 12가지 운동학적 특징을 식별했습니다. 그런 다음 이를 모두 단일 데이터세트에서 추출한 다음 해당 특징을 EMOKINE 소프트웨어에 제공했습니다.”라고 제1저자인 Julia F는 말합니다. . MPIEA의 크리스텐슨.

동작 추적은 동작 매개변수의 객관적인 기록을 통해 사람들의 의도, 감정 및 정신 상태에 대한 통찰력을 제공할 수 있기 때문에 최근 몇 년 동안 많은 분야에서 사용되었습니다. 그러나 본 연구에서는 기록된 데이터로부터 의미 있는 결론을 도출하기 위해서는 이론 기반의 방법론이 필요합니다.

공동 제1저자인 독일 튀빙겐에 있는 막스 플랑크 지능 시스템 연구소의 안드레스 페르난데스(Andres Fernandez)는 “이 연구는 예술적 실천, 심리학, 컴퓨터 과학이 인간 인지 연구 방법을 개발하는 이상적인 방식으로 함께 작용할 수 있는 방법을 보여줍니다.”라고 말했습니다.

감정을 연구하기 위해 댄스 동작을 명시적으로 사용하는 소프트웨어 패키지와 함께 제공되는 방법론적 프레임워크는 손을 흔들거나 걷는 것과 같은 “감정적 행동”에 대한 비디오를 자주 사용했던 이전 연구 접근 방식과는 다릅니다.

“우리는 괴테 대학교 프랑크푸르트 암 마인, 글래스고 대학교의 많은 전문가와 포르투갈 WiseWorld Ai의 영화 팀이 참여한 이 작품을 출판하게 되어 특히 기쁩니다. 이 작품은 심리학, 신경 과학, 컴퓨터 분야의 학문을 하나로 모았습니다. 과학과 미학입니다.” 실험주의뿐만 아니라 춤과 영화에서도 마찬가지입니다.”라고 괴테 대학교 컴퓨터 과학, 컴퓨터 비전 및 인공 지능 연구소 교수인 수석 저자인 Gemma Roig는 요약합니다.

오픈 소스 소프트웨어 패키지

EMOKINE은 다음에서 무료로 제공됩니다. 제노두 그리고 깃허브 약간의 수정만으로 다른 모션 캡처 시스템에 적용할 수 있습니다. 무료로 제공되는 이러한 디지털 도구를 사용하여 댄서 및 기타 공연자 그룹의 감정 표현은 물론 일상적인 동작을 분석할 수 있습니다.

연구원들은 이제 자신들이 개발한 EMOKINE 소프트웨어가 실험 심리학, 정서 신경과학, 컴퓨터 비전 분야, 특히 컴퓨터와 시스템이 디지털 이미지 및 기타 시각적 입력을 통해 의미 있는 정보를 얻을 수 있습니다. EMOKINE은 과학자들이 전신 움직임의 운동학적 매개변수가 관찰자의 의도, 감정 및 다양한 정신 상태를 어떻게 전달하는지에 대한 연구 질문에 답하는 데 도움을 줄 것입니다.