요코하마 국립대학 대학원 환경정보연구원 시마케이스케 준교수와 주식회사 밀우스 등은 수술 중 의사의 감정을 심전 센서와 AI를 이용해 가시화하는 시스템을 공동 개발했다.
이번 시스템은, 독자 개발한 AI 감정 추정 모델을 이용해, 의사의 가슴에 붙인 심전 센서 파형으로부터 수술중의 감정을 보이게 하는 것.감정은 사람들의 퍼포먼스를 크게 좌우하는 것이 경험적으로도 알려져 있기 때문에, 특히 생명을 맡는 수술중의 의사의 감정을 가시화하는 것이 중요하다고 할 수 있다.
본 시스템에서 AI에 의한 수술 중의 의사의 감정 추정 실험을 실시한 결과, 수술 개시 시점에서는 비교적 침착한 감정에 있었지만, 수술 후반에 수술야가 뇌내에 이른 가경 단계에서는 긴장을 표현하는 감정이 늘어난 것으로 보였다.감정의 기복에 대해서는, 강약을 반복하면서, 긴장시에서는 그 간격이 짧아지고 있는 것이 확인되었다.이러한 데이터는 심리학 전문가의 심리적 측면으로부터의 분석에도 효과적이다.
본 시스템에 의해, 숙련된 의사가 수술중의 각 스테이지에서 어떻게 감정을 컨트롤 하고 있는지의 가시화나, 숙련 의사에서도 긴장하는 수술 스테이지의 추출이 가능하게 되어, 연수의의 교육 등에 있어서 매우 유효한 , 객관적인 자료에 근거한 지식의 공유가 가능하게 될 것으로 예상할 수 있다.
수술 의사의 감정 가시화 뿐만 아니라, 감정 추정 기술에는 매우 광범위한 응용이 상정된다고 하고 있어, 예에는 앙케이트에 의한 상품·서비스 시장 조사, 헤드 마운트 디스플레이를 장착한 사람에 대응하는 아바타 감정 표현, 치매의 조기 발견 등의 의료 응용 등을 들고 있다.향후 AI 감정 추정 시스템은 성능 평가와 개량을 거듭해 다양한 장면에의 활용을 목표로 한다고 한다.