Word Cloud for Meeting

2021. 10. 14

Word Cloud for Meeting: A Visualization System for DHH People in Online Meetings
ワードクラウド・ミーティング:ろう・難聴者とのオンライン会議のための発言内容の可視化システム

Deaf and hard of hearing (DHH) people have limited access to auditory input, so they mainly receive visual information during online meetings. In recent years, the usability of a system that visualizes the ongoing topic in a conference has been confirmed, but it has not been verified in a remote conference that includes DHH people. One possible reason is that visual dispersion occurs when there are multiple sources of visual information. In this study, we introduce “Word Cloud for Meeting,” a system that generates a separate word cloud for each participant and displays it in the background of each participant’s video to visualize who is saying what. We conducted an experiment with seven DHH participants and obtained positive qualitative feedback on the ease of recognizing topic changes. However, when the topic changed in a sequence, it was found to be distracting. Additionally, we discuss the design implications for visualizing topics for DHH people in online meetings.

Project Members: Ryo Iijima, Akihisa Shitara, Sayan Sarcar, Yoichi Ochiai

ろう・難聴者がオンライン会議に参加する補助として、リアルタイム文字起こしサービスが普及してきた。しかし、複数の視覚的情報源(文字起こし、参加者の顔、スライドなど)を同時に見るのは難しく、視線の移動が多くなるという問題がある。視覚的情報源を増やすことで好影響をもたらす例として、会議のリアルタイム可視化システムが提案されてきたが、ユーザーが文字起こしに頼る状況での検証はされていない。そこで、ろう・難聴者にとって有益な会議の可視化手法を調べるため、誰が何を言ったのかを一目で確認できることを目指したシステム「ワードクラウド・ミーティング」を開発し、予備的研究を行った。本システムは、各参加者の発言内容をワードクラウドの形でリアルタイムに可視化し、その人物の背景に表示する。

プロジェクトメンバー: 飯嶋稜、設楽明寿、Sarcar Sayan、落合陽一
Contact / 連絡先:ryoiijima -at- digitalnature.slis.tsukuba.ac.jp