DNG in ACM SUI 2021 / オンライン開催されるACM SUI 2021 にて発表を行います

2021. 11. 09

We will present our work at ACM SUI 2021 !デジタルネイチャー研究室は，オンライン開催される ACM SUI 2021 : ACM Spatial User Interactions にてポスター発表を行います。

Official Web : https://sui.acm.org/2021/
会　期：2021/11/09〜2021/11/10 （VIRTUAL）

発表プロジェクト

[Poster]Smartphone Drum: Gesture-based Digital Musical Instruments Application for Deaf and Hard of Hearing People

スマートフォン・ドラム：ジェスチャで振動を演奏する楽器アプリケーション

Project: Smartphone Drum
Publication: https://digitalnature.slis.tsukuba.ac.jp/2021/10/smartphone-drum-sui21/

Smartphone applications that allow users to enjoy playing musical instruments have emerged, opening up numerous related opportunities. However, it is difficult for deaf and hard of hearing (DHH) people to use these apps because of limited access to auditory information. When using real instruments, DHH people typically feel the music from the vibrations transmitted by the instruments or the movements of the body, which is not possible when playing with these apps. We introduce “smartphone drum,” a smartphone application that presents a drum-like vibrotactile sensation when the user makes a drumming motion in the air with their smartphone like a drumstick. We implemented an early prototype and received feedback from six DHH participants. We discuss the technical implementation and the future of new instruments of vibration.
楽器を遊べるスマホアプリが出回り、気軽に演奏する機会が増えてきた。しかし、ろう・難聴者は音の情報を得づらいため、それらのアプリを楽しむのが難しい。一方で実物の楽器は、楽器から体に伝わる振動や演奏動作から音楽を体験でき、ろう・難聴者にとって楽しみやすい。そこで、実物の楽器の「振動が感じられる」「体全体で演奏する」という特徴を楽器アプリに取り入れた最初のプロトタイプ「スマートフォン・ドラム」を開発し、予備的研究を行った。本アプリでは、スマートフォンをドラムスティックに見立てて、空中でドラムを叩く動作をすると、まるでドラムを叩いたかのような振動が返ってくる。
Project Members: Ryo Iijima, Akihisa Shitara, Sayan Sarcar, Yoichi Ochiai

2021年11月10日（水）02:00 (JST) [Tuesday November 9, 2021, 17:00 UTC]
Poster Session 1

2021年11月11日（木）01:25 (JST) [Wednesday November 10, 2021, 16:25 UTC]
Poster Session 2

Presenter: Ryo Iijima
Program: https://sui.acm.org/2021/program

研究室概要

名称：デジタルネイチャー研究室
代表者：准教授　落合陽一
所在地：茨城県つくば市春日1-2
研究内容：波動工学、デジタルファブリケーション、人工知能技術を用いた空間研究開発
URL ： https://digitalnature.slis.tsukuba.ac.jp/

代表略歴

落合陽一　Yoichi Ochiai

1987生，2015年東京大学学際情報学府博士課程修了（学際情報学府初の短縮終了），博士（学際情報学）．日本学術振興会特別研究員DC1，米国Microsoft ResearchでのResearch Internなどを経て，2015年より筑波大学図書館情報メディア系助教デジタルネイチャー研究室主宰．2015年，Pixie Dust Technologies.incを起業しCEOとして勤務．2017年から2019年まで筑波大学学長補佐，2017年から大阪芸術大学客員教授，2020年デジタルハリウッド大学特任教授，金沢美術工芸大学客員教授，2021年4月から京都市立芸術大学客員教授を兼務．2017年12月より，ピクシーダストテクノロジーズ株式会社による筑波大学デジタルネイチャー推進戦略研究基盤代表及び准教授を兼務．2020年6月デジタルネイチャー開発研究センター・センター長就任．専門はCG，HCI，VR，視・聴・触覚提示法，デジタルファブリケーション，自動運転や身体制御．

本件に関するお問い合わせ先

名称：筑波大学デジタルネイチャー研究室
Email ： contact<-at->digitalnature.slis.tsukuba.ac.jp

News