DNG in CVPR 2023 / カナダ バンクーバーで開催されるCVPR 2023にて「Live Demonstration: Event-based Visual Microphone」のデモを行います

2023. 06. 06

We will present our works at ACM CHI Conference on Human Factors in Computing System 2023 . See you in Vancouver!

デジタルネイチャー研究室は,カナダ バンクーバーで開催されるThe IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR) 2023 にて『Live Demonstration: Event-based Visual Microphone』のデモを行います.

Official Web: https://cvpr2023.thecvf.com/
会期: June 18-22, 2023


Live Demonstration: Event-based Visual Microphone

Non-contact measurement devices, such as laser Doppler vibrometers(LDV) and high-speed cameras, have been developed to measure various forms of vibrations. LDVs are expensive, and high-speed cameras have a significant trade off between resolutions and sampling frequency. Herein, we propose a non-contact, simple, and inexpensive approach to measure vibration using an event camera that records only changes in brightness. We demonstrated the reconstruction of audible sounds using the event camera; to the best of our knowledge, this study could be considered the first to successfully apply this method. This study addresses the challenges in measuring and reconstructing vibrations without requiring additional lighting and using a cost-effective method that can recover audible sounds and human voice. This method provides a new avenue for scientists and engineers to develop cost-effective and noncontact methods for measuring and reconstructing vibrations and sounds.

Project page: Event-based Visual Microphone
Publication page: Publication

CVPR 2023 Workshop on Event-based Vision
Workshop day: June 19, 2023. 2nd day of CVPR. Full day workshop.

Time: 10:30
Session 2: Poster session: contributed papers and courtesy presentations (as posters). Live Demonstrations.


 For more information, please click here.


名 称 : デジタルネイチャー研究室
所在地 : 茨城県つくば市春日1-2
指導教員 : 准教授 落合 陽一,助教 伏見 龍樹
研究内容 : 波動工学、デジタルファブリケーション、人工知能技術を用いた空間研究開発
URL : https://digitalnature.slis.tsukuba.ac.jp/


落合 陽一 Yoichi Ochiai
1987生,2015年東京大学学際情報学府博士課程修了(学際情報学府初の短縮終了),博士(学際情報学).日本学術振興会特別研究員DC1,米国Microsoft ResearchでのResearch Internなどを経て,2015年より筑波大学図書館情報メディア系助教 デジタルネイチャー研究室主宰.2015年,Pixie Dust Technologies.incを起業しCEOとして勤務.2017年から2019年まで筑波大学学長補佐,2017年から大阪芸術大学客員教授,2020年デジタルハリウッド大学特任教授,金沢美術工芸大学客員教授,2021年4月から京都市立芸術大学客員教授を兼務.2017年12月より,ピクシーダストテクノロジーズ株式会社による筑波大学デジタルネイチャー推進戦略研究基盤代表及び准教授を兼務.2020年6月デジタルネイチャー開発研究センター・センター長就任.専門はCG,HCI,VR,視・聴・触覚提示法,デジタルファブリケーション,自動運転や身体制御.

伏見 龍樹 Tatsuki Fushimi


名称 : 筑波大学デジタルネイチャー研究室
Email : contact<-at->digitalnature.slis.tsukuba.ac.jp <-at->を@に置き換えてください