DNG in UIST 2022 / オレゴン州ベンドにて開催されるUIST 2022 にて口頭発表を行います

2022. 10. 25

We will present our work at The ACM Symposium on User Interface Software and Technology (USIT) 2022 in Bend, Oregon, U.S.A ! See you in Bend !

デジタルネイチャー研究室は,アメリカオレゴン州ベンドにて開催されるThe ACM Symposium on User Interface Software and Technology (UIST) 2022にて口頭発表を行います。

Official Web : https://uist.acm.org/uist2022/index.html

会 期:2022/10/29〜2022/11/02


[Oral] Photographic Lighting Design with Photographer-in-the-Loop Bayesian Optimization

 It is important for photographers to have the best possible lighting configuration at the time of shooting; otherwise, they need post-processing on images, which may cause artifacts and deterioration. Thus, photographers often struggle to find the best possible lighting configuration by manipulating lighting devices, including light sources and modifiers, in a trial-and-error manner. In this paper, we propose a novel computational framework to support photographers. This framework assumes that every lighting device is programmable; that is, its adjustable parameters (e.g., orientation, intensity, and color temperature) can be set using a program. Using our framework, photographers do not need to learn how the parameter values affect the resulting lighting, and even do not need to determine the strategy of the trial-and-error process; instead, photographers need only concentrate on evaluating which lighting configuration is more desirable among options suggested by the system. The framework is enabled by our novel photographer-in-the-loop Bayesian optimization, which is sample-efficient (i.e., the number of required evaluation steps is small) and which can also be guided by providing a rough painting of the desired lighting configuration if any. We demonstrate how the framework works in both simulated virtual environments and a physical environment, suggesting that it could find pleasing lighting configurations quickly in around 10 iterations. Our user study suggests that the framework enables the photographer to concentrate on the look of captured images rather than the parameters, compared with the traditional manual lighting workflow.


Project page: Photographic Lighting Design with Photographer-in-the-Loop Bayesian Optimization

Publication: https://digitalnature.slis.tsukuba.ac.jp/2022/10/pitl-publication/

Authors: Kenta Yamamoto, Yuki Koyama, Yoichi Ochiai

【Oral Presentation】

DETAILS:Paper, 15 min
SESSION:Wed, Nov 2 | 15:45 – 16:00 [Bend, Oregon, USA]


DETAILS: Demo, 120 min
SESSION: Mon, Oct 31 | 19:00 – 21:00 [Bend, Oregon, USA]


名称 : デジタルネイチャー研究室
代表者 : 准教授 落合 陽一
所在地 : 茨城県つくば市春日1-2
研究内容 : 波動工学、デジタルファブリケーション、人工知能技術を用いた空間研究開発
URL : https://digitalnature.slis.tsukuba.ac.jp/


落合陽一 Yoichi Ochiai

1987生,2015年東京大学学際情報学府博士課程修了(学際情報学府初の短縮終了),博士(学際情報学).日本学術振興会特別研究員DC1,米国Microsoft ResearchでのResearch Internなどを経て,2015年より筑波大学図書館情報メディア系助教 デジタルネイチャー研究室主宰.2015年,Pixie Dust Technologies.incを起業しCEOとして勤務.2017年から2019年まで筑波大学学長補佐,2017年から大阪芸術大学客員教授,2020年デジタルハリウッド大学特任教授,金沢美術工芸大学客員教授,2021年4月から京都市立芸術大学客員教授を兼務.2017年12月より,ピクシーダストテクノロジーズ株式会社による筑波大学デジタルネイチャー推進戦略研究基盤代表及び准教授を兼務.2020年6月デジタルネイチャー開発研究センター・センター長就任.専門はCG,HCI,VR,視・聴・触覚提示法,デジタルファブリケーション,自動運転や身体制御.


名称    : 筑波大学デジタルネイチャー研究室
Email : contact<-at->digitalnature.slis.tsukuba.ac.jp