Shio Miyafuji

宮藤 詩緒

Tokyo Institute of Technology School of Computing
Assistant Professor at Koike Lab
東京工業大学情報理工学院 情報工学系
小池研究室 助教

Publication 論文一覧： Google Scholar Citation / Publication


CV

Work Experiecnce

Education

Academic Activity

Research Funds

Awards and Invited Talk / Invited Demo

Publication (International Conference / Domestic Conference / Demo and Poster)

Work Experience 職務経歴

  • 2018 - 2020 Research Fellowship for Young Scientists DC2
  • 2020 -   　Assistant Professor in School of Computing, Tokyo Institute of Technology
  • Visiting Researcher
    • 2018 Apr. - 2018 Jun.: Prof. Mark Chignell’s lab, University of Tront
    • 2018 Oct. - 2019 Jan.: Prof. Gudrun Klinker’s lab, Technical University in Munich

Education 学歴

  • 2015 BE: Dept. of Engineering, Tokyo Institute of Technology
  • 2017 ME: Dept. of Computer Science, School of Engineering, Tokyo Institute of Technology

  • 2020 Dr. of Eng.: School of Computing, Tokyo Institute of Technology

  • 高校：渋谷教育学園渋谷高等学校
  • 学士：東京工業大学 工学部 情報工学科　学士課程修了 (2015)
  • 修士：東京工業大学大学院 情報理工学研究科 計算工学専攻　修士課程修了 (2017)
  • 博士：東京工業大学 情報理工学院 情報工学系　博士課程修了 (2020)

Academic Activity 学術活動

Committee Service 学会運営

  • 2018 - 2020 情報処理学会ヒューマンコンピュータインタラクション研究会　学生運営委員
  • 2019 - 2021 ACM CHI Symposium, Asian CHI Symposium Organizer
  • 2020 -    Interaction Web委員
  • 2021     CHI2021 Organizer: Social Media Chair
  • 2022 -    WISS ボランティア委員

Professional Societies 所属学会

  • ACM
  • IEEE
  • 情報処理学会ヒューマンコンピュータインタラクション研究会
  • 日本ソフトウェア科学会

Research Funds 競争的資金獲得

  • 2021 日本学術振興会 科研費 若手研究
  • 2020 科学技術振興機構(JST) CREST AIPチャレンジプログラム
  • 2020 日本学術振興会 科研費 研究活動スタート支援
  • 2018 日本学術振興会 特別研究員奨励費 DC2
  • 2017 電気通信普及財団 平成29年度海外渡航旅費援助
  • 2016 東京工業大学基金130周年記念博士進学エンカレッジ奨学金

Awards and Inveited Talk / Invited Demo 表彰歴・招待講演/招待デモ

  • 2018 情報処理学会 第176回ヒューマンコンピュータインタラクション研究会　招待講演
  • 2016 Invited Demo at 18th Laval Virtual 2016

Publication 出版

Journal　学術論文

  • Urakami, Jacqueline & Matulis, Henrique & Miyafuji, Shio & Li, Zhengqing & Koike, Hideki & Chignell, Mark. (2022). Comparing immersiveness and perceptibility of spherical and curved displays. Applied Ergonomics. 90. https://doi.org/10.1016/j.apergo.2020.103271

  • 宮藤詩緒, 佐藤俊樹, 小池英樹,「DisplayBowl: 半透過凹型半球面ディスプレイの試作と評価」, コンピュータソフトウェア, 日本ソフトウェア科学会, 37巻1号p.1_114-1_124, 2020.

  • Zhengqing Li, Shio Miyafuji, Toshiki Sato, Naomi Yamashita, Hideki Koike, Hideaki Kuzuoka, “Impact of Display Shapes on Symmetric 360° Video Communication For Remote Collaboration” 日本バーチャルリアリティ学会論文誌, 2019, 24 巻, 2 号, p. 165-176, 公開日 2019/06/30, Online ISSN 2423-9593, Print ISSN 1344-011X, https://doi.org/10.18974/tvrsj.24.2_165

  • 宮藤詩緒, 佐藤俊樹, Li Zhengqing, 小池英樹. 「Qoom: 球体形インタラクティブディスプレイ」, コンピュータソフトウェア, 日本ソフトウェア科学会, Vol. 35, No. 2, Apr. 2018.

Conference Paper 学会論文

International Conference

  • Yasheng Sun, Qianyi Wu, Hang Zhou, Kaisiyuan Wang, Tianshu Hu, Chen-Chieh Liao, Shio Miyafuji, Ziwei Liu, and Hideki Koike. 2023. Make Your Brief Stroke Real and Stereoscopic: 3D-Aware Simplified Sketch to Portrait Generation. In Proceedings of the 25th International Conference on Multimodal Interaction (ICMI ‘23). Association for Computing Machinery, New York, NY, USA, 388–396. [https://doi.org/10.1145/3577190.3614106] (https://doi.org/10.1145/3577190.3614106)

  • Yuka Tashiro, Shio Miyafuji, Dong-Hyun Hwang, Satoshi Kiyofuji, Taichi Kin, Takeo Igarashi, and Hideki Koike. 2023. GAuze-MIcrosuture-FICATION: Gamification in Microsuture training with real-time feedback. In Proceedings of the Augmented Humans International Conference 2023 (AHs ‘23). Association for Computing Machinery, New York, NY, USA, 15–26. https://doi.org/10.1145/3582700.3582704

  • Luna Takagi, Shio Miyafuji, Jefferson Pardomuan, and Hideki Koike. 2023. LUNAChair: Remote Wheelchair System Linking Users to Nearby People and Assistants. In Proceedings of the Augmented Humans International Conference 2023 (AHs ‘23). Association for Computing Machinery, New York, NY, USA, 122–134. https://doi.org/10.1145/3582700.3582714

  • Jana Hoffard, Shio Miyafuji, Jefferson Pardomuan, Toshiki Sato, Hideki Koike. 2022. OmniTiles-A User-Customizable Display Using An Omni-Directional Camera Projector System. In Proceedings of the 2022 ICAT-EGVE 2022 - International Conference on Artificial Reality and Telexistence and Eurographics Symposium on Virtual Environments (ICAT-EVCG2022). The Eurographics Association. pp.149-158. https://diglib.eg.org:443/handle/10.2312/egve20221286

  • Ruopeng Xu, Toshiki Sato, Shio Miyafuji, and Hideki Koike. 2022. OmniLantern: Design and Implementations of a Portable and Coaxial Omnidirectional Projector-Camera System. In Proceedings of the 2022 International Conference on Advanced Visual Interfaces (AVI 2022). Association for Computing Machinery, New York, NY, USA, Article 13, 1–5. https://doi.org/10.1145/3531073.3531126

  • Mikihito Matsuura, Shio Miyafuji, Erwin Wu, Satoshi Kiyofuji, Taichi Kin, Takeo Igarashi, and Hideki Koike. 2021. CV-Based Analysis for Microscopic Gauze Suturing Training. In Augmented Humans Conference 2021 (AHs’21). Association for Computing Machinery, New York, NY, USA, 169–173. https://doi.org/10.1145/3458709.3458991

  • Tsubasa Kitayama, Shio Miyafuji, and Hideki Koike. 2020. Vision Extension for a Ball Camera by Using Image Completion. In Proceedings of the Augmented Humans International Conference (AHs ‘20). Association for Computing Machinery, New York, NY, USA, Article 4, 1–5. https://doi.org/10.1145/3384657.3384802

  • Shio Miyafuji, Florian Perteneder, Toshiki Sato, Hideki Koike, and Gudrun Klinker. 2019. A Bowl-Shaped Display for Controlling Remote Vehicles. In Proceedings of the 17th International Conference on Virtual-Reality Continuum and its Applications in Industry (VRCAI ‘19). Association for Computing Machinery, New York, NY, USA, Article 10, 1–8. https://doi.org/10.1145/3359997.3365706

  • Mark Chignell, Henrique Matulis, Bella Zhang, Jacqueline Urakami, Shio Miyafuji, Zhengqing Li, Hideki Koike:“Immersiveness and Perceptibility of Convex and Concave Displays”, IEA International Conference, Human Factors and Ergonomics Society (HFES ‘19), Seattle, Washington, USA, November 2019. https://doi.org/10.1177/1071181319631141

  • Zhengqing Li, Shio Miyafuji, Erwin Wu, Toshiki Sato, Hideaki Kuzuoka, Hideki Koike:“OmniGlobe: An Interactive I/O System For Symmetric 360-Degree Video Communication”, ACM International Conference, Designing Interactive Systems Conference (DIS ‘19), San Diego, California, USA, June 2019. https://doi.org/10.1145/3322276.3322314

  • Zhengqing Li, Shio Miyafuji, Toshiki Sato, Hideki Koike, Naomi Yamashita, Hideaki Kuzuoka:“How Display Shapes Affect 360-Degree Panoramic Video Communication”, ACM, Designing Interactive Systems Conference (DIS ‘18), pp.845-856, Hong Kong, China, June 2018. https://doi.org/10.1145/3196709.3196753

  • Shio Miyafuji, Toshiki Sato, Zhengqing Li, Hideki Koike:“Qoom: An Interactive Omnidirectional Ball Display”, ACM International Conference, User Interface Software and Technology (UIST ‘17), pp.599-609, Québec City, Canada, October 2017. https://doi.org/10.1145/3126594.3126607

  • Zhengqing Li, Shio Miyafuji, Toshiki Sato, Hideki Koike:“OmniEyeball: Spherical Display Embedded with Omnidirectional Camera Using Dynamic Spherical Mapping”, Asian Workshop on User Interface, No.3, Tokyo, Japan, October 2016. (Best Paper Award 受賞)

  • Shio Miyafuji, Masato Sugasaki, Hideki Koike:“Ballumiere: Real-time Tracking and Projection System for High-Speed Flying Balls”, ACM International Conference, Interactive Surfaces and Spaces (ISS ’16).ACM, pp.33–37, Niagara Falls, Ontario, Canada, November 2016. https://doi.org/10.1145/2992154.2992181

Domestic Conference

  • [ショート採録]　幸谷有紗，戛山英高，浦垣啓志郎，宮藤詩緒，小池 英樹, “動いている人の視線だけを惹きつけるモザイク投影手法”, 日本ソフトウェア科学会, 第31回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2023), No.20, pp.92-98, 長野県, 八ヶ岳, 2023年12月. https://www.wiss.org/WISS2023Proceedings/data/20.pdf (最優秀発表賞（プログラム委員）)

  • [ロングティザー]　田代優香，宮藤詩緒，清藤哲史，金太一，五十嵐健夫，”小池英樹脳神経外科医のためのMR縫合訓練システム”, 日本ソフトウェア科学会, 第31回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2023), No.T02, 長野県，八ヶ岳，2023年12月. https://www.wiss.org/WISS2023Proceedings/data/T02.pdf

  • [ショート採録] 高木瑠名，宮藤詩緒，ジェフェルソンパルドムアン，小池英樹, “車椅子使用者を周囲の人と遠隔介助者に繋ぐ遠隔車椅子システム”, 日本ソフトウェア科学会, 第30回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2022), No.13, pp.94-101, 宮城県, 蔵王, 2022年12月. https://www.wiss.org/WISS2022Proceedings/data/13.pdf

  • [ショート採録] 田代優香，宮藤詩緒，HwangDong-Hyun，清藤哲史，金太一，五十嵐健夫，小池英樹. “リアルタイムフィードバックとスコアリングを導入した顕微鏡縫合術訓練”, 日本ソフトウェア科学会, 第30回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2022), No.9, pp.63-71, 宮城県, 蔵王, 2022年12月. https://www.wiss.org/WISS2022Proceedings/data/09.pdf

  • [ロング採録] 宮藤 詩緒，豊原 宗一郎，佐藤 俊樹，小池 英樹, “ボウルディスプレイ：半球型全周囲ディスプレイ”, 日本ソフトウェア科学会, 第28回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2018), 長野県, 八ヶ岳, 2018年9月 https://www.wiss.org/WISS2018Proceedings/oral/08.pdf

  • [ロング採録]　宮藤 詩緒，LI ZHENGQING，佐藤 俊樹，小池 英樹, “Qoom: 球体型インタラクティブディスプレイ”, 日本ソフトウェア科学会, 第24回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2016), 滋賀県, 長浜, 2016年12月. https://www.wiss.org/WISS2016Proceedings/oral/20.pdf

Demo and Poster 学会論文 (デモ/ポスター)

Demo

  • Zhengqing Li, Shio Miyafuji, Erwin Wu, Toshiki Sato, Hideaki Kuzuoka, Hideki Koike:“OmniEyeball: An Interactive I/O Device For 360-Degree Video Communication.”, ACM, Interactive Surfaces and Spaces (ISS ‘18), pp.429-432, Tokyo, Japan, November 2018. https://doi.org/10.1145/3279778.3279926

  • Shio Miyafuji, Masato Sugasaki, and Hideki Koike. 2016. Ballumiere: Real-Time Tracking and Projection for High-Speed Moving Balls. In Adjunct Proceedings of the 29th Annual ACM Symposium on User Interface Software and Technology (UIST ‘16 Adjunct). Association for Computing Machinery, New York, NY, USA, 101–102. https://doi.org/10.1145/2984751.2985717

  • Shio Miyafuji, Masato Sugasaki, Toshiki Sato, Hideki Koike:“Qoom: A Touch-sensitive Interactive Spherical Display and its Environment using Dynamic Projection Mapping”, Laval Virtual 2016, Laval, France, March 2016.(Invited Demo)

  • Shio Miyafuji and Hideki Koike. 2015. Ballumiere: real-time tracking and projection system for high-speed flying balls. In SIGGRAPH Asia 2015 Emerging Technologies (SA ‘15). Association for Computing Machinery, New York, NY, USA, Article 2, 1. https://doi.org/10.1145/2818466.2818492 (口頭発表有り)

Poster

  • Yuka Tashiro, Shio Miyafuji, Satoshi Kiyofuji, Taichi Kin, Takeo Igarashi and Hideki Koike, “MR Microsurgical Suture Training System for Neurosurgeons,” 2023 IEEE International Symposium on Mixed and Augmented Reality Adjunct (ISMAR-Adjunct), Sydney, Australia, 2023, pp. 458-459, https://doi.org/10.1109/ISMAR-Adjunct60411.2023.00099.

  • Arisa Kohtani, Hidetaka Katsuyama, Shio Miyafuji and Hideki Koike, “MOSion: Situation-Dependent Mosaicing System using High-Speed Projection,” 2023 IEEE International Symposium on Mixed and Augmented Reality Adjunct (ISMAR-Adjunct), Sydney, Australia, 2023, pp. 732-735, https://doi.org/10.1109/ISMAR-Adjunct60411.2023.00158

  • Arisa Kohtani, Keishiro Uragaki, Shio Miyafuji and Hideki Koike, “Displacement Projection Mapping: a Projection Method to Add Geometric Features beyond the Boundary of the Real Object,” 2023 IEEE International Symposium on Mixed and Augmented Reality Adjunct (ISMAR-Adjunct), Sydney, Australia, 2023, pp. 727-731, https://doi.org/10.1109/ISMAR-Adjunct60411.2023.00157

  • Hidetaka Katsuyama, Shio Miyafuji, Arisa Kohtani, and Hideki Koike. 2023. Volu-Me Fan: Turn Your Layered-fan into a Volumetric Display. In Proceedings of the 2023 ACM Symposium on Spatial User Interaction (SUI ‘23). Association for Computing Machinery, New York, NY, USA, Article 39, 1–3. https://doi.org/10.1145/3607822.3618006

  • Luna Takagi, Shio Miyafuji, Jefferson Pardomuan, and Hideki Koike. 2022. LUNAChair: Remote Wheelchair System that Links Up a Remote Caregiver and Wheelchair Surroundings. In Adjunct Proceedings of the 35th Annual ACM Symposium on User Interface Software and Technology (UIST ‘22 Adjunct). Association for Computing Machinery, New York, NY, USA, Article 40, 1–3. https://doi.org/10.1145/3526114.3558729

  • Jana Hoffard, Shio Miyafuji, Jefferson Pardomuan, Toshiki Sato, and Hideki Koike. 2022. FroggyHand: A Gesture Based Control System for Omni-Directional Projections. In Augmented Humans 2022 (AHs 2022). Association for Computing Machinery, New York, NY, USA, 298–300. https://doi.org/10.1145/3519391.3524027

  • Yuka Tashiro, Mikihito Matsuura, Dong-Hyun Hwang, Shio Miyafuji, Satoshi Kiyofuji, Taichi Kin, Takeo Igarashi, and Hideki Koike. 2022. Introducing a Concept of Gamification to Microscopic Suturing Training. In Augmented Humans 2022 (AHs 2022). Association for Computing Machinery, New York, NY, USA, 294–297. https://doi.org/10.1145/3519391.3524026 (Best Poster Award)

  • Luna Takagi, Toshiki Sato, Shio Miyafuji, and Hideki Koike. 2021. Real-time Projection of Lip Animation onto Face Masks using OmniProcam. In ACM SIGGRAPH 2021 Posters (SIGGRAPH ‘21). Association for Computing Machinery, New York, NY, USA, Article 20, 1–2. https://doi.org/10.1145/3450618.3469171

  • Shio Miyafuji, Soichiro Toyohara, Toshiki Sato, and Hideki Koike. 2019. Remote control experiment with displaybowl and 360-degree video. In ACM SIGGRAPH 2019 Posters (SIGGRAPH ‘19). Association for Computing Machinery, New York, NY, USA, Article 62, 1–2. https://doi.org/10.1145/3306214.3338568

  • Shio Miyafuji, Soichiro Toyohara, Toshiki Sato, Hideki Koike:“Remote Control Experiment with DisplayBowl and 360-degree-video”, Asian CHI Symposium: Emerging HCI Research Collection in ACM CHI19, No.21, Glasgow, UK, May 2019.

  • Shio Miyafuji, Soichiro Toyohara, Toshiki Sato, Hideki Koike:“DisplayBowl: A Bowl-Shaped Display for Omnidirectional Videos”, ACM International Conference, User Interface Software and Technology Adjunct Proceedings (UIST ‘18), pp.99-101, Berlin, Germany, October 2018. https://doi.org/10.1145/3266037.3266114

  • Zhengqing Li, Shio Miyafuji, Toshiki Sato, Hideaki Kuzuoka, and Hideki Koike. 2018. OmniEyeball: Spherical Display Equipped With Omnidirectional Camera And Its Application For 360-Degree Video Communication. In Adjunct Proceedings of the 31st Annual ACM Symposium on User Interface Software and Technology (UIST ‘18 Adjunct). Association for Computing Machinery, New York, NY, USA, 33–35. https://doi.org/10.1145/3266037.3266092

  • Soichiro Toyohara, Shio Miyafuji and Hideki Koike:“ARial Texture: Dynamic Projection Mapping on Drone Propellers”, IEEE International Symposium on Mixed and Augmented Reality (ISMAR-Adjunct), pp. 206-211, Nantes, France, October 2017.https://doi.org/10.1109/ISMAR-Adjunct.2017.68

  • Zhengqing Li, Shio Miyafuji, Toshiki Sato, and Hideki Koike. 2016. OmniEyeball: Spherical Display Embedded With Omnidirectional Camera Using Dynamic Spherical Mapping. In Adjunct Proceedings of the 29th Annual ACM Symposium on User Interface Software and Technology (UIST ‘16 Adjunct). Association for Computing Machinery, New York, NY, USA, 193–194. https://doi.org/10.1145/2984751.2984765

Demo/Poster (Domestic Conference)

  • 佐藤優稀，齊藤大智，Chen-ChiehLiao，宮藤詩緒，吉村奈津江，小池英樹, “音楽聴取時の脳波の周波数解析に基づくジャンル分類”, 日本ソフトウェア科学会, 第31回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2023), No.1-B12, 長野県, 八ヶ岳, 2023年12月.https://www.wiss.org/WISS2023Proceedings/data/1-B12.pdf

  • 小島悠介，田代優香，宮藤詩緒，清藤哲史，金太一，五十嵐健夫，小池英樹, “影真似を用いた顕微鏡縫合における器具姿勢学習システム”, 日本ソフトウェア科学会, 第31回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2023), No.20, pp.92-98, 長野県, 八ヶ岳, 2023年12月.https://www.wiss.org/WISS2023Proceedings/data/2-B03.pdf

  • 幸谷有紗，浦垣啓志郎，宮藤詩緒，小池英樹, “Displacement Projection Mapping:実物体の境界を超えた形状変化の投影”, 日本ソフトウェア科学会, 第30回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2022), 宮城県, 蔵王, 2022年12月.https://www.wiss.org/WISS2022Proceedings/data/T07.pdf (サイバーエージェント賞受賞)

  • 高木瑠名，宮藤詩緒，ジェフェルソンパルドムアン，小池英樹, “車椅子使用者を周囲の人と遠隔介助者に繋ぐ遠隔車椅子システム”, 日本ソフトウェア科学会, 第30回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2022), 宮城県, 蔵王, 2022年12月.

  • 田代優香，HwangDong-Hyun，松浦幹人，宮藤詩緒，清藤哲史，金太一，五十嵐健夫，小池英樹, “顕微鏡縫合術訓練におけるゲーミフィケーション要素の導入”, 日本ソフトウェア科学会, 第29回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2021), 静岡県, 浜松, 2021年12月.https://www.wiss.org/WISS2021Proceedings/data/2-B01.pdf

  • 宮藤 詩緒，LI ZHENGQING，佐藤 俊樹，小池 英樹, “おかしら会議: 球体型ディスプレイを用いた遠隔会議での一対一会話支援システム”, 日本ソフトウェア科学会, 第25回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2017), 長野県, 八ヶ岳, 2017年12月.https://www.wiss.org/WISS2017Proceedings/demo/3-A02.pdf

  • LI ZHENGQING，宮藤 詩緒，佐藤 俊樹，葛岡 英明，小池 英樹, “全天球カメラ付き球体ディスプレイの遠隔コミュニケーションへの応用”, 日本ソフトウェア科学会, 第25回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2017), 長野県, 八ヶ岳, 2017年12月.https://www.wiss.org/WISS2017Proceedings/demo/2-A04.pdf

  • 須ヶ﨑 聖人，宮藤 詩緒，佐藤 俊樹，小池 英樹, “Ballumiere: 高速浮遊物体への実時間追跡投影システム”, 日本ソフトウェア科学会, 第23回インタラクティブシステムとソフトウェアに関するワークショップ (WISS2015), 大分, 別府, 2015年12月. https://www.wiss.org/WISS2015Proceedings/demo/3-S01.pdf