NEWS お知らせ

本日、北海道大学の学位授与式が開催され、当研究室の博士課程学生3名に博士号の学位が授与されました．

また、李広君が学院長賞を受賞しました！

皆さん、誠におめでとうございます！

それぞれの次のステージでの活躍を期待しています！

2023年9月5日（火）～9月7日（木）に北海道大学で開催の「第21回建設ロボットシンポジウム」にて、当研究室の小川教授が以下の基調講演を行いました。

●基調講演

次世代インフラ維持管理・防災・減災に向けたデータ駆動型研究に関する取組

小川 貴弘 (北海道大学大学院情報科学研究院）

第２１回建設ロボットシンポジウム

（The 21th Symposium on Construction Robotics in Japan）

－ ロボット技術と建設の融合によるDXの更なる発展 －

https://ccrr.jp/event/symposium/2023/2023.html

長谷山美紀（情報科学研究院／データ駆動型融合研究創発拠点 教授）

「世界を変えるAI研究の最前線」

https://www.hokudai.ac.jp/researchtimes/2023/08/academic-fantasista-2023.html

Guang Li, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Dataset distillation using parameter pruning”, IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences, 2023. (Accepted for publication)

https://www.ieice.org/eng_r/index.html

2023年8月9日（水）に北海道大学にて開催されたシンポジウム「雪国の未来をつなぐ　産官学地域連携とデータサイエンス」で当研究室長谷山教授が以下の基調講演を行いました。

基調講演　「北海道大学における産官学地域連携と融合研究」

https://d-red.research.hokudai.ac.jp/news/2023-7-11.html

（講演）最先端 AI 研究を基盤とした産官学地域連携によるインフラ DX への取組

https://www.express-highway.or.jp/workshop/detail.html?pdid=232E01

（特別講演）最先端マルチメディアAI技術の異分野融合研究への発展的導入

https://ai.med.hokudai.ac.jp/news/1763/

ゴム材料解析に関する研究成果がIEEE Accessに採録されました。本研究は，住友ゴム工業株式会社との共同研究による研究成果となります．

Rintaro Yanagi, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Material compound-property retrieval using electron microscope images for rubber material development,” IEEE Access, 2023. (Accepted)

Yusuke Akamatsu, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Zero-shot Neural Decoding with Semi-supervised Multi-view Embedding,” Sensors (Accepted for publication)

2023年7月25日（火）〜7月28日（金）の日程で開催された国内最大規模の画像認識系の国内会議、画像の認識・理解シンポジウムMIRU2023にて当研究室から6件の発表を行いました！

【ロングオーラル】

・ OS5A-L1：Yingrui Ye, Yuya Moroto, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama (Hokkaido Univ.)，Zero-shot Visual Sentiment Prediction with Cross-domain Sentiments Using Knowledge Distillation

【ショートオーラル】

・ OS1B-S1：Guang Li, Ren Togo, Takahiro Ogawa, Miki Haseyama (Hokkaido Univ.)，Dataset Distillation via Self-Adaptive Parameter Matching

・ OS1B-S9：Zongyao Li, Ren Togo, Takahiro Ogawa, Miki Haseyama (Hokkaido Univ.)，Source-data-free Domain-adaptive Semantic Segmentation with Inter-domain and Intra-domain Style Transfer

・ OS3B-S1：Yuto Watanabe, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama (Hokkaido Univ.)，Text-guided Image Manipulation Tolerant to Real-world Image

【インタラクティブ】

・ IS2-100：Yuya Moroto, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama (Hokkaido Univ.)，Human Emotion Recognition While Viewing Images Based on Multi-view Variational Recurrent Neural Network

・ IS2-102：Kyohei Kamikawa, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama (Hokkaido Univ.)，Feature integration introducing back-projection based on ordering in labels for rating prediction

http://cvim.ipsj.or.jp/MIRU2023/

Yuya Moroto※, Rintaro Yanagi※, Naoki Ogawa, Kyohei Kamikawa, Keigo Sakurai, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Personalized Content Recommender System via Non-verbal Interaction Using Face Mesh and Facial Expression”

※ equal contribution

https://www.acmmm2023.org/

[1] Keigo Sakurai, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Bundle Detection Based on Graph Convolutional Network Considering Categorical Hierarchical Relationship”

[2] Tatsuki Seino, Naoki Saito, Takahiro Ogawa, Satoshi Asamizu, Miki Haseyama, “Skill Level Classification Using Motion Data via Spatial Temporal Graph Convolutional Network”

[3] Masaki Kashiwagi, Keisuke Maeda, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Deterioration Level Estimation for Infrastructures Considering Noisy Labels via DivideMix”

[4] Masaya Sato, Keisuke Maeda, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Caption Unification for Multiple Viewpoint Lifelogging Images and Its Verification”

[5] Haruka Matsuda, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Text-To-Image Diffusion Model Suppressing Catastrophic Forgetting via Elastic Weight Consolidation”

[6] Taro Togo, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Novel Feature Extraction for Classification of Auditory-Visual Stimuli From fNIRS Signals”

[7] Xiang Li, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Improving Visual Counterfactual Explanation Models for Image Classification via CLIP”

[8] Haoyang Wang, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “A Controllable Recoloring Method for Novel Views Using Segment Anything Model”

https://www.ieee-gcce.org/2023/

コンシューマエレクトロニクスに関する国際会議IEEE ICCE-TW 2023 (2023 IEEE International Conference on Consumer Electronics – Taiwan)に当研究室より７件の発表を行いました。

また、[5]の発表がBest Paper Award (Honorable Mention)を受賞しました！おめでとうございます！

[1] Masaki Yoshida, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Binaural Audio Generation with Data Augmentation from 360° Videos”

[2] Tsubasa Kunieda, Ren Togo, Noriko Nishioka, Yukie Shimizu, Shiro Watanabe, Kenji Hirata, Keisuke Maeda, Takahiro Ogawa, Kohsuke Kudo, Miki Haseyama, “Estimation of Amyloid-β Positivity Using QSM Images Considering Age Information”

[3] Huaying Zhang, Rintaro Yanagi, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Parameter-efficient Tuning of a Pre-trained Model via Prompt Learning in Cross-modal Retrieval”

[4] He Zhu, Ren Togo, Takahiro Ogawa, Miki Haseyama, “A Medical Domain Visual Question Generation Model via Large Language Model”

[5] Ryota Goka, Yuya Moroto, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Shoot Event Prediction in Soccer Considering Expected Goals Based on Players’ Positions”

[6] Ryota Goka, Yuya Moroto, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Prediction of Shoot Events by Considering Spatio-temporal Relations of Multimodal Features”

[7] Tatsuki Seino, Naoki Saito, Takahiro Ogawa, Satoshi Asamizu, Miki Haseyama, “Proficiency-level Estimation Using Heterogeneous Features via Label Dequantized CCA”

Koshi Watanabe, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Gaussian Process Decoder with Spectral Mixtures and Locally Estimated Manifold for Data Visualization,” Applied Sciences (Accepted for publication)

Naoki Saito, Keisuke Maeda, Takahiro Ogawa, Satoshi Asamizu, Miki Haseyama, “Visual emotion recognition through multimodal cyclic-label dequantized Gaussian process latent variable model,” Journal of Robotics and Mechatronics (Accepted for publication)

世界トップの画像処理系国際会議2023 IEEE International Conference on Image Processing (IEEE ICIP 2023、開催地：Malaysia Kuala Lumpur、採択率：45%)に当研究室から投稿した以下の5件の論文が採択されました。
①
Yuto Watanabe, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “TEXT-GUIDED FACIAL IMAGE MANIPULATION FOR WILD IMAGES VIA MANIPULATION DIRECTION-BASED LOSS”
②
Yuki Era, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “VIDEO-MUSIC RETRIEVAL WITH FINE-GRAINED CROSS-MODAL ALIGNMENT”
③
HE ZHU, Ren Togo, Takahiro Ogawa, Miki Haseyama, “INTERPRETABLE VISUAL QUESTION ANSWERING REFERRING TO OUTSIDE KNOWLEDGE”
④
Yuya Moroto, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “MULTI-VIEW VARIATIONAL RECURRENT NEURAL NETWORK FOR HUMAN EMOTION RECOGNITION USING MULTI-MODAL BIOLOGICAL SIGNALS”
⑤
Kyohei Kamikawa, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “FEATURE INTEGRATION VIA BACK-PROJECTION ORDERING MULTI-MODAL GAUSSIAN PROCESS LATENT VARIABLE MODEL FOR RATING PREDICTION”

現地ギリシャ ロードス島で発表を行いました！

(1) Koshi Watanabe, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Learning graph Laplacian from intrinsic patterns via Gaussian process”

(2) Hiroki Okamura, Keisuke Maeda, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Improving dropout in graph convolutional networks for recommendation via contrastive loss”

(3) Ryo Shichida, Ren Togo, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Estimation of visual contents from human brain signals via VQA based on brain-specific attention”

(4) Ryosuke Sawata, Takahiro Ogawa, Miki Haseyama, “Class-aware shared Gaussian process dynamic model”

(5) Jiahuan Zhang, Keisuke Maeda, Takahiro Ogawa, Miki Haseyama, “Defense against black-box adversarial attacks via heterogeneous fusion features”

(6) Masaki Yoshida, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Binauralization Robust to Camera Rotation Using 360°Videos”

(7) Rintaro Yanagi, Ren Togo, Takahiro Ogawa, Miki Haseyama, “Recallable question answering-based re-ranking considering semantic region for cross-modal retrieval” (OJSP Review Track枠)

１．東孝明，小川 直輝，前田 圭介，小川 貴弘，長谷山 美紀，”データ横断型対照学習を用いた道路構造物における変状画像の劣化レベル分類”

２．李宗曜，前田 圭介，藤後 廉，小川 貴弘，長谷山 美紀，”Developing technologies for the practical application of deep learning-based distress segmentation in subway tunnel images”

「１」の論文は東日本高速道路株式会社との共同研究，「２」の論文は東京地下鉄株式会社との共同研究の成果になります．

—-

本シンポジウムにて発表した論文は，「AI・データサイエンス論文集」として，J-STAGEに掲載されています．

2023年7月25日（火）～28日（金）に浜松で開催されるMIRU2023に、以下の4件の口頭発表論文(ロングオーラル：1件、ショートオーラル：3件）が採択されました。

【ロングオーラル発表(約16%)】

(1) Zero-shot Visual Sentiment Prediction with Cross-domain Sentiments Using Knowledge Distillation

【ショートオーラル発表(約30%)】

(2) Dataset Distillation via Self-Adaptive Parameter Matching

(3) Source-data-free Domain-adaptive Semantic Segmentation with Inter-domain and Intra-domain Style Transfer

(4) Text-guided Image Manipulation Tolerant to Real-world Image

http://cvim.ipsj.or.jp/MIRU2023/