1. Introduction

Journal: IEEE Transactions on Visualization and Computer Graphics
Author: Xingbo Wang, Jianben He, Zhihua Jin, Muqiao Yang, Yong Wang, and Huamin Qu
Year: 2021
ISBNs, DOls, PMIDs, or arXiv IDs:

DOI: 10.1109/TVCG.2021.3114794
Cite: X. Wang, J. He, Z. Jin, M. Yang, Y. Wang and H. Qu, “M2Lens: Visualizing and Explaining Multimodal Models for Sentiment Analysis,” in IEEE Transactions on Visualization and Computer Graphics, vol. 28, no. 1, pp. 802-812, Jan. 2022, doi: 10.1109/TVCG.2021.3114794.
Reportor: 孙百乐
Attachment: pdf

2. Figures

image.png

3. Summary

本文属于vis4ai领域,提出了一个可视化系统M^2Lens,通过提取三种模态(语言、视觉、声学)的基本特征,并抽象为高级特征,再归纳出模态内和模态间的关系以及模板,提供层层递进的用户视图来帮助多模态情感分析模型的开发者和使用者发现模型的问题。

4. Main Points

  1. 一个用于多模态情感分析模型的可视化系统。
  2. 案例研究和专家访谈。

M2Lens.pdf