简介
我们提出了一种基于文本描述的可视化自动高亮与注释的方法。 该方法能够根据可视化图片和相应的文本描述自动生成图表高亮与注释效果。 演示者通过上传可视化图片及其相应文本描述，便可获得由带高亮与注释效果的可视化图片构成的一系列生动动画， 帮助引导观众的注意力，辅助数据信息的展现和数据故事的讲述。 该系统使用Mask R-CNN模型识别并提取目标可视化中的视觉元素以及相应的视觉属性。 同时，文本描述被解析以生成视觉搜索请求。 然后，基于识别结果和搜索请求，文本描述的每个句子被锚定到可视化的特定焦点区域。 最终，系统自动生成一系列链接到可视化特征的高亮与注释，并允许用户自定义样式。
引用
Chufan Lai, Zhixian Lin, Ruike Jiang, Yun Han, Can Liu, and Xiaoru Yuan.
Automatic Annotation Synchronizing with Textual Description for Visualization.
In Proceedings of ACM Conference on Human Factors in Computing Systems (CHI 2020), Honolulu, Hawai'i, USA. April 25-30, 2020.
图片
可视化自动高亮与注释工作流程
可视化自动高亮与注释示例