计划研究多模态知识图谱方向，利用多模态信息：文本+图像+知识图谱+视频+时间序列。。。，来进行一些应用。第一步先进行相关文献的阅读。