多模态，卷麻了

大家好，我是DASOU.

最近加我好友的朋友有点多，很多信息来不及回复，多包涵吧。

我们都知道，了解一下新的领域，最好的办法就是去读这个领域相关的论文。

一般来说，是先看综述文章，然后按照综述文章的文献，找到自己感兴趣的论文，去依次读下来就可以了。

那么就存在一个问题，这种综述文章怎么找呢？

一般来说谷歌学术就够了，或者在github上搜一下也能出来的。

所以，今天给大家分享一个收藏已久的宝藏仓库，是关于多模态方向的。

这个项目的名称是「awesome-multimodal-ml」

主要是对多模态各个方向的一些必读经典论文的汇总。

内容可以说是非常的全面了，项目大纲如下所示：

• Survey Papers

• Core Areas

• Multimodal Representations

• Multimodal Fusion

• Multimodal Alignment

• Multimodal Pretraining

• Multimodal Translation

• Crossmodal Retrieval

• Missing or Imperfect Modalities

• Analysis of Multimodal Models

• Knowledge Graphs and Knowledge Bases

• Intepretable Learning

• Generative Learning

• Semi-supervised Learning

• Self-supervised Learning

• Language Models

• Adversarial Attacks

• Few-Shot Learning

• Bias and Fairness

• Human in the Loop Learning

• Architectures

• Multimodal Transformers

• Multimodal Memory

• Applications and Datasets

• Language and Visual QA

• Language Grounding in Vision

• Language Grouding in Navigation

• Multimodal Machine Translation

• Multi-agent Communication

• Commonsense Reasoning

• Multimodal Reinforcement Learning

• Multimodal Dialog

• Language and Audio

• Audio and Visual

• Media Description

• Video Generation from Text

• Affect Recognition and Multimodal Language

• Healthcare

• Robotics

• Autonomous Driving

• Finance

• Human AI Interaction

作者每个方向是按照时间降序排列的。

大家可以根据自己感兴趣的方向，挑选有用的一些论文，按照顺序读一下。

项目地址：

https://github.com/pliang279/awesome-multimodal-ml

然后在推荐一下我自己的NLP学习仓库。

我把自己工作中的经验以及对NLP前沿论文的解读都放在了这个仓库。

目前已经3.1K星标，感兴趣的，后台回复【仓库】获取对应地址。