分享一个腾讯开源的多模态内容理解框架

大家好，我是DASOU。

前段时间QQ浏览器组织了一次2021AI算法大赛，其中一个赛道是多模态视频相似度判定。

比赛结束之后，我顺藤摸瓜发现腾讯把baseline的框架开源了，地址在这里：

https://github.com/Tencent/Lichee

对框架的官方介绍如下：

Lichee是一个多模态内容理解算法框架项目，其中包含数据增强、预训练引擎、常见模型以及推理加速等模块。由腾讯看点内容算法研发中心研发。并于2021年在腾讯看点、腾讯视频、内容管线、QQ等业务场景均有落地，并平均减少标注样本量40%+。经过多次实践迭代，可以大幅缩短信息流内容理解需求的研发周期提升人效。此外，为QQ浏览器2021AI算法大赛-多模态视频相似度赛道提供baseline模型及代码。现将Lichee对外开源，为微服务开源社区贡献力量。

如果有在做多模态的朋友，但是苦于没有代码可以魔改的，可以试试这个~~