QQ浏览器视频搜索中的多模态技术

演讲简介：
移动互联网生态下，用户越来越习惯消费视频资源，视频资源的生产数量也在明显变多。视频作为一个包含文本、封面、视频帧、音频等各种模态的综合载体，在搜索引擎中相比于图文网页带来更大的困难挑战。同时多模态技术也在近些年变成了关注的热点。
本次分享着重于视频搜索中多模态匹配、多模态融合技术在QQ浏览器视频搜索中的实践应用。

大纲：
1.背景
1） QQ浏览器搜索、视频搜索介绍；
2） 多模态技术在视频搜索中的位置与重要性；
3） 多模态技术面临的难点与挑战；
2.关键技术
1）目标介绍；
2）封面视觉匹配技术演化；
3）视频内容帧匹配技术演化；
4）ocr/asr引入的演化路径；
5）多模态融合的演化；
3.后续技术展望

演讲人介绍：
本科就读于西安交通大学计算机系，研究生毕业于中国科学技术大学，毕业后加入百度搜索算法部，后加入腾讯PCG搜索应用部，负责QQ浏览器内视频搜索业务。在搜索排序、点击、多模态、NLP文本分类等方面，有多年经验积累。