项目组及机构--多媒体内容分析及检索

现在，越来越多的音视频数据需要处理。2006年一年数字摄像机的现售亮就有8300万，视频数据在网络上传播占总流量的一半以上，单单youTbe就占了10%。越来越多的用户喜欢把自己的空闲时间花在在网上浏览视频或图片。这就是为什么今年来如同youTube，Flickr等网站会如此红火的原因。

 

现在工业界普遍使用的多媒体检索系统绝大多数是利用text以及Tag信息(如字幕，文件名，关键字)。这虽然提供了一个能商用的大用户量多媒体搜索方案，但远远没有实现对多媒体语义信息的有效查询。text信息过于主观而有时候缺乏与内容本身的联系，一个图片的名字很可能与图片信息内容完全无关；tag信息则往往与内容更相关，但是给多媒体内容打上多个tag信息是一件累人的工作。

多媒体内容分析及检索系统的使命是解决现有基于text和Tag的检索的不足，提供了一个可以提供多媒体信息本身的语义信息检索的平台。基于内容的多媒体检索也越来越受到Google，Yahoo以及Blinx的注意。

 

我现在也在从事多媒体内容分析的研究，最近在网上也海找相关的学者以及资料，现在初步的总结一下。也请大家补充。

首先我觉得多媒体检索绝对是一门综合学科，是CV，Image/audio-processing ，video-processing，Infomation Retrieval的综合。所以网上多媒体检索有关的资源往往是以项目组的形式存在。很少有学者专门单单研究多媒体技术的（除了专门做视频编码），大家大多数是从事自己特定领域的研究，然后再把一些技术proting到多媒体检索上，有一个综合，完成某项特定的task。初学者往往能从多媒体项目中接触很多技术，但做深了还是得回归到相关领域（CV，IR，V/I/A processing）中相对较窄的一块，希望能从中得到突破以催化多媒体检索的突破。所以下面列举的仅仅是多媒体检索的一些项目组。

 

研究领域，NIST 的TRECVID ，ACM 的MultiMedia leading the way.

项目组方面：美国CMU的Informedia 与CU的DVMM 是顶级的project。

                  法国国家研究院也有相关的项目组并且也很出色：irit 的SAMOVA    以及inria 的IMEDIA

                  企业研究院：IBM的MARVEL Multimedia Search Engine 以及 MERL 的Multimedia   Microsoft的MSM