多媒体和多模型检索(multimedia and multimodel retrieval),理学-计算机科学技术-计算机应用-信息系统-信息检索-特殊类型信息检索,对多媒体对象的内容及上下文语义环境进行多模态交互的检索。对不同模态的媒体对象从低层到高层进行分析、处理和理解,从而根据获取的内容进行检索。原始的多媒体数据库经过预处理步骤来提取多媒体对象的特征,根据特征语义层次的不同,可分为低层特征和高层特征。低层特征描述了多媒体的可视化信息,高层特征描述了多媒体的语义表达信息,通常称这些高层特征为语义概念。当用户根据需要提供查询输入,如文字、图像、视频等,则检索系统根据这些不同的查询,利用查询媒体预处理模块使查询对象的特征形式与多媒体数据库中的特征形式相一致,然后检索系统将处理后的查询输入和多媒体数据库中的特征进行匹配,匹配度高的特征对应的多媒体对象将被作为结果返回给用户。多媒体和多模态检索通常是融合不同的模态进行检索,而不是对它们的关系进行建模。在检索过程中,查询和要检索的内容可能包含不止一个模态,但至少有一个模态是相同的。