多媒体资料库在早期的研究以影像资料库（Image Database）为主，主要的研究方向则是以影像处理与图形识别技术，如切割（Segmentation）、特征抽取（Feature Extraction）等来设计影像资料库的索引，并进而应用图形识别的辨识（Matching）技术来作为近似存取（Fuzzy Query）的方法。

近来多媒体资料库已经越来越多样化，因此应用的方向也从影像扩充到视讯、声音的索引与查询。视讯资料与影像资料的差别，主要在于多了一个维度（Dimension）：时间轴。换句话说，除了要分析视讯中每张影像的空间关系外，另外还需要将影像的连续性构成时间轴来进行分析。

此外，由于视讯的复杂程度高，如何建立关键的索引与提供适合的查询方式，例如结合语意或自然语言等方式，仍是目前学术界有兴趣研究的领域。
...
...