像检索的方式是利用一些增加元数据(metadata)的方法，例如：字幕、关键词或是图像的说明，如此一来就可以透过註解词完成检索。人工的图像註解是费时、费力并且昂贵；为了解决这个问题，已经有大量的研究在做自动图像註解方面上。此外，越来越多的社会网路应用和语义网已经产生了数个以网路为基底发展的图像註解工具。第一个以微电脑为基底开发的图像资料库检索系统，是由80年代麻省理工学院里的Banireddy Prasad、Amar Gupta 、Hoo-min Toong、and Stuart Madnick所共开发