Knowledge Organisation and its Role in Multimedia Information Retrieval

Abstract

Various kinds of knowledge organisation (such as thesauri) are routinely used to label or tag multimedia content such as images and music, to support information retrieval i.e. user search for such content. In this paper we outline why this is the case, in particular focusing on the semantic gap between content and concept based multimedia retrieval. We survey some indexing vocabularies used for multimedia retrieval, and argue that techniques such as thesauri will be needed for the foreseeable future in order to support users in their need for multimedia content. In particular we argue that Artificial Intelligence (A.I.) techniques are not mature enough to solve the problem of indexing multimedia conceptually, and will not be able to replace human indexers for the foreseeable future. ACKNOWLEDGEMENTS I am very grateful to my colleague Deborah Lee for her advice and links to/on thesauri for music and video, and also to David Bawden in confirming the lack of work in those domains. Thanks also go to Stella Dextre Clarke and Judi Vernau for their very constructive comments on various drafts of the paper.

Genre analysis of movies using a topic model of plot summaries

“…A key practical application of genre is in organizing a body of work and in finding similar examples. The "semantic gap" between machine-recoverable features of multimedia and human retrieval expectations means that human-applied metadata remains important for this purpose, though the two may work productively together for discovery (MacFarlane, 2016).…”

Organizacja wiedzy w cyfrowym świecie: wpływ rewolucji cyfrowej na ewolucję metod i narzędzi organizacji wiedzy

“…Wśród sześciu artykułów opublikowanych we wspomnianym numerze specjalnym KO autor tylko jednego, Birger Hjørland, wyraził przekonanie, że użyteczność dotychczasowej koncepcji tezaurusa we współczesnym środowisku wyszukiwania informacji wyczerpała się, jakkolwiek zaznaczył, że nadal pozostaje miejsce dla "more flexible semantic tools based on proper studies of domains" (Hjorland, 2016, 13). Autorzy pozostałych artykułów dowodzili natomiast, że potrzeba stosowania w wyszukiwaniu takich narzędzi jak tezaurusy jest nadal aktualna, prezentując jednak argumenty dotyczące przede wszystkim braku dobrych narzędzi semantycznych wspierających wyszukiwanie informacji specjalistycznej, w szczególności w takich środowiskach jak korporacyjne intranety, systemy zarządzania dokumentami, biblioteki obrazów, katalogi muzeów, archiwa zapisów dźwiękowych, pełnotekstowe bazy agencji prasowych, wielojęzyczne systemy zarządzania zasobami cyfrowymi (White, 2016;Kempf & Neubert, 2016;Tudhope & Binding, 2016;MacFarlane, 2016;Garcia-Marco, 2016). W kilku istotnych kwestiach istnieje jednak wyraźna zgoda.…”

The Style of Tetris is€Possibly Tetris?: Creative Professionals Description of Video Game Visual Styles

“…As a result, much of the research for image organization is still based on content analyses performed by individuals or machines rather than multi-user image organization analyses [7]. The emphasis on image content creates a semantic gap as defined in the image retrieval community [19], which prevents users from being able to discover concepts contained in the image. In addition, it also misses how the audience is using the image as well as what they perceive as important.…”