Multimediesøk
Multimediesøk lar en bruker stille spørringer (queries) i flere forskjellige datatyper, som tekst og andre multimedia formater. Multimediesøk kan bli implementert med multimodale søkegrensesnitt, for eksempel grensesnitt som tillater spørringer ikke bare i form av tekst, men også av andre typer medier. Vi kan skille imellom to hovedmetodologier i multimediesøk:
- Metadatasøk: søket er gjort på de forskjellige lagene med metadata.
- Spørring ved eksempel: Man stiller spørringer ved å gi en form for informasjon (for eksempel: et bilde, en film, eller en lydfil) for å finne lignende multimedie-filer.
Metadatasøk rediger
Søket er utført på laget av metadata som inneholder informasjon om multimediefiler. Metadatasøk er relativt enkelt, og er raskt og effektivt sammenlignet med søk på komplekse datatyper som film og audio. Dette er fordi det er et rent tekstsøk.
Det er noen forutsettninger for å kunne utføre metadatasøk:
- Oppsummering av medieinnhold: Et utdrag av innholdet i mediefilen for å gi en beskrivelse.
- Filtering av mediebeskrivelser: For eksempel å fjerne overflødig og gjentatt informasjon.
- Kategorisering av mediebeskrivelser: Kategorisering inn i klasser for bedret effektivitet.
Spørring ved eksempel rediger
I spørring ved eksempel bruker man et tilsvarende element som det man leter etter, altså multimedie-innhold. Med andre ord, spørringen tar form av et medie. Søket utfores oftes ved å sammenligne metadata generert ved indeksering.
- Bildesøk: Metadataattributter som farge og dimensjoner blir brukt for sammenligning.
- Audiosøk: Metadataattributter som lengde og frekvens.
- Videosøk: Kan sees på som en kombinasjon av bildesøk og audiosøk, da en video er en rekke bilder med eller uten et lydspor.
Multimedie-søkemotor rediger
Vi kan distingvere imellom to forskjellige typer søkemotorer innen multimediesøk:
Visuell søkemotor rediger
I denne kategorien for søk kan vi skille i mellom bildesøk og videosøk
- Bildesøk: Hovedsakelig gjøres bildesøk med metadata, men det blir mer og mer normalt å bruke spørring ved eksempel. For eksempel QR-strekkoder.
- Videosøk: Videoer kan bli søkt etter ved hjelp av enkel metadata, som beskrivelser og lignende, eller ved mer kompleks metadata, som lengde og bildekvalitet. Det er også normalt å benytte Audio søkemotorer på lydsporet til videofiler.
Audio søkemotor rediger
Det er flere møter å utføre søk på audiofiler:
- Metadata: Spørringer utført på metadata lagret om lydfilene. Dette kan være metadata generert ved indeksering, som lengde og lydkvalitet, eller metadata generert av andre bruker, som for eksempel tagging og beskrivelser.
- Spørring ved eksempel: Å søke etter audiofiler ved å bruke lydfiler lignende det man søker etter.