IT-consultancybedrijf Xebia heeft samen met AVROTROS een innovatieve GenAI-oplossing ontwikkeld waarmee de omroep direct inzicht krijgt in wat kijkers interesseert of juist laat afhaken. De oplossing analyseert en labelt automatisch videomateriaal, identificeert onderwerpen en personen in tv-programma’s en koppelt deze aan kijkcijfers.
AVROTROS bereikt maandelijks twee op de drie Nederlanders met hun tv-programma’s. De omroep, bekend van programma’s als EenVandaag, Eva, Wie is de Mol? en de uitzendingen van het Eurovisie Songfestival, heeft een sterke behoefte aan meer inzicht in kijkcijfers om beter te bepalen wat kijkers trekt of juist doet afhaken.
Voorheen bekeken redacteuren handmatig urenlang uitzendingen om onderwerpen en personen te labelen. Dit arbeidsintensieve proces was slechts voor enkele programma’s praktisch haalbaar. De door Xebia ontwikkelde oplossing automatiseert dit proces volledig met een nauwkeurigheid van ongeveer 90%, waardoor de volledige programmering nu geanalyseerd kan worden.
Het systeem combineert drie AI-technologieën: spraakherkenning om gesprekken om te zetten naar tekst, kunstmatige intelligentie om onderwerpen te identificeren, en beeldherkenning om personen te detecteren. De oplossing maakt gebruik van Google Cloud Platform, met Google Speech API voor taaldetectie en transcriptie, Gemini voor het extraheren van onderwerpen, en Google Video Intelligence API voor gezichtsdetectie.
De verzamelde informatie wordt opgeslagen in een vector database, wat snel zoeken binnen duizenden uren videomateriaal mogelijk maakt.
emerce
23-04-2025 11:50