AVROTROS maakt gebruik van generatieve AI om het kijkgedrag van televisiekijkers geautomatiseerd te analyseren. De technologie stelt de omroep in staat om automatisch videomateriaal te labelen, onderwerpen en personen in uitzendingen te identificeren en deze gegevens te koppelen aan kijkcijfers.
Volgens AVROTROS levert de technologie inzicht op in de relatie tussen inhoud en kijkgedrag, waaronder het moment waarop kijkers afhaken of juist blijven kijken. Voorheen werd dit werk handmatig uitgevoerd door redacteuren, wat volgens de omroep alleen uitvoerbaar was voor een beperkt aantal programma’s. De nieuwe oplossing werkt met een gerapporteerde nauwkeurigheid van ongeveer 90%, waardoor nu de gehele programmering kan worden geanalyseerd.
De technologie van Xebia is gebaseerd op een combinatie van spraakherkenning, beeldherkenning en onderwerpdetectie. Het systeem maakt gebruik van diensten van Google Cloud Platform, waaronder de Google Speech API voor transcriptie, Gemini voor inhoudsanalyse en de Google Video Intelligence API voor gezichtsherkenning. De gegenereerde gegevens worden opgeslagen in een vector database, wat gericht zoeken binnen grote hoeveelheden videomateriaal mogelijk maakt. Via een bijbehorende webapplicatie kunnen redacteuren de automatisch toegekende labels controleren en aanpassen.
De omroep stelt dat de inzet van de AI-oplossing zowel tijdswinst oplevert als inhoudelijke inzichten verschaft. Hierdoor kan de programmering volgens AVROTROS beter worden afgestemd op de voorkeuren van het publiek. De toepassing zou op termijn inzicht geven in welke soorten onderwerpen het best resoneren bij de kijker.