De toekomst van de media

In het laatste gedeelte van het Cross Media Café over Media & Uitvinders kijken we naar de toekomst aan de hand van een aantal ontwikkelingen in de wetenschappelijke wereld. Vertegenwoordigers van de Universiteit Twente, de Universiteit Amsterdam en TNO ICT aan het woord over de onderwerpen taal- en spraakherkenning, audio- en videozoeken en de belangrijkste trends in de mediawereld.

Zoeken in spraak

Dr. Roeland Ordelman is senior onderzoeker Multimedia Retrieval aan de Universiteit Twente. Hij weet alles van taal- en spraakherkenning als hulpmiddel voor het ontsluiten van audiovisuele content.

De digitalisering van historisch materiaal, dagelijkse professionele aanwas, user generated content en allerlei typen vastgelegde gesproken content als getuigenissen, interviews, vergaderingen, lezingen en telefoongesprekken leiden tot een steeds grotere verzameling ontsluitbare audio. Gebruikers van deze content zijn producers, journalisten, onderzoekers en het algemene publiek. Bij spraakherkenning gaat het erom dat je slim gebruik gaat maken van beschikbare data. Je probeert materiaal toegankelijk te maken door de informatie in het audiosignaal te exploiteren.

Belangrijk hierbij is dat je structuur aanbrengt, mede omdat je hierdoor later gemakkelijker tot spraakherkenning kunt overgaan. Ook sprekerkarakteristieken (man/vrouw, leeftijd, spreekstijl etc.) kunnen nuttige informatie opleveren voor spraakherkenning.

De Universiteit Twente heeft de spraakherkenner SHOUT ontwikkeld, een open source toolkit die voor iedereen beschikbaar is. Hoe goed werkt het nou allemaal, zo kun je je afvragen. Het is in elk geval zo dat zaken als de kwaliteit van de opname, de kwaliteit van de spraak en ook achtergronden een rol spelen. Dat iets niet helemaal herkend wordt is eigenlijk niet zo erg, als er al 50% van de woorden herkend wordt dan is dat vaak al genoeg en relevant voor het zoeken. Bovendien worden de belangrijkste inhoudswoorden meestal goed herkend.

Concluderend kun je zeggen:

• er is een zeer grote hoeveelheid rijke content
• handmatig beschrijven is kostbaar en per definitie beperkt
• verbeteren van de toegankelijkheid van audiovisuele content is mogelijk door gebruik van nieuwe technologie
• het audiosignaal bevat waardevolle informatie
• spraakherkenning heeft zich al bewezen als een nuttige tool

Zoeken in video

Prof. dr. ir. Arnold W M Smeulders werkt bij het Intelligent Systems Lab Amsterdam (ISLA) , Informatics Institute van de Universiteit van Amsterdam.

Hij geeft aan dat de wetenschap zich steeds meer ook met de creatieve industrie gaat bezig houden. Google had nooit bestaan als ooit de wetenschap zich niet met de achterliggende technologie had bezig gehouden. Men houdt zich bij het ISLA bezig met information mining, het blootleggen van informatie. Een alsmaar groeiende hoeveelheid video: 1.000.00.000 nieuwsitems, professionele content (alleen al Disney heeft 8 miljoen uur footage), consumenten content (10 miljoen uur video per jaar bij YouTube) en onderzoek (1.000.000.000 uren videoarchief).

Er is een internationale World search engine competition waar diverse partijen aan meedoen, onder meer de UvA en de TU Delft. Videozoeken loopt, aldus Smeulders, zo'n 10 jaar achter op spraakherkenning.

Dr. Cees G.M. Snoek van de Universiteit van Amsterdam geeft vervolgens een demonstratie van het detecteren van objecten op videobeelden. Arno Stokman vraagt aansluitend de zaal 'Why research on rushes summarization?'. Een rush is een onbewerkte tape die vaak dezelfde scene bevatten. Dus welke scene is het meest informatief of bevat bepaalde fragmenten. Wie in de zaal heeft daar wat aan? Een kleine groep van de aanwezigen steekt de hand op omdat men denkt dat dit zo is.

Prof. Smeulders geeft aansluitend het voorbeeld van een rechercheur die met het verzoek kwam om voor onderzoek naar kinderporno een toepassing te ontwikkelen, een oplossing die inmiddels succesvol gebruikt wordt.

Prof.dr. Maarten de Rijke van de Universiteit van Amsterdam gaat daarna op tekstherkenning en doet dat aan de hand van drie voorbeelden. Allereerst kun je de stemming op blogs volgen, een piek geeft aan dat er ergens in de wereld iets gebeurt (is). Je kunt ook voorspellen wat een nieuwsartikel gaat doen, wat de impact zal zijn. Tot slot kun je bepalen wat de stakeholders zijn, wie hoort bij welk onderwerp.

Prof. Smeulders vertelt dat hij samen met ilse media aan gezichtsherkenning werkt. Hij benadrukt verder dat Google economisch een zeer gevaarlijke macht geworden is omdat men zoveel weet van het gedrag van mensen.

De mediavoorspellingen

Prof. dr. ir. Erik Huizer, Directeur Kennis, en onderzoekers Ir. Mark van Staalduinen, Consultant, en Ir. Frits Klok, Senior Consultant (allemaal van TNO ICT) vullen het laatste deel van de bijeenkomst in. Huizer trapt af met een algemeen verhaal over trends in de media.

Aan de gebruikerskant zie je onder meer dat het mediagebruik niet meer lineair is. Profielen worden verder steeds belangrijker, niet alleen voor advertising maar ook om op stemmingen in te spelen. Een andere ontwikkeling is die van kijken naar beleving en van massa naar individu. Kennis komt breder beschikbaar en individuen bouwen op elkaars kennis. Een volgende trend is dat de interface, die eigenlijk vooral Windows was, steeds minder eenduidig wordt; er is een grotere verscheidenheid en met veel meer apparaten dan voorheen.

De trends aan de bedrijvenkant laten zien dat de markt weer veel meer een conversatie is geworden. Je moet van gesloten naar open, van Windows naar Google. De zoektocht naar andere businessmodellen is begonnen en dat geldt ook voor communicatiemodellen met klanten. 'Koppelen' is daarbij het motto.

Bij de overheid is het beeld niet veel anders. De geïnformeerde burger praat mee, ICT is vaak disruptive, soms driver en natuurlijk enabler. Er is geen sturing op technologische ontwikkelingen, maar men heeft wel met de consequenties te maken.

Op het vlak van devices spelen onder meer moleculaire en nano processoren, quantum computing, smart agents, schrift- en spraakherkenning, multitouch tafels en sensoren. De opkomt van sensoren brengt ons bij het 'internet of things'.

Dit alles leidt tot de mogelijkheid om allerlei nieuwe diensten te ontwikkelen. Hier zien we trends als contextualisering, augmented reality, data mining, serious gaming, virtualization en het virtual office.

Aan de infrastructuur kant speelt ook een aantal zaken. We draaien in feite nog steeds op het aloude (in 1969 ontwikkelde) internet protocol. Een van de problemen waar we tegenaan gaan lopen, is dat in juli 2010 de IP-adressen op zijn. Er komt dus een nieuw internet protocol. Een andere interessante ontwikkeling is mobiel IP. Dat houdt in dat je bijvoorbeeld een video kunt blijven bekijken als je naar een ander apparaat overschakelt.

Andere media ontwikkelingen die Huizer ziet zijn:

• chaos op het vlak van middleware voor interactieve T V
• we gaan van HD naar 3D of Super HD
• ambient media (samenwerkende mediakanalen, vanaf je mobiel je tv programmeren etc.)
• content wordt onafhankelijk van het kanaal
• de schrijvende pers komt eindelijk in beweging (commissie Brinkman)
• en ... er kijken nog steeds veel mensen naar het Journaal

Uiteindelijk zijn we op weg naar het internet of things waar steeds meer data worden verzameld. Rond 2020 gaat dit alles ondergronds, de data verdwijnen uit het zicht en alles wordt voor je gedaan. Het web gaat zichzelf verbeteren, the singularity.

Ir. Mark van Staalduinen, Consultant stelt dat het ook belangrijk is hoe je met die content geld gaat verdienen. Essentieel daarbij is dat je de juiste content op het juiste moment voor de juiste gebruiker beschikbaar hebt. Daar zijn een heleboel technieken voor, deze zijn in de vorige presentatie al voorbij gekomen. Na afloop van het Cross Media Café, zo geeft hij aan, zijn hiervan allerlei demonstraties te zien.

Ir. Frits Klok, Senior Consultant besluit de serie presentaties van de middag. Hij geeft aan dat er een aantal Europese projecten loopt waarbij de vraag centraal staat wat je in de opname- en distributieketen moet doen om dit alles mogelijk te maken. Een van de zaken is dat je interactiviteit met kijkers mogelijk wilt maken, bijvoorbeeld bij een voetbalwedstrijd.

Terug naar het overzichtsartikel Verder naar:

• Innovatie in de IPC regeling
• Uitvinders aan het woord
• Drie pitches van medialabs
• Kennisinstellingen: de toekomst van de media

07-10-2009 | Cross Media Café