De afgelopen maanden hebben we streamingketens gebenchmarkt zoals een kijker ze daadwerkelijk ontvangt. Geen datasheets van leveranciers, geen labomstandigheden, geen demo-omgeving die speciaal voor de gelegenheid is klaargezet. Gewoon de manifests en segmenten die binnenkomen bij een normale speler op een normale verbinding, voor elke deelnemer op dezelfde manier vastgelegd en geanalyseerd.
Elf ketens: publieke omroepen, commerciële omroepen, regionale media, wereldwijde streamingdiensten en een aantal platformleveranciers. Twaalf technische assen, van encoding en packaging tot manifeststructuur en afleveringsgedrag. Ons eigen platform deed mee als gewone deelnemer, met dezelfde methode gemeten en aan dezelfde criteria gehouden. Een benchmark die je niet kunt verliezen is namelijk geen benchmark.
En hier zit de kern: je hebt geen toegang tot iemands infrastructuur nodig om te zien hoe die eruitziet. Het manifest en de segmenten laten dat hard en feitelijk zien.
Een manifest is een verklaring
Een manifest is een verklaring. Het zegt precies wat de keten denkt te leveren, in welke structuur, met welke aannames over spelers, apparaten en netwerk. De segmenten zijn het bewijsmateriaal. Die bevestigen die verklaring, of ze spreken hem tegen. Er zit geen ruimte voor interpretatie tussen die twee, en er is geen marketing die het verschil kan wegpoetsen. Wij downloaden wat iedereen kan downloaden, en binnen een half uur weten we of er een architectuur achter zit of een stapel losse aankopen.
Dat klinkt streng en dat is het ook. Maar de packaging-laag is nu eenmaal de plek waar keuzes definitief worden. Doe je het goed, dan wordt alles stroomafwaarts makkelijker: de CDN cachet netjes, de speler gedraagt zich voorspelbaar, apparaten doen wat de specificatie voorschrijft en de keten degradeert netjes als er iets misgaat. Doe je het verkeerd, dan kan niets verderop dat nog repareren. De symptomen verdwijnen niet, ze verplaatsen zich. Ze komen terug als CDN-kosten, als workarounds in de speler, als apparaat-specifieke bugs, als supporttickets en uiteindelijk als kijkers die stilletjes afhaken.
Niet budget, niet merk
Wat de sterke ketens onderscheidde van de zwakke was niet budget en niet merk. Verschillende van de grootste namen scoorden lager dan veel kleinere partijen. Het verschil zat in de vraag of er binnen de organisatie iemand de keten écht van begin tot eind begrijpt, in plaats van dat elke leverancier alleen zijn eigen doos begrijpt. In de zwakke ketens zie je op elke grens verantwoordelijkheid worden teruggeschoven of doorgeschoven, tot de gevolgen terechtkomen bij een partij die de oorzaak helemaal niet kán wegnemen. In de sterke ketens zie je één samenhangende set keuzes, van ingest tot speler.
Een benchmark die je niet kunt verliezen is geen benchmark.
Waarom we de resultaten niet publiceren
Wij publiceren de resultaten niet. Geen scores, geen namen, geen ranglijst. Daar zijn twee redenen voor. Ten eerste is dit geen afrekening; een deel van de zwakkere ketens is van organisaties die goed werk leveren met wat hun ooit is verkocht, en die verdienen het dat privé te horen. Ten tweede zit er veel moeizaam verworven en zeer specifieke kennis in dit rapport, en wij zien geen enkele reden om leveranciers die dit werk zelf hadden moeten doen gratis bij te scholen.
Wat we wel doen, is je je eigen keten laten zien. Exploiteer je een videoplatform, of koop je er een in, dan halen we je publieke streams door dezelfde methode en lopen we de uitkomst met je door in een vertrouwelijk gesprek: waar je keten staat, op welke assen je punten verliest, en wat architectuur is versus wat configuratie is. Zonder verplichting om iets af te nemen. Is je huidige opzet gewoon goed, dan zeggen we dat ook.
Het gesprek over streamingkwaliteit hoort hier te zijn: meetbaar, vergelijkbaar en gebaseerd op wat de kijker daadwerkelijk ontvangt in plaats van op wat de leverancier beweert te versturen.
Wil je je keten laten meten? Neem contact op.