maxon Story
Robots op de set
Intelligente robotcamera’s die live uitzendingen automatiseren worden op podia, renbanen en speelvelden gebruikt en werken autonoom. Ze zorgen voor een perfecte kijkervaring en tv-belevenis.
De camera beweegt gelijkmatig om de kunstschaatster te volgen, zoomt in als ze zich verwijdert en vertraagt als ze van richting verandert. Een vaardige hand die de camera hanteert? Ja. Maar het is geen menselijke hand. De camerabewegingen worden door een intelligent robotsysteem gegenereerd.
Het systeem wordt ondersteund door technologie die ontwikkeld is door Seervision, een spin-off van de ETH Zürich die zelflerende systemen voor geautomatiseerde videoproductie maakt. De kern van zulke systemen is de software voor beeldanalyse, die mensen kan herkennen en classificeren en ervoor zorgt dat de camera’s hun bewegingen volgen. Gepland is om het algoritme verder te ontwikkelen zodat ook andere subjecten in het beeld kunnen worden herkend.
Samenwerking op menselijk niveau
De software is behoorlijk geavanceerd. Met behulp van wat Visual Position Tracking wordt genoemd, stelt het systeem meerdere referentiepunten in voor elk item in het beeld. Deze worden gebruikt om bewegingspatronen te genereren die continu aan de controller worden doorgegeven. Dankzij deze bewegingspatronen kan het gezichtsveld permanent en dynamisch geoptimaliseerd worden. Daarnaast zorgen diverse image-design-modules ervoor dat aan de vereisten voor een professionele beeldcompositie wordt voldaan. Conrad von Grebel, business developer en medeoprichter van Seervision, legt uit: “Onze software past de camerabewegingen in real time aan. Het unieke aan ons proces is dat de camera’s niet geheel geautomatiseerd werken. Menselijke bekwaamheid is ook nodig.” De producent kan nog steeds op elk moment ingrijpen. “Als ik de software opdracht geef om een close-up te maken, kan ik die handmatig aanpassen als dat nodig is.” Daarom is deze technologie de perfecte symbiose tussen een autonoom systeem en menselijke artistieke vaardigheid. Het systeem werkt met alle gangbare camera’s en een webbrowser.
Met behulp van een groot aantal referentiepunten detecteert het Seervision-systeem mensen in een beeld en past het het gezichtsveld automatisch aan hun bewegingen aan.
Het aantal camera’s dat in een typische tv-productie wordt gebruikt, varieert van drie tot acht in studio-opstellingen, tot meer dan 50 tijdens het wereldkampioenschap voetbal. Dit kan snel behoorlijk kostbaar worden. Seervision is echter niet in de eerste plaats gericht op kostenbesparing: het bedrijf wil filmproducenten een tool geven die hun werk beter planbaar maakt en de kwaliteit van live-uitzendingen verbetert. Dit heeft veranderingen in de aard van de taken tot gevolg: de cameraman wordt een multicamera-coördinator die de beeldtaal bepaalt en daarmee verantwoordelijk is voor de stijl van de uitzending. De voordelen zijn dat de camerahoeken en -bewegingen pakkender en mooier zijn en onmiddellijk kunnen worden aangepast, en dat menselijke fouten tot een minimum worden beperkt.
De software leert voortdurend
De verschillende functies van het systeem zijn gebaseerd op kunstmatige intelligentie: voor de programmering van de software analyseren de deskundigen in Zürich voortdurend bestaand filmmateriaal om ‘s werelds eerste kunstmatige neuronale netwerk voor videoproducties te ontwikkelen. Dit concept vindt zijn oorsprong in hersenonderzoek. De software leert zelfstandig van de gegevens van eerdere producties om processen van visuele waarneming en herkenning te optimaliseren waardoor het gezichtsveld en de bewegingen van de camera kunnen worden bepaald. De ontwikkelaars zijn zelfs van plan kunstmatige intelligentie te gebruiken bij de automatisering van het snijproces.
Seervision rust zijn camerarobots uit met borstelloze platte EC 45-motoren en compacte EPOS4-positieregelaars van maxon die de camera met een precisie van 0,0002 graden geruisloos bewegen. Extra aandrijvingen op de lens zorgen voor optische precisie en regelen de scherpstelling van de camera. Interessant feit: uit het oorspronkelijke idee om automatisch een college aan de universiteit te filmen, is een technologiebedrijf ontstaan. Seervision maakt sinds 2016 deel uit van het maxon Young Engineers Program, won in 2018 de Swiss Technology Award en is dit jaar genomineerd voor de Digital Economy Award.
“Onze camera’s werken niet geheel geautomatiseerd. Menselijke bekwaamheid is ook nodig. Dit maakt ze uniek in de wereld.” Conrad von Grebel, business developer en medeoprichter van Seervision
Young Engineers Program
Met het Young Engineers Program (YEP) ondersteunt maxon innovatieve projecten met korting op producten en technisch advies. Lees meer hierover en schrijf je nu in.