[Intro muziek]
Vandaag zijn we met Smart Patrol op sluis Heel. en we zijn bezig met het project Overzichtbeeld. We zijn bezig om de techniek die we al eerder hebben beproefd nog verder te ontwikkelen.
Nu maakt de operator zijn beeld op basis van verschillende camera’s die hij ter beschikking heeft. Het probleem daarbij is, is dat daar geen logisch vervolg zit in de kijkrichting en in de vaarrichting van het schip. Met het overzichtbeeld willen we daar veel meer helderheid in scheppen zodat het ook veel logischer vervolg is en hij beter een besluit op basis van wat hij ziet kan maken. Wat we proberen met het project overzichtbeeld is die sluiskolk in beeld te brengen met wel zo min mogelijk camera’s. En daarvoor gebruiken we 180 graden camera’s. En het effect van 180 graden camera’s, die levert een fisheye-beeld op. En een fisheye-beeld wordt als niet natuurlijk ervaren door de operators. Waar we nu mee bezig zijn is; kunnen we die beelden weer rechttrekken en wat krijgen we dan voor beeld te zien en is dat goed genoeg om te gebruiken in de operatie.
[Muziek]
Omdat we zo’n overzichtbeeld willen creëren moet die camera echt ja best wel hoog hangen om de sluis te overzien. We willen zoveel mogelijk een bovenaanblik creëren. Eigenlijk alsof je er met satelliet overheen vliegt. Vanuit Human Factors oogpunt worden er nu echt wel beginstappen gezet in in een oogopslag kunnen zien wat er zich in de kolk afspeelt. Dus dat zorgt eigenlijk voor een lagere mentale belasting van de operator. Ik denk dat er wel nog een verbeterslag gemaakt kan worden in het finetunen van de overzichtsbeelden zodat die mentale belasting nog kleiner wordt. Ik moet zeggen ik ben aangenaam verrast over het resultaat wat tot heden toe is bereikt. Er zijn natuurlijk nogal een aantal restpuntjes die nog opgelost moeten worden met dubbeling in beeld. Maar op zich ben ik heel tevreden over het beeld. Ja, we hebben weer een enorme stap vooruit gemaakt.
We hebben nu echt een slag gemaakt in het rechttrekken van de beelden, het netjes naast elkaar zetten zodat je de sluis in één blik kunt overzien. Ja, een enorme stap vooruit!
[Intro muziek]
We zijn op de Biesboschsluis. Dat is de testlocatie voor project Smart Patrol: detectie van onveilige situaties op de brug. We zijn bezig met het ontwikkelen van een systeem dat de operator kan ondersteunen bij het nog veiliger bedienen van de brug.
[Muziek]
Wat heeft Rijkswaterstaat door Pegamento laten ontwikkelen? We hebben twee soorten Artificial Intelligence-netwerken geïmplementeerd om onveilige situaties te detecteren op het brugdek. Objectdetectie voor het herkennen van auto’s, fietsers en voetgangers. En anomaly detectie voor het herkennen van afwijkende situaties. De anomaly detectie is getraind met uren aan beeld van normale situaties, zodat het juist objecten herkent die niet van tevoren getraind zijn, maar wel een afwijking zijn van de veilige situatie op de brug. Een operator wil het brugdek openen en zet de slagbomen omlaag. Camera’s op de brug overzien de situatie en zijn gekoppeld aan een detectiesysteem. Het systeem gebruikt Artificial Intelligence voor het detecteren van mensen en voertuigen op het brugdek en kijkt waar ze zich bevinden als het brugdek geopend wordt. Als een persoon of voertuig op een plaats is waar ze niet mogen zijn, stuurt het systeem een melding naar de generieke RWS IoT inwinketen. Deze stuurt een bericht naar de operator. Die beslist of de brug veilig kan worden geopend.
Het systeem detecteert allerlei objecten op de camerabeelden. Zo detecteert het systeem bijvoorbeeld scootmobielen, maar ook auto’s, voetgangers en fietsers. Tijdens het testen van objectdetectie werden alle zichtbare voertuigen, personen en fietsers gedetecteerd. Er kwamen geen valse waarschuwingen onder variërende omstandigheden en het detectiesignaal kwam vrijwel real-time binnen. Het systeem geeft geen valse signalen voor bijvoorbeeld natte plekken op de brug of een spinnetje voor de camera. Het systeem detecteert zowel bij daglicht als in het donker. En ook als je je best doet om niet gedetecteerd te worden.
Na de proeven op de Biesboschsluis, gaat het Smart Patrol Team verder met de doorontwikkeling van het detectiesysteem. Voor 2024 wordt een pilot in de operatie voorbereid met objectdetectie. Om het systeem nog betrouwbaarder te maken, werken we parallel daaraan mee aan de doorontwikkeling van anomaliedetectie. En onderzoeken we de meerwaarde van inzet van aanvullende sensoren, zoals LiDAR. Ik moet zeggen dat ik een heel groot voorstander ben van een veiliger systeem. Dus ik ben echt benieuwd wat de resultaten zullen gaan zijn.
[Outro muziek]
[Intro muziek]
We zijn bezig met het ontwikkelen van een systeem dat de operator kan ondersteunen bij het nog veiliger bedienen van de brug. Ik moet zeggen dat ik een heel groot voorstander ben van een veiliger systeem. Dus ik ben echt benieuwd wat de resultaten zullen gaan zijn. We zijn op de Biesboschsluis. Dat is de testlocatie voor het project Smart Patrol detectie van een onveilige situaties op de brug. Vandaag zijn we aan het kijken of het systeem wat is gemaakt, wat voor resultaten die oplevert.
Vorige keer waren we hier om scenario’s op te nemen die we nodig hebben om het systeem in te leren. Daarvoor hebben we allemaal objecten op de brug gelegd en die gefilmd. En vandaag zijn we het systeem eigenlijk aan het controleren. We hebben daarvoor nieuwe attributen gebruikt die we de vorige keer nog niet hebben gebruikt. En dan kijken of die software zaken herkent of in ieder geval detecteert als onveilig.
Voor een eerste test ziet het er heel goed uit. We detecteren alle mensen, fietsen, voertuigen heel netjes op de brug. En daarom zien we ook dat het systeem heel veel potentie biedt en dat het heel vaak goed gaat. We hebben af en toe nog een beetje moeite, vooral met schaduwen, fel zonlicht. Dan missen we nog wel eens dingetjes.
We hebben hele mooie resultaten gezien vandaag. Het systeem werkt best al goed, maar er zijn zeker nog wel een aantal aandachtspunten. We gaan na de evaluatie kijken wat de vervolgstappen zijn om het systeem nog beter te maken.
[Outro muziek]
