How do you ensure efficient and damage-free transport of trucks at distribution centres? ICR3ATE contributes with smart vision cameras to this extensive project of VISTA. This project runs until mid 2022.

ICR3ATE went in February 2019 participate in the Interreg project VISTA. This is a collaboration between Dutch and German industry and educational institutions with a contribution of EU subsidy. The Arnhem Nijmegen University of Applied Sciences (HAN) is the coordinator of this R&D project.

The goal of project VISTA is to ensure efficient and damage free transport at Distribution Centers (DC). The problem with the current non autonomous truck combinations is that damage occurs regularly during docking (driving backwards to the specific ‘gate’ for loading and unloading). There are all kinds of reasons for this damage:

  • Larger and more complex truck combinations
  • distraction in the truck cabine
  • professional competence of drivers varies with international transport
  • fatigue
  • high logistical workload on DCs

Intended solution

The envisaged solution consists of a number of components:

  • Give the driver very precise steering instructions (driver assitance from VISTA) for ‘parking in the dock’.
  • Determine the type of truck combination using Computer Vision techniques when entering a DC
  • Use path planning software (linked to the logistics software on a DC) to ensure that the steering instructions are compiled for one specifically characterised truck combination from ‘here to there’.
  • Follow the parking withComputer Vision and adjust the steering instructions in real time
  • Do all this in a ‘non-invasive way’ with the existing truck combinations of which there are many different types
  • So use separate Head Up Displays, VR glasses, Tablet & App, haptic feedback and possibly eye tracking for communication with the driver.

Required techniques

Without being complete right now, we look at the following system building blocks:

    • Stereovision camera technology for determining the truck combination properties
    • We’ll start with the ZED for Lab conditions
    • (Near) real time communication (C)-V2X scenarios between a DC controller and the truck combinations
    • We look at WLAN Mesh, 5G and IEEEE802.11P and combinations

.

 

  • Head Up Displays, VR glasses, Tablet & App, haptic feedback and possibly eye trackin

 

.

Role and contribution ICR3ATE

The R&D project is split up in different work packages:

WP0 – Project preparation (HAN)
WP1 – Business case (Bricklog)
WP2 – Vision-based RTLS (Track32)
WP3 – Vehicle planning & control (V-Tron)
WP4 – User interface (Coduct)
WP5 – Integration and demonstration (V-Tron)
WP6 – Project management (HAN)

.
ICR3ATE participates in all substantive work packages, in which we primarily contribute to WP2. This contribution is mainly focused on Real Time Location Services infrastructure. Think Smart Vision Cameras, NVIDIA Jetson TX2 CPU boards, real time WLAN connectivity, real time application messaging services via e.g. sockets.io and PubNub, IoT Edge Computing and software control & distribution via Ansible of Balena. We work together with Track32 from Wageningen, who leads this work package.

 

< strong>Participants in the project

Project VISTA has a duration of 3.5 years (1-1-2019 to 30-6-2022) and has a relatively large number of participants. Those who make a direct substantive and generating contribution are:

HAN – lead partner, path planning+following, SW tools

Track32 – machine vision, AI: RTLS+vehicle configuration detection

ICR3ATE – smart camera system ((stereo-)cam + computing)

Coduct – HMI, user friendliness

Recreate – HMI, AR/VR/MR technology

Bricklog – wide logistics network, logistics SW solutions

V-Tron – smart mobility solutions, aftermarket support systems

HRW – system level architecture, integration, usability studies

InterEU – cross-border communication support

Rhewatech – Interreg project support

 

 

 

 

 

 

 

Hoe zorg je voor efficiënt en schadevrij transport van vrachtwagens bij de distributie centra? ICR3ATE levert met smart vision camera’s een bijdrage aan dit omvangrijke project van VISTA. Dit project loopt nog tot medio 2022.

ICR3ATE ging in februari 2019 deelnemen aan het Interreg project VISTA. Dat is een samenwerkingsverband tussen de Nederlands en Duitse industrie en onderwijsinstellingen met een bijdrage van EU subsidie. De Hogeschool Arnhem Nijmegen (HAN) is penvoerder van dit R&D project.

Het doel van project VISTA is te zorgen voor efficiënt en schadevrij transport op Distributie Centra (DC). Het probleem bij de huidige niet autonome vrachtwagencombinaties is namelijk dat er regelmatig schade ontstaat tijdens het docken (achteruit rijden naar de specifieke ‘gate’ voor het laden en lossen). Er zijn allerlei redenen voor deze schade:

  • Grotere en complexe vrachtwagencombinaties
  • afleiding in de truckcabine
  • vakbekwaamheid van chauffeurs is wisselend met het internationale vervoer
  • vermoeidheid
  • hoge logistieke werkdruk op DC’s

Beoogde oplossing

De beoogde oplossing bestaat uit een aantal onderdelen:

  • Geef de chauffeur hele nauwkeurige stuuraanwijzingen (driver assitance uit VISTA) voor het ‘inparkeren in de dock
  • Bepaal het type vrachtwagencombinatie m.b.v. Computer Vision technieken bij het binnenkomen op een DC
  • Zorg met path planning software (gekoppeld aan de logistieke software op een DC) dat de stuuraanwijzingen worden samengesteld voor één specifiek gekarakteriseerde vrachtwagencombinatie van ‘hier naar daar’.
  • Volg het inparkeren met Computer Vision en stel real time de stuuraanwijzingen bij
  • Doe dit alles op een ‘niet invasieve manier’ met de bestaande vrachtwagencombinaties waarvan er heel veel verschillende soorten zijn
  • Dus gebruik losse Head Up Displays, VR bril, Tablet & App, haptische feedback en eventueel eye tracking voor communicatie met de chauffeur.

Benodigde technieken

Zonder nu al compleet te zijn, kijken wij aan tegen de volgende system building blocks:

  • Stereovision camera technologie voor het bepalen van de vrachtwagencombinatie eigenschappen
  • We starten met de ZED voor Lab omstandigheden
  • (Near) real time communicatie (C)-V2X scenario’s tussen een DC controller en de vrachtwagencombinaties
  • We kijken naar WLAN Mesh, 5G en IEEEE802.11P en combinaties
  • Bestaande en nog uit te breiden path planning software
  • Bestaande en nog uit te breiden steering control software
  • Head Up Displays, VR bril, Tablet & App, haptische feedback en eventueel eye trackin

Rol en bijdrage ICR3ATE

Het R&D project is opgesplitst in verschillende Work Packages:

WP0 – Project preparation (HAN)
WP1 – Business case (Bricklog)
WP2 – Vision based RTLS (Track32)
WP3 – Vehicle planning & control (V-Tron)
WP4 – User interface (Coduct)
WP5 – Integration and demonstration (V-Tron)
WP6 – Project management (HAN)

ICR3ATE neemt deel aan alle inhoudelijke Work Packages, waarbij we primair een bijdrage leveren aan WP2. Die bijdrage is vooral gericht op Real Time Location Services infrastructuur. Denk aan Smart Vision Camera’s, NVIDIA Jetson TX2 CPU boards, real time WLAN connectivity, real time application messaging services via b.v. sockets.io en PubNub, IoT Edge Computing en software control & distribution m.b.v. Ansible of Balena. We werken samen met Track32 uit Wageningen, die dit Work Package leidt.

 

Deelnemers aan het project

Project VISTA kent een looptijd van 3,5 jaar (1-1-2019 tot 30-6-2022) en kent een betrekkelijk groot aantal deelnemers. Degene die een directe inhoudelijke en voortbrengende bijdrage leveren, zijn:

HAN – lead partner, path planning+following, SW tools

Track32 – machine vision, AI: RTLS+vehicle configuration detection

ICR3ATE – smart camera system ((stereo-)cam + computing)

Coduct – HMI, usability

Recreate – HMI, AR/VR/MR technology

Bricklog – wide logistics network, logistics SW solutions

V-Tron – smart mobility solutions, aftermarket assistance systems

HRW – system level architecture, integration, usability studies

InterEU – cross-border communication support

Rhewatech – Interreg project support

 

 

 

 

 

 

 

Like it?

Share it!