Computer vision voor duurzaam en gezond aankoopadvies: Ontwikkeling van een situated analytics shopping assistent

Situated analytics shopping assistent (SASA) systemen voor klanten maken nieuwe diensteninnovaties in winkels mogelijk. Met behulp van computer vision (CV) en augmented reality (AR) kunnen deze smartphonetoepassingen achtereenvolgens winkelproducten identificeren, aangeven of die identificatie geslaagd was (bijvoorbeeld met kleuren), informatie over producteigenschappen visualiseren en productadvies geven. Door de transparantie over producteigenschappen te vergroten kunnen ze bewuster aankoopgedrag stimuleren. Dit is bijvoorbeeld relevant voor supermarkten vanwege hun belangrijke rol in de maatschappelijke duurzaamheids- en gezondheidstransities.

Hoewel er behoefte aan is, blijken SASA-systemen vooral qua productidentificatie-functionaliteit nog onvoldoende inzetbaar in de supermarktpraktijk. Dit biedt kansen voor mkb-bedrijven in de hightechsector, waaronder 360Fabriek. 360Fabriek wordt, net zoals veel andere bedrijven in de immersieve technologie-branche, bij de ontwikkeling van SASA-systemen voor supermarkten echter geconfronteerd met de beperkingen van beschikbare CV-oplossingen. Deze kunnen slechts een beperkt aantal producten op een supermarkt-rek real-time identificeren en hebben moeite met productidentificatie onder realistische supermarktomstandigheden. Tegelijkertijd beschikt 360Fabriek niet over de kennis om de vereiste CV-oplossingen zelf te ontwikkelen. Daarnaast heeft men behoefte aan aanvullende kennis over de inzet van AR in SASA-systemen.

360Fabriek zou daarom de volgende praktijkvraag graag beantwoord zien:

Hoe kunnen CV en AR-technieken in SASA-systemen ingezet worden voor een effectieve en positief ervaren productidentificatie en visualisatie van de identificatieresultaten, onder realistische supermarktomstandigheden?

Om deze vraag te beantwoorden, zullen de HvA en 360Fabriek dit project samen met Jumbo Bas Bobeldijk uitvoeren. Hiertoe zal een initieel SASA-prototype ontwikkeld worden, dat supermarktproducten identificeert, visualiseert of die identificatie geslaagd was, het merk en type van geïdentificeerde producten toont, en supermarktklanten instructies geeft voor het gebruik van de smartphonetoepassing. Dit prototype zal in een Jumbo-supermarktvestiging worden getest.

Het project zal naast het SASA-prototype resulteren in doorontwikkelde technologische CV-oplossingen en nieuwe technologische CV en AR-kennis. Deze zullen breed gedeeld worden met de beroepspraktijk in een eindpresentatie en in twee vakpublicaties.