Skip to content
Home » Haleon maakt gebruik van Microsoft’s Seeing AI-technologie om informatie over gezondheidsproducten toegankelijker te maken voor mensen die blind zijn of slechtziend zijn

Haleon maakt gebruik van Microsoft’s Seeing AI-technologie om informatie over gezondheidsproducten toegankelijker te maken voor mensen die blind zijn of slechtziend zijn

    Haleon maakt gebruik van Microsoft's Seeing AI-technologie om informatie over gezondheidsproducten toegankelijker te maken voor mensen die blind zijn of slechtziend zijn

    Voor Marc Powell is een schijnbaar eenvoudige reis naar de winkel om medicijnen of andere gezondheidsproducten voor de consument te kopen vaak een zware, gecompliceerde onderneming.

    Powell, die blind is, moet meestal een winkelmedewerker vragen om te helpen vinden wat hij nodig heeft en hem dan de informatie op de verpakking voorlezen, wat opdringerig kan aanvoelen. Thuis vraagt ​​hij zijn partner, die slechtziend is, om hulp, maar de afdruk is soms te klein voor haar om te lezen. In een mum van tijd speurt hij het internet af of wacht tot een familielid langskomt en hem de informatie kan voorlezen die hij nodig heeft.

    “Ik ben ongelooflijk afhankelijk van iemand anders om me over het product te laten weten – wat ik ermee moet doen, hoeveel tablets ik kan nemen of wat het bevat”, zegt Powell, de leider op het gebied van toegankelijkheidsinnovatie voor het VK- gebaseerd Royal National Institute of Blind People (RNIB), die in Cambridge, Engeland woont. ‘Het is gek om dat te zeggen, nietwaar?’

    Met kop en schouders portret van Marc Powell, toegankelijkheidsinnovatieleider voor de in het VK gevestigde RNIB.
    Marc Powell.

    Een nieuwe samenwerking tussen Microsoft en het wereldwijde consumentengezondheidsbedrijf Haleon heeft tot doel informatie over gezondheidsproducten toegankelijker te maken voor mensen die blind zijn of slechtziend zijn, of laaggeletterden. De bedrijven werkten samen om de functionaliteit van Microsoft’s Seeing AI-app uit te breiden om gedetailleerde audio-informatie te verstrekken voor meer dan 1.500 Haleon-producten in de VS en het VK, waaronder merken als Centrum, Sensodyne en Emergen-C. Het initiatief werd gelanceerd ter ere van World Sight Day oktober. 13.

    Met Seeing AI kunnen gebruikers nu de streepjescode op Haleon-producten scannen en dezelfde informatie horen die op de verpakking staat, zoals de productnaam, gebruiksinstructies en ingrediënten. Wanneer gebruikers een telefoon op een Haleon-product richten, leidt de Seeing AI-app hen naar de streepjescode met een reeks intensievere pieptonen. Na het scannen van de code kunnen gebruikers tussen secties navigeren om de specifieke informatie te krijgen die ze willen, een functie die goed is ontvangen door slechtziende mensen die de functionaliteit voor de lancering hebben uitgeprobeerd.

    “We hebben geweldige feedback gekregen van mensen die blind zijn en slechtziend zijn”, zegt Tamara Rogers, global chief marketing officer bij Haleon. “Ze waarderen de grotere onafhankelijkheid die voortkomt uit het feit dat ze zelf toegang hebben tot onze productinformatie.”

    Zwart-wit foto van Tamara Rogers, chief marketing officer voor Haleon.
    Tamara Rogers.

    De nieuwe functionaliteit is niet alleen ontwikkeld voor mensen die blind of slechtziend zijn, maar ook voor mensen met leesproblemen, zegt Rogers. “Er is een klassieke gezondheidsindustrie die zegt: ‘Lees altijd het etiket, lees altijd de instructies’, en voor sommigen is dat gewoon niet mogelijk”, zegt ze.

    “Dit initiatief zal Haleon-producten toegankelijker maken voor mensen die blind zijn of slechtziend zijn. Het zal ook meer onafhankelijkheid bieden aan laaggeletterden. Dit is een geweldige manier om op een andere manier, hoorbaar, te communiceren in plaats van mensen te vragen om te lezen.”

    De Seeing AI-applicatie van Microsoft, gelanceerd in 2017, is een AI-cameragebaseerde app die tekst zoals documenten of tekens kan lezen, scènes kan beschrijven, valuta kan herkennen en zelfs vrienden kan identificeren. De app is beschikbaar in 19 talen en is een multifunctioneel hulpmiddel geworden dat mensen die blind of slechtziend zijn helpt bij het navigeren door hun dagelijks leven. De nieuwe verbeterde functionaliteit helpt consumenten in de VS en het VK om verpakkingsdetails in het Engels te lezen. Voorheen was er geen gemakkelijke manier om AI te zien om gedetailleerde informatie op verpakkingen te lezen zonder dat een gebruiker een camera rond de tekst beweegt.

    De samenwerking met Haleon “is echt belangrijk en opwindend, omdat het zien van AI altijd in staat is geweest om producten te herkennen, maar de uitdaging was om toegang te hebben tot gegevens die echt rijk zijn en die van de fabrikant komen”, zegt Saqib Shaikh, een technisch manager bij Microsoft die het team leidde dat Seeing AI ontwikkelde.

    “Je kunt nu gewoon de barcode scannen en precies horen wat er op de verpakking staat. Het is direct wat de fabrikant wilde dat je hoorde. De informatie is echt nauwkeurig en je krijgt het allemaal op één plek. U hoeft niet alle verschillende kanten van het pakket te scannen om de gewenste bits te vinden. Het is goed daar als je de streepjescode hebt gescand.

    “Nu kun je meer en betrouwbare informatie geven”, zegt Shaikh. “Haleon loopt hierin voorop.”

    Shaikh hoopt dat meer bedrijven het voorbeeld van Haleon zullen volgen en technologie zullen gebruiken om audio-informatie te verstrekken aan blinden, slechtzienden of mensen met leesproblemen. Dit kan belangrijke informatie opleveren, niet alleen voor gezondheidsproducten, zegt hij, maar ook voor voedingsmiddelen en talloze andere dingen die mensen in hun dagelijks leven gebruiken.

    “Ik zou graag elk product toegankelijk maken, zodat je het gewoon kunt scannen, of het nu met een streepjescode of een andere toekomstige technologie is, en je weet wat het is”, zegt hij. “Deze gegevens zijn er. Het is alleen dat alle gegevens in silo’s zitten. Wat we hier hebben kunnen doen, is door de bedrijven die de wil hebben, deze silo’s af te breken.”

    Close-up van handen met een doos Centrum in de ene hand en een telefoon met de app Seeing AI in de andere.
    Met behulp van de Seeing AI-app is gedetailleerde audio-informatie beschikbaar voor gedetailleerde audio-informatie voor meer dan 1500 Haleon-producten in de VS en het VK

    Meer dan 3 miljoen mensen in de Verenigde Staten en meer dan 2 miljoen in het VK leven met verlies van gezichtsvermogen, en nog eens miljoenen worstelen met slechte geletterdheid. Uit een onderzoek in opdracht van Haleon bleek dat 93 procent van de respondenten vond dat gezondheidsproducten niet toegankelijk genoeg waren, en bijna een op de vijf zei dat ze een verkeerde dosering van een product hadden ingenomen omdat ze de verpakking niet konden lezen.

    Haleon zag technologie als een hulpmiddel om die problemen aan te pakken, zegt Rogers, maar wilde voortbouwen op een bestaand platform in plaats van nieuwe technologie te creëren die blinde of slechtziende mensen zouden moeten gebruiken. Haleon benaderde Microsoft over het gebruik van de Seeing AI-app om audiogidsen voor zijn producten te maken, en de twee bedrijven werkten nauw samen om de nieuwe functionaliteit voor de streepjescodes van Haleon uit te bouwen. Microsoft heeft een end-to-end-pijplijn ontwikkeld waarmee Haleon de gegevens voor zijn consumentenproducten kan beheren, die zijn opgeslagen in Azure, en informatie kan bijwerken of nieuwe items kan toevoegen als dat nodig is.

    Powell zegt dat Haleon – een spin-off van GlaxoSmithKline die in juli 2022 is opgericht om zich te concentreren op gezondheidsproducten voor consumenten – het eerste bedrijf voor consumentengezondheid is dat toegankelijke informatie biedt via Seeing AI voor zijn producten.

    “Ik denk dat dit heel nuttig zal zijn”, zegt hij. “Hierdoor hebben wij als blinde mensen hetzelfde kennis- en begripsniveau als iemand die de verpakking kan lezen. Dit is dus een hele goede stap.”