Ask Aletta leest nu ook afbeeldingen, stroomschema's en tabellen in richtlijnen

Hier zijn we behoorlijk enthousiast over.

Klinische richtlijnen bestaan niet alleen uit tekst. Een deel van de bruikbaarste informatie staat in afbeeldingen, stroomschema's en tabellen: een beslisboom met de volgende behandelstap, een doseertabel op basis van leeftijd of gewicht, of een schema waarin twee klinische benaderingen worden vergeleken.

Die informatie kan essentieel zijn voor een goed antwoord. Tegelijkertijd is dit precies het soort informatie dat AI-systemen makkelijk missen.

Ask Aletta kan de informatie uit deze visuele elementen nu vinden en gebruiken. Ook toont het de oorspronkelijke tabel, afbeelding of het stroomschema direct in het antwoord.

Waarom visuele informatie lastig is voor AI

Wanneer een pdf alleen als een laag tekst wordt verwerkt, kunnen visuele elementen in feite onzichtbaar worden. De alinea's rondom een stroomschema zijn dan wel beschikbaar, maar de beslissingen, pijlen en onderlinge relaties in het schema niet.

Alleen de woorden uit een afbeelding halen, lost dit probleem niet altijd op. Een tabel is meer dan een verzameling losse getallen en labels: hun positie in rijen en kolommen bepaalt de betekenis. Bij een stroomschema zijn de pijlen en vertakkingen vaak net zo belangrijk als de tekst in de vakken.

Wanneer die structuur verloren gaat, kan een AI-systeem precies het deel van de richtlijn missen waarin het antwoord staat.

De volledige richtlijn verwerken

Wanneer we een nieuwe richtlijn aan de kennisbank van Ask Aletta toevoegen, verwerken we nu zowel de geschreven als de visuele inhoud.

Afbeeldingen, tabellen en stroomschema's worden omgezet in een vorm die Ask Aletta samen met de omliggende tekst kan doorzoeken. Het oorspronkelijke visuele element blijft gekoppeld aan de bron en de pagina. Daardoor kan Ask Aletta de informatie gebruiken bij het formuleren van een antwoord en het origineel direct aan de zorgprofessional tonen.

Dat heeft twee voordelen. Informatie die alleen in een visueel element staat, wordt niet langer automatisch overgeslagen. Daarnaast kan de gebruiker het oorspronkelijke schema zelf bekijken en controleren hoe het zich tot het antwoord verhoudt.

Van een vraag naar het relevante stroomschema

Neem deze vraag:

Welke stappen doorloop ik bij de behandeling van een kind jonger dan 1 jaar met functionele obstipatie?

De relevante richtlijn van de Nederlandse Vereniging voor Kindergeneeskunde bevat een stroomschema met het behandeltraject. Daarin staan onder meer alarmsymptomen, de eerste adviezen, evaluatiemomenten, eerstekeusmedicatie en de situaties waarin verder onderzoek of een verwijzing moet worden overwogen.

Ask Aletta gebruikt niet alleen de omliggende tekst, maar kan ook de informatie uit het stroomschema meenemen en het schema in het antwoord tonen.

Hetzelfde geldt voor afbeeldingen waarin verschillende benaderingen worden vergeleken. Bij een vraag over de top-down- en bottom-upvarianten van het laag-FODMAP-dieet legt Ask Aletta het verschil uit en toont het direct het schematische overzicht uit de onderliggende richtlijn.

Het bewijs tonen, niet verbergen

Visuele informatie begrijpen is slechts de helft van deze feature. We willen ook dat zorgprofessionals het bewijs zelf kunnen bekijken.

Een geschreven samenvatting helpt om snel een antwoord te vinden, maar mag de onderliggende richtlijn niet vervangen. Daarom toont Ask Aletta het oorspronkelijke visuele element samen met de bron en het paginanummer. De zorgprofessional kan de afbeelding in context bekijken en zelf beoordelen hoe deze van toepassing is op de situatie.

Dat bouwt voort op een uitgangspunt dat we vanaf het begin hanteren: ieder antwoord moet herleidbaar zijn naar de bron. Dat geldt nu ook voor de delen van een richtlijn die zich niet in gewone alinea's laten vangen.

Zelf proberen? Vraag Ask Aletta:

Welke stappen doorloop ik bij de behandeling van een kind jonger dan 1 jaar met functionele obstipatie?

Of:

Wat is de top-down- en bottom-upaanpak van het laag-FODMAP-dieet?