Naar inhoud
BetaAI Begrippen

AI-begrippen in gewone taal. Zoek een begrip, blader op letter of filter op onderwerp.

Multimodale AI

Engels: Multimodal AI · Ook wel: multimodal AI, multi-modal AI, multimodal artificial intelligence, multimodale kunstmatige intelligentie

In het kort

Multimodale AI is een AI-systeem dat tekst, beelden, geluid en video tegelijk verwerkt en combineert. Anders dan een model dat maar één soort gegevens leest, koppelt dit systeem die bronnen en baseert het een antwoord of een beslissing op het geheel. Een gebruiker kan zo een foto insturen en een geschreven beschrijving terugkrijgen, of een tekst laten omzetten in een afbeelding.

Waarom is dit belangrijk?

Verschillende bronnen kunnen zo tot één oordeel worden samengebracht, ook als geen enkele bron het volledige beeld geeft. Europese onderzoeksprogramma’s in de zorg koppelen daarvoor dossiers, scans en laboratoriumuitslagen om artsen bij medische beslissingen te steunen. Voor patiënten en zorgverleners kan dat de zorg gerichter maken, maar ook een fout advies, vertekening in de gegevens of een privacyrisico blijft mogelijk.

Zo werkt het in de praktijk

In de industrie bestuurt multimodale AI robots. Google paste het taalmodel PaLM aan tot een multimodaal model voor robotbesturing. In de dienstverlening combineren zulke systemen beeld, geluid en tekst om emoties te herkennen bij klantcontact.

Onderzoekers van de Universiteit Utrecht brachten studies in kaart over multimodale learning analytics, het combineren van leerlinggegevens. AI analyseert die gegevens om het leerproces te steunen. Het Nationaal Onderwijslab AI financiert dit werk via het Nationaal Groeifonds.

De AI-verordening regelt modellen voor algemene doeleinden, die veel taken kunnen doen. Overweging 99 noemt generatieve modellen die tekst, geluid, beeld of video maken. Aanbieders maken technische documentatie, een auteursrechtbeleid en een samenvatting van de trainingsinhoud; de gedragscode (een leidraad voor aanbieders) licht die plichten toe.

Gecontroleerd op 23 oktober 2026