Wat zijn de tokens die AI-modellen gebruiken? De onzichtbare bouwstenen achter elk gesprek
Een gesprek met een chatbot voelt verrassend natuurlijk aan, maar achter elke zin schuilt een wereld die de meeste gebruikers nooit te zien krijgen. Woorden blijken voor een AI-model helemaal niet de bouwstenen van taal te zijn. Alles draait om kleine digitale puzzelstukjes die bepalen wat een model begrijpt, onthoudt en uiteindelijk terugschrijft. Wie eenmaal ziet hoe die onzichtbare laag werkt, kijkt met heel andere ogen naar elk antwoord dat kunstmatige intelligentie produceert.