Bygg en egen liten språkmodell av valfri text – och se exakt hur den väljer nästa ord, ord för ord.
Ordningen är ett förslag på arbetsgång – hoppa gärna fritt mellan stegen.
🗂️ Träningsdata
✓🌦️VäderrapportenEnkel & upprepad
✓⚽SportreferatetMer variation
✓📖HemsöbornaStor svensk roman
✓🎭ShakespeareStor engelsk samling
Skriv minst ett ord.
Träna modellen så börjar den skriva.
Modellen är inte tränad ännu.
kontext (minne) valt ordåtervändsgränd
✓🎲Viktad slumpSlumpar efter sannolikhet
✓👑Girigt valVäljer alltid det vanligaste ordet
1.0
🌡️ Dra i reglaget och se vad som händer med texten.
Språkmodell-labbet
Upptäck hur en språkmodell fungerar genom att steg för steg bygga, analysera och utvärdera en egen modell.
1
Hur väljer modellen nästa ord? Utforska hur modellen fortsätter en text och upptäck hur den väljer mellan olika möjliga ord.
2
Vad minns modellen? Undersök hur många tidigare ord modellen tittar bakåt på när den väljer nästa ord – och vad det gör med texten.
3
Hur påverkas modellens val? Experimentera med temperatur och olika sätt att välja nästa ord.
4
Hur formar träningsdatan modellen? Byt mellan olika texter, se hur språket förändras – kombinera sedan allt fritt och avsluta med att jämföra modellen med ChatGPT.