LLM står for Large Language Model – stor språkmodell på norsk. Det er en type KI-modell som er trent på enorme mengder tekst og har lært seg mønstre i menneskelig språk så godt at den kan skrive, oppsummere, oversette og svare på spørsmål på en måte som virker menneskelig.

GPT-4 (bak ChatGPT), Claude (fra Anthropic) og Gemini (fra Google) er alle eksempler på store språkmodeller.

Hvordan trenes en LLM?

Treningen skjer i to hoveddeler:

1. Forhåndstrening (pre-training)

Modellen leser enorme mengder tekst – milliarder av sider fra internett, bøker, Wikipedia, kode og mye mer. Den lærer å forutsi hvilket ord som kommer neste i en setning. Etter nok trening har modellen absorberte mønstre, fakta og resonneringsevner.

2. Finjustering med menneskelig tilbakemelding (RLHF)

Den rå modellen er ikke alltid nyttig. Den finjusteres videre ved at menneskelige trenere vurderer svar og velger de beste. Modellen lærer seg å svare hjelpsomt, trygt og presist – ikke bare sannsynlig.

Hva kan en LLM gjøre?

Hva kan en LLM ikke gjøre?

En LLM er ikke allvitende eller ufeilbarlig. Kjente begrensninger:

De viktigste LLM-ene i dag

Vanlige spørsmål

Relaterte begreper