Wikipedia ber utviklere slutte å skrape dem
– Bruk API-ene! ber Wikimedia Foundation, som er lei av at KI-selskapene forskyner seg grovt.
– KI kan ikke eksistere uten den menneskelige innsatsen som kreves for å bygge åpne, non-profit informasjonskilder som Wikipedia, skriver Wikimedia Foundation på bloggen sin.
– Derfor er Wikipedia et av datasettene med høyest kvalitet i verden for trening av KI. Og når KI-utviklere prøver å utelate det, er svarene betydelig mindre nøyaktige, mindre mangfoldige og mindre verifiserbare.
Men de har lenge slitt med at utviklerne forsyner seg på feil måte, og Wikimedia Foundation ber dem nå behandle informasjonen deres forsvarlig.
Som de mener kan gjøres på to bestemte måter: Kreditering, og finansiell støtte.
Eller enda mer konkret: Gjennom Wikipedias API-er, ikke gjennom å skrape nettsidene deres.
Wikipedias betal-API
Wikimedia Foundation har lenge hatt en Wikimedia Enterprise-plattform, som blant annet tilbyr API-er utviklere kan bruke for å dra nytte av den enorme datamengden de sitter på.
Og de trygler nå spesielt KI-folk om å bruke dette.
Disse API-ene kan koste penger å bruke, og på denne måten får Wikimedia Foundation faktisk betalt for jobben de gjør. I tillegg til at det ikke belaster serverne deres på samme måte som ren skraping gjør.
– Dette lar selskaper bruke Wikipedia-innhold i stor skala og bærekraftig, uten alvorlig belastning på Wikipedias servere, samtidig som de støtter vår non-profit-misjon, skriver Wikimedia Foundation.
Flere botter, mindre folk
kode24 skrev før sommeren om at Wikipedia sliter med KI-botter som skraper sidene deres på jakt etter innhold å trene seg på.
– Vi ser at nedlastning av multimedieinnhold har økt med 50 prosent siden januar 2024. Dette skyldes ikke menneskelige brukere, skrev Wikimedia i et blogginnlegg.
– Denne bruken har ført til at teamet med ansvar for stabiliteten på sidene, har vært nødt til å blokkere den overveldende trafikken fra crawlere før det skaper problemer for brukerne.
Samtidig som bottene flommer inn, ser Wikipedia en nedgang i bruken fra faktiske folk.
– Nedgangen er ikke uventet. Søkemotorer bruker i økende grad generativ kunstig intelligens for å gi svar direkte til søkere, i stedet for å lenke til nettsteder som våre. Og yngre generasjoner søker informasjon på sosiale videoplattformer i stedet for det åpne nettet, skriver Marshall Miller i Wikimedia Foundation i et nylig blogginnlegg.
I januar 2026 fyller forøvrig Wikipedia 25 år.
– Vi er optimistiske for at Wikipedia vil være her i 25 år til, og sørge for at internett har gratis, korrekt, menneskelig kunnskap, for kommende generasjoner, skriver Wikimedia Foundation.
