DeepSeek en Moonshot AI hebben hun nieuwste modellen voor een groot deel getraind op output van GPT-6 Astra van OpenAI. Het gaat om Kimi K3.1 Pro en DeepSeek V4.1-Flash 1017.
Volgens The Information, dat zich baseert op mensen met directe kennis van de zaak, leunden beide Chinese AI-ontwikkelaars zwaar op de antwoorden van het krachtige OpenAI-model. Moonshot AI bracht Kimi K3.1 Pro vorige week uit. DeepSeek lanceerde op 17 oktober de vernieuwde versie V4.1-Flash 1017. Beide modellen zouden hebben geprofiteerd van het distilleren van Astra.
OpenAI, DeepSeek en Moonshot AI reageerden niet direct op verzoeken van Reuters om commentaar. Helemaal uit de lucht valt het nieuws niet. In een blogpost van 30 september meldde OpenAI al dat het een kernonderdeel van een distillatiecampagne, die in juli begon, had gekoppeld aan personen die met Moonshot AI verbonden zijn. Het bedrijf blokkeerde of beperkte daarop frauduleuze accounts, verscherpte de registratiecontroles en breidde de netwerkmonitoring uit.
Sneller en goedkoper inhalen
Bij distillatie leert een model van de antwoorden van een groter, vaak gesloten model. Zo krijgt het vergelijkbare vaardigheden voor een fractie van de trainingskosten en rekenkracht. Grootschalige distillatie via een commerciële API kan in strijd zijn met de gebruiksvoorwaarden. Bedrijven als Anthropic, OpenAI en Google stellen dat concurrenten op die manier geavanceerde capaciteiten sneller en tegen lagere kosten kunnen reproduceren.
Eerder dit jaar beschuldigde OpenAI het Chinese lab ervan dat aan DeepSeek gelieerde accounts automatisch antwoorden verzamelden voor distillatie.
Ook Anthropic kampt met het fenomeen. Het bedrijf zegt sinds februari campagnes van zeven in China gevestigde labs te hebben ontdekt en verstoord. Nieuwe maatregelen van Anthropic hebben de hoeveelheid data die bij distillatieaanvallen wordt buitgemaakt met zo’n 90 tot 99 procent teruggedrongen. Daarvoor worden onder meer redeneertranscripten afgeschermd. Daarnaast zijn tienduizenden kwaadwillende accounts permanent geblokkeerd.