Gemini 4’s kodning deler vandene hos Google

Google fremhæver de stærke resultater, som Gemini 4 Argon har opnået i benchmarktests. Men ifølge medieomtalen mener nogle medarbejdere, at modellen er mindre pålidelig, når de bruger den til praktiske kodeopgaver. Det er værd at bemærke forskellen – men de indberettede vurderinger er blandede og udgør ikke en fælles intern konklusion om, at Gemini 4 halter efter konkurrenterne. 11

Benchmarkresultater fortæller ikke hele historien

Google siger, at Gemini 4 har klaret sig godt i flere benchmarktests. Blandt andet slog modellen OpenAI’s Astra i en test af sikkerhedsfærdigheder. Medarbejdere med kendskab til modellens interne evalueringer beskriver imidlertid en anden oplevelse med nogle praktiske kodeopgaver, herunder frontendudvikling. 1114

Det betyder ikke, at benchmarkresultaterne er ugyldige – ligesom de heller ikke i sig selv besvarer alle spørgsmål om, hvordan modellen fungerer i det daglige udviklingsarbejde. Forskellen handler om, at resultater i udvalgte tests ikke nødvendigvis fortæller, hvor nyttig eller stabil en model opleves på bestemte opgaver.

Google afviser kritikken, og medarbejderne er uenige

Google har sagt, at det vil være misvisende at beskrive Gemini 4 som svag til kodning, og henviser til modellens benchmarkresultater. Medarbejdernes vurderinger, som medierne har omtalt, er heller ikke entydige: Nogle mener angiveligt, at Anthropic’s Fable og OpenAI’s Astra udvikler sig hurtigere, mens andre vurderer, at Gemini 4 har indhentet førende modeller. 111213

Uenigheden gør det for tidligt at betragte hverken den interne kritik eller Googles henvisning til benchmarkresultater som en endelig vurdering af Gemini 4’s evner.

Planen om Gemini 3.5 Pro giver baggrund

Google havde ifølge medieomtalen planlagt at lancere Gemini 3.5 Pro i juni 2026, men opgav den version og gik videre med Gemini 4. Det giver baggrund for spørgsmål om virksomhedens udviklings- og lanceringsplaner, men forklarer ikke i sig selv de rapporterede udfordringer med kodning eller viser, at Gemini 4 er dårligere end konkurrenterne. 613

Derfor fulgte investorerne med

Efter omtalen faldt Alphabet-aktien tilbage fra en tidligere stigning på mere end 2 procent og endte omkring 0,5 procent op i den pågældende onsdagshandel. Kursbevægelsen viser, at nyheden faldt sammen med en ændring i markedets stemning; den beviser hverken, at medarbejdernes bekymringer er korrekte, eller at bekymringerne var årsag til kursudviklingen. 114

Det større spørgsmål for investorerne er, om Google kan konkurrere med OpenAI og Anthropic inden for avancerede AI-modeller. Omtalen placerer Gemini 4 i den konkurrence, men peger ikke på konkrete konsekvenser for enkelte Google-produkter. En bredere effekt er derfor et åbent spørgsmål, ikke et dokumenteret resultat. 10