AnswersPublished18 sources
OpenAI visar stora COBOL-framsteg – men testerna bevisar inte att en migrering är säker
GPT 6 Astra fick 87,4 procents genomsnittlig testpoäng över 20 programmeringsspråk i MultiLangBench. I ett separat COBOL migreringstest fick GPT 6.1 Sol 86,6 procent vid låg resonemangsnivå och 97,9 procent vid högre nivå.
Publicerad avRedigerad med GPT-6 LunaBilder genererade med GPT Image 2
Research answer
Key takeaways
- GPT 6 Astra fick 87,4 procents genomsnittlig testpoäng över 20 programmeringsspråk i MultiLangBench.
- I ett separat COBOL migreringstest fick GPT 6.1 Sol 86,6 procent vid låg resonemangsnivå och 97,9 procent vid högre nivå.
- Resultaten gäller avgränsade tester. De visar inte i sig att AI genererad kod bevarar alla regler och beroenden i ett verkligt affärssystem.
AI Prompt
openai.comCreate a landscape editorial hero image for this Studio Global article: What did OpenAI announce on October 19, 2026, about its newest models’ improvements in writing and migrating code in low-resource languages. Article summary: On October 19, 2026, OpenAI announced stronger capabilities for writing and migrating software in low-resource languages, including COBOL, Fortran, Visual Basic and OCaml, supported by two new evaluations. The reported g. Topic tags: general, general web. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fake numbers, click
OpenAI uppger att företagets senaste modeller blivit bättre på att skriva och migrera kod i programmeringsspråk som COBOL, Fortran, Visual Basic och OCaml. I ett test över 20 språk fick GPT-6 Astra i genomsnitt 87,4 procent av testfallen godkända. I en separat utvärdering av COBOL-migrering nådde GPT-6.1 Sol 97,9 procent vid högre resonemangsnivå. Det är uppseendeväckande resultat – men de mäter hur modellerna klarar specifika tester, inte om en migrering är säker att driftsätta i ett företag. 2
18
19
Vad menas med ett språk med begränsade träningsdata?
Uttrycket ”resursfattigt språk” kan låta som om språket används sällan. Här syftar det i stället på att det finns mindre träningsmaterial för AI-modeller. COBOL kan alltså vara vanligt i viktiga verksamhetssystem och samtidigt vara mindre representerat i material som används för att träna och utvärdera modeller. 25
Det är en viktig skillnad för COBOL. En uppskattning som tillskrivs IBM säger att språket ligger bakom mer än 40 procent av systemen för internetbank och 95 procent av bankomatuttag. Den omfattande användningen säger dock inte hur mycket användbar COBOL-kod som finns i AI-modellernas träningsmaterial. 24
Två tester som mäter olika saker
MultiLangBench prövar om en modell kan bygga en SQLite-kompatibel databasmotor från grunden i vart och ett av 20 programmeringsspråk. Resultatet som rapporteras är den genomsnittliga andelen godkända testfall. Testerna har anpassats från SQLite:s egen testsvit. 2
26
COBOL-testet för migrering prövar i stället om en modell kan översätta befintliga COBOL-program till C++, Java, Kotlin, Python eller Rust utan att ändra programmens beteende. Översättningarna bedöms med dolda tester. 19
21
Det handlar alltså om två skilda uppgifter: att skapa program i språk som kan vara mindre bekanta för modellen och att översätta befintliga program med bibehållet beteende. Resultaten bör därför inte jämföras som om testerna mätte samma sak.
Resultat, resonemangsnivå och kostnad
| Test | Modell och inställning | Rapporterat resultat |
|---|---|---|
| MultiLangBench, genomsnitt över 20 språk | GPT-6 Astra, maximal resonemangsnivå | 87,4 procent godkända testfall, jämfört med 26,8 procent för GPT-5.6 Sol. |
| MultiLangBench | GPT-6 Luna | 40,3 procent godkända testfall. Cirka 0,77 dollar per exempel, jämfört med 3,48 dollar för GPT-5.6 Sol. |
| COBOL-migrering, låg resonemangsnivå | GPT-6.1 Sol | 86,6 procents träffsäkerhet, jämfört med 5,4 procent för GPT-5.6 Sol. Kostnaden uppges vara 39 procent lägre. |
| COBOL-migrering, högre resonemangsnivå | GPT-6.1 Sol | 97,9 procents träffsäkerhet. |
I MultiLangBench fick GPT-6 Astra 72,1 procent i COBOL, 83,5 procent i Fortran och 89,4 procent i Visual Basic. COBOL-resultatet på 97,9 procent kommer däremot från det separata migreringstestet – det är inte Astras poäng för COBOL-kodning. 18
25
Kostnadsjämförelsen gäller GPT-6 Lunas resultat i MultiLangBench. De tillgängliga siffrorna visar inte motsvarande kostnad för GPT-6 Astra eller för GPT-6.1 Sol vid den högre resonemangsnivån i migreringstestet. 18
Vad resultaten säger – och inte säger – om migrering
Ett centralt krav vid modernisering av äldre program är att den nya versionen faktiskt gör samma sak som den gamla. Det räcker inte att den översatta koden ser rimlig ut. OpenAI:s rapporterade resultat tyder på ett tydligt framsteg i det egna testet, särskilt jämfört med GPT-5.6 Sol vid låg resonemangsnivå. 19
21
Men godkända testfall är inte detsamma som att ett verkligt system har verifierats. Resultaten visar inte i sig att modellen bevarar varje affärsregel, hanterar alla beroenden och integrationer eller fungerar korrekt i situationer som saknas i testet. Inför användning i produktion behövs därför expertgranskning och tester mot organisationens faktiska krav och data.
Vad som har släppts – och vad som är oklart
Enligt rapporteringen har OpenAI gjort MultiLangBench till ett öppet test. Det framgår däremot inte av det tillgängliga materialet att även de dolda testerna i den separata COBOL-utvärderingen har publicerats. Det kan därför vara svårt för utomstående att återskapa det resultatet fullt ut. 19
28
Siffrorna som redovisas är resultat från benchmarktester. Källorna som ligger till grund för den här artikeln dokumenterar ingen oberoende upprepning av resultaten. De visar framsteg på definierade uppgifter – inte oberoende bekräftad tillförlitlighet i verkliga system.
Studio Global AI
Continue your research
This page includes a source-backed answer you can continue inside Studio Global.
People also ask
What is the short answer to "OpenAI visar stora COBOL-framsteg – men testerna bevisar inte att en migrering är säker"?
GPT 6 Astra fick 87,4 procents genomsnittlig testpoäng över 20 programmeringsspråk i MultiLangBench.
What are the key points to validate first?
GPT 6 Astra fick 87,4 procents genomsnittlig testpoäng över 20 programmeringsspråk i MultiLangBench. I ett separat COBOL migreringstest fick GPT 6.1 Sol 86,6 procent vid låg resonemangsnivå och 97,9 procent vid högre nivå.
What should I do next in practice?
Resultaten gäller avgränsade tester. De visar inte i sig att AI genererad kod bevarar alla regler och beroenden i ett verkligt affärssystem.