Wat kan Bilibili’s Index-Translate-familie?

Bilibili’s Index-Translate is een familie vertaalmodellen en tools op basis van Qwen3.5. Naast tekstvertaling zijn er aparte varianten voor spraak, nasynchronisatie met lengtebeperkingen en lange documenten. De tekstmodellen zijn er in 2B en 9B, plus een 35B-A3B-model dat als preview is aangeduid. Volgens de modelbeschrijvingen ondersteunen ze 150 talen en kunnen ze instructies volgen over bijvoorbeeld terminologie, opmaak en het behouden van inhoud. 25

Drie formaten voor tekstvertaling

De aanduidingen 2B, 9B en 35B-A3B verwijzen naar de schaal van de modellen. Het 35B-A3B-previewmodel is een zogeheten mixture-of-experts-model: het telt 35 miljard parameters, waarvan er per token ongeveer 3 miljard actief zijn. De modellen zijn gemaakt om vertaalinstructies te volgen over onder meer stijl, structuur en gewenste uitvoer. Uit de beschikbare informatie blijkt niet dat elk formaat voor iedere taalcombinatie dezelfde resultaten behaalt. 245

De modelkaart van Index-Translate 2B vermeldt de licentie Apache-2.0. Ook berichtgeving over de release beschrijft de familie als beschikbaar onder die licentie. Controleer voor gebruik wel de licentie die bij de specifieke gewichten en bestanden hoort. 49

De gespecialiseerde varianten

• Index-Echo is gericht op spraakvertaling. De spraak-naar-tekstworkflow maakt ondertitels met tijdcodes van Chinese audio of video, vertaald naar het Engels, Japans of Spaans. Daarbij worden spraaksegmenten afgebakend en context en optioneel een woordenlijst gebruikt. De spraak-naar-spraakvariant is bedoeld om bij nasynchronisatie kenmerken van de oorspronkelijke stem te behouden. Dat is een ontwerpdoel, geen garantie op een identieke stem in elke opname. 2123
• Index-Homura past een vertaling aan een opgegeven aantal lettergrepen aan. Dat kan nuttig zijn voor nasynchronisatiescripts waarbij de lengte van gesproken tekst ertoe doet. Een passend aantal lettergrepen betekent op zichzelf niet dat een zin vanzelf natuurlijk klinkt of perfect bij een scène past. 2527
• Index-NativeLong, ook uitgebracht als Index-Nailong, is bedoeld voor vertaling van langere documenten. Het model gebruikt de volledige brontekst om samenhang, verwijzingen en terminologie door het document heen te helpen bewaken. De beschikbare documentclient heeft vaste sjablonen voor Chinees-Engels en Chinees-Japans; die workflow is dus beperkter beschreven dan de ondersteuning van 150 talen bij de tekstmodellen. 326

Tools en kanttekeningen

De repository bevat ook een browserextensie voor het vertalen van webpagina’s met een lokaal model dat via een OpenAI-compatibele API beschikbaar wordt gemaakt. De beschreven videodubworkflow bestaat onder meer uit audio-extractie, het scheiden van stemmen, het opdelen van spraak in segmenten met tijdcodes, vertaling en het terugplaatsen van de audio op de tijdlijn. Dat maakt duidelijk dat nasynchronisatie meer omvat dan alleen vertalen. 2022

De voorbeelden en het materiaal van de makers bestrijken verschillende toepassingen, van tekst en ondertitels tot vertalingen met een syllabedoel en lange documenten. Zulke voorbeelden en gerapporteerde evaluaties zijn geen onafhankelijk bewijs dat één model in elke taal, taak of situatie het beste is. Het 35B-A3B-model is expliciet een preview; materiaal van NativeLongBench dat gedeeld kan worden, staat als gepland vermeld. De beschikbare informatie laat daarom vooral zien waar de verschillende varianten voor zijn ontworpen, niet dat stem, timing of samenhang altijd foutloos behouden blijven. 526