Content True AI Checker -arvostelu: Toimiiko se, kenelle se on tarkoitettu ja voiko sen 98,5 %:n tarkkuusväitteeseen luottaa?

Mallit, joita se väittää tunnistavansa

Content True sanoo profiloivansa merkittävimmät tekoälymallit, kuten GPT, Claude, Gemini, Llama ja DeepSeek . Hinnoittelusivu mainitsee lisäksi usean mallin tunnistuksen Gemini, Claude ja LLaMA -malleille, sekoitettujen tekoäly/ihmistekstien tunnistuksen ja ladattavat tekoälyraportit .

Tietosuoja- ja turvallisuusväitteet

Content Truen kotisivujen mukaan lähetettyjä tekstejä ei käytetä sen mallien kouluttamiseen, ja työ pysyy yksityisenä . Tietosuojakäytännön mukaan se voi kerätä henkilökohtaisia tietoja, käyttötietoja ja laitetietoja sekä käyttää kolmannen osapuolen palveluntarjoajia. Samalla se toteaa toteuttavansa turvatoimia henkilötietojen suojaamiseksi .

Tarkkuuden tosiasiatarkistus: Voiko 98,5 %:n väitteeseen luottaa?

Content True väittää 98,5 %:n tarkkuutta ja sanoo algoritmiensa ”käytännössä poistavan vääriä positiivisia tuloksia” . Riippumaton näyttö Content Truen 98,5 %:n luvun vahvistamiseksi on kuitenkin riittämätöntä. Laajempi tutkimus tekoälyntunnistustyökaluista herättää vakavia kysymyksiä luotettavuudesta.

Vuonna 2023 tehdyssä Weber-Wulff et al. -tutkimuksessa arvioitiin 14 tunnistustyökalua – mukaan lukien Turnitin ja GPTZero – ja havaittiin, että ”kaikki jäivät alle 80 %:n tarkkuuden ja vain 5 yli 70 %:n” . Stanfordin yliopiston tutkimuksessa tekoälyntunnistustyökalut merkitsivät 61 %:ssa tapauksista muiden kuin äidinkielisten englanninpuhujien kirjoittamat esseet tekoälyn tuottamiksi, vaikka ne olivat täysin ihmisten kirjoittamia . Riippumattomassa Supwriterin testissä, jossa käytiin läpi 150 tosielämän näytettä, yksikään työkalu ei yltänyt yli 80 %:n kokonaistarkkuuteen .

Jopa tekoälyntunnistusyritykset myöntävät rajoituksensa. Originality.ai, toinen tunnettu työkalu, toteaa avoimesti: ”Jopa oma tekoälyntunnistimme ei ole täydellinen, ja se voi tuottaa vääriä positiivisia tuloksia” .

Tärkein oivallus: Content Truen suorituskykyväitteisiin ei tule suhtautua lopullisena totuutena. Sen tuloksia kannattaa käyttää vain yhtenä signaalina monien joukossa.

Käytännön ohje

Content True voi olla hyödyllinen työkalu nopeisiin autenttisuustarkistuksiin, mutta sen antamat arviot tulisi aina yhdistää ihmisen tekemään katselmukseen, kirjoitusprosessin todisteisiin, versiohistoriaan, lähteisiin ja kontekstiin ennen kuin tehdään korkean panoksen päätöksiä .