Loch Ness · ŽMOGAUS RAŠTAS · AI detektoriaus klaidingi teigiami rezultatai
Vadovo dalis: Ar AI detektoriai iš tikrųjų veikia? Ką sako tyrimai
Parašė Camille G., „Loch Ness" įkūrėja · Paskelbta 2026 m. rugsėjo 29 d. · Paskutinį kartą atnaujinta 2026 m. rugsėjo 29 d.
Trumpas atsakymas: dauguma detektorių iš viso neįpažįsta dirbtinio intelekto. Jie matuoja, kiek nuspėjamas tekstas yra, o daug tikrų žmonių rašo nuspėjamai. Žmonės, rašantys antrąja kalba, studentai, laikydamiesi šablono, bet kas, kuris tyčia rašo paprastai: jie yra tie, kurie gauna įspėjimus. Štai kaip tai vyksta ir kodėl tai nėra jūsų kalta.
Žmonijos kilmės žyma · Rašytojams Detektorius tave pažymėjo? Tavo procesas yra atsakymas. Parodykite savo juodraščius ir versijų istoriją kartą, tiesiogiai arba ekrano įraše, ir gaukite viešą puslapį, kuriame būtų nurodyta, kas buvo patikrinta. Nemokamai bandomojo laikotarpio metu. Patvirtinkite savo tapatybę, tai nemokama → Dar nepasiruošę peržiūrai? Gaukite nemokamą savęs deklaruojamą ženklelį →Kaip dauguma detektorių nusprendžia
Kalbų modeliai linkę rinktis tikėtinus žodžius. Todėl daugelis detektorių vertina tekstą pagal tai, kiek netikėti jo žodžių pasirinkimai, matas, kurį tyrinėtojai vadina „kebulumu" (angl. perplexity). Žemas netikėtumas skaitomas kaip „mašiniškas". Problema ta, kad tai matuoja stilių, o ne autoriškumą. Stanfordo tyrime, kuriame buvo nagrinėti septyni populiarūs detektoriai, žmogiškieji esė, kuriuos pažymėjo kiekvienas detektorius, buvo iš esmės tie, kurie turėjo žemiausią kebulumą (Liang et al., 2023).
Kas dažniausiai gaunaMėlynas žymeklis
- Žmonės, rašantys antrąja kalba. Tame studijoje 91 TOEFL esė buvo išanalizuota naudojant septynis detektorius: vidutiniškai 61% buvo klaidingai pažymėta kaip sukurta dirbtinio intelekto, ir 89 iš 91 buvo pažymėta bent vieno detektoriaus. JAV aštuntų klasių mokinių esės buvo klasifikuotos beveik tobulai (Šablonai).
- Trumpi tekstai. „OpenAI" pareiškė, kad jos nuosavas klasifikatorius buvo nepatikimas trumpuose įvestyse ir veikė geriau, kai tekstai buvo ilgesni, prieš pasitraukdama dėl žemos tikslumio (OpenAI). Padengimo raštas arba produkto aprašymas suteikia detektoriui labai mažai medžiagos darbui.
- Šabloninis rašymas. Šablonai, standartinės struktūros ir tokia neutrali proza, kurią dažnai prašo mokyklos ir verslas, yra nuspėjamos savo prigimtimi.
Ta pati gudrybė veikia ir atvirkščiai
Kai Stanfordo mokslininkai paprašė ChatGPT perrašyti tas žmogaus esė su sudėtingesniu žodynu, detektoriai pradėjo jas vadinti žmogiškos (ScienceDaily). Platesnė 14 įrankių peržiūra nustatė tą pačią silpnybę: tikslumas dar labiau sumažėjo, kai dirbtinio intelekto tekstas buvo redaguojamas, perrašomas ar automatiškai verčiamas (Weber-Wulff et al., 2023). Taigi detektoriaus balas labiau apie tai, kaip tekstas skamba, nei apie tai, kas jį parašė.
Tai kainuoja žmonėms tikrų dalykų
Tai nėra tik akademinė problema. Studentai buvo atsakingi pagal etikos procedūras dėl detektoriaus rezultatų, o 2024 m. birželį Gizmodo pranešė apie laisvai samdomus rašytojus ir žurnalistus, kurie prarado darbą, kai aptikimo programinė įranga klaidingai klasifikavo jų rašinius kaip sugeneruotus dirbtinio intelekto (santrauka Vikipedijoje).
Jei detektorius pažymėjo jūsų tekstą
Jokia dalis jūsų rašyto teksto nereikalinga pataisos. Tai, kas padeda – tai įrodymai, kaip jūs jį parašėte: jūsų dokumento versijos istorija, jūsų juodraščiai, jūsų pastabos. Procentas negali konkuruoti su jūsų darbo grafiku. Aš įdėjau visą metodą į kaip įrodyti, kad tai parašei pats.
Ir prašau, neišdidžink savo stiliaus, kad pataikytum detektoriui. Kaip rodo tyrimai, būtent tai daro dirbtinis intelektas, perrašydamas tekstą, norėdamas išvengti deteksijos. Tavo paprastas balsas yra visai tinkamas.
Pavargote nuo to, kad jus vertina pagal balą? Leiskite komu nors pamatyti, kaip jūs iš tikro rašote. Žiūrėkite, kaip veikia Žmonių kilmės peržiūra →Grįžti prie apžvalgos: Ar AI detektoriai iš tikrųjų veikia?.
Pilnas atvirumas: „Human Origin" – žyma, minima šiame puslapyje, – yra mano sukurta. Tai pažymiu, kad galėtumėte įvertinti tai, ką apie ją sakau. Aukščiau išdėstyti faktai remiasi toliau nurodytais šaltiniais.
Šaltiniai
- Liang et al. — GPT detektoriai yra šališki prieš ne gimtakalbius anglų kalbos rašytojus, Patterns (2023)
- Liang et al. — ta pati studija, pilnas tekstas „arXiv"
- ScienceDaily — GPT detektoriai gali būti šališki prieš ne gimtakalbius anglų kalbą rašytojus (2023 m. liepa)
- OpenAI — Naujas AI klasifikatorius AI parašytam tekstui žymėti (su 2023 m. liepos nutraukimo pastaba)
- Weber-Wulff et al. — Dirbtinio intelekto sukurto teksto nustatymo įrankių testavimas (2023), per ERIC
- Wikipedia — Dirbtinio intelekto turinio aptikimas (pranešimas apie laisvų samdinių darbo vietos praradimą)
Atnaujinimų žurnalas
September 29, 2026 — First publication.
