nyszomOsobistość
9piorunówPonieważ mam lekkie ADHD i dużo tokenów w Codex, stwierdziłem 'dobra, j⁎⁎ać' i zrobiłem własne narzędzie do wykrywania, czy tekst napisał człowiek, czy AI.
Dlaczego jest lepsze niż tysiące podobnych narzędzi (a przynajmniej warte uwagi)?
- koncentruje się przede wszystkim na polskich tekstach
- Jest za darmo, a to uczciwa cena
- Specjalizuje się w artykułach z internetu, a nie książkach, wierszach itp.
- Przede wszystkim: każdy wynik rozbija na składowe, czyli jawnie pokazuje, jakie cechy sprawdzało i jak każda z nich wpłynęła na wynik!
Do tego ma piękny UI (Czat dał z siebie 30%). Zapraszam do zabawy:
Tłumaczę tam też, jak to wszystko działa.
Czy działa? Tak, ale... Tekst to tylko słowa. W przeciwieństwie do muzyki czy wideo zawiera znacznie mniej informacji, więc nie ma za bardzo gdzie 'ukryć' podpisu LLM. W praktyce analizujemy głównie formę tekstu, bo to, czy większe bzdury wypisuje inteligencja sztuczna, czy naturalna, pozostaje kwestią dyskusyjną :clown_face:
Moim celem nie było stworzenie jakiegoś superwytrychu do przechytrzenia OpenAI, tylko pokazanie, jak takie narzędzia mogą działać.
A dlaczego w ogóle da się wykrywać teksty AI?
Po pierwsze, modele w trakcie ich uczenia, trochę „uśredniają” teksty, na których są trenowane, przez co mają swoje ulubione słowa, konstrukcje i schematy wypowiedzi.
Po drugie, twórcy modeli dodatkowo je tresują, żeby były pomocne, uprzejme i bezpieczne, co też zostawia charakterystyczne ślady.
Po trzecie, dochodzi sposób losowania kolejnych słów; modele częściej wybierają te bardziej prawdopodobne, przez co ich teksty bywają statystycznie bardziej przewidywalne niż ludzkie.
Czwartą kwestią jest wpływ angielskiego, na którym modele są intensywnie trenowane, przez co w polskich tekstach mogą pojawiać się charakterystyczne kalki językowe i konstrukcje przypominające maszynowe tłumaczenie.
Na to wszystko dochodzą niektórzy twórcy modeli, którzy celowo ukrywają w generowanych tekstach statystyczne podpisy (watermarki), które pozwalają później rozpoznać ich pochodzenie.
W efekcie nawet taka byle jaka zabawka może mieć bardzo wysoką skuteczność (na niektórych typach tekstów), ale z drugiej strony bardzo łatwo ją zmylić: co z tego, że człowiek zmienił kilka słów i przecinków, skoro całą treść wymyśliła maszyna?
@nyszom wrzuciłem swoje wypociny i niestety nie wykryło, że jestem AI botem :(
Ale przynajmniej wiemy, że działa ( ͡~ ͜ʖ ͡°)
@WujekAlien no raz działa, raz nie działa - najgorzej działa, gdy tekst jest innego 'gatunku', niż te na których się uczył (uczył się na artykułach w stylu stron informacynych itp), więc nie poradzi sobie na przykład z wpisami z twittera itp.
@nyszom Ecce homo 😆
@UncleFester a miało wyjść inaczej? xD
@nyszom Zasadniczo hetero... 😆
@UncleFester ja nie oceniam 😛













