5 przykładów, które dowodzą, że sprawdzacze treści AI są bezużyteczni

Niezależnie od tego, czy jesteś zawodowym pisarzem, czy studentem regularnie piszącym eseje, prawdopodobnie masz już dość przepuszczania swojej pracy przez narzędzia do sprawdzania treści oparte na sztucznej inteligencji i otrzymywania w 100% wyników generowanych przez sztuczną inteligencję. W rzeczywistości narzędzia do sprawdzania treści wspomagane sztuczną inteligencją nie zawsze są wiarygodne. Poniższe pięć przykładów pokazuje dlaczego.

1. W akapicie po prostu poproszono sztuczną inteligencję o napisanie

Jeśli sprawdzanie treści przez sztuczną inteligencję jest w 100% dokładne, to treść wygenerowana przez ChatGPT powinna zostać oznaczona jako wygenerowana w 100% przez sztuczną inteligencję, prawda?

Testy wykazały, że zawartość ChatGPT w 70–100% jest generowana przez sztuczną inteligencję. Jednak po kilku próbach okazało się, że tekst wygenerowany przez ChatGPT został w 100% napisany przez człowieka.

Na przykład autor poprosił ChatGPT o napisanie dialogu na temat aparatu iPhone'a 15 Pro. Informacje zwrotne są przetwarzane za pomocą ZeroGPT, najbardziej zaawansowanego i niezawodnego silnika ChatGPT, GPT4 i sztucznej inteligencji do wykrywania treści.

Rzeczywiście, ZeroGPT informuje, że tekst ten został w 100% napisany przez człowieka.

Jeśli więc treść generowaną przez sztuczną inteligencję można oznaczyć jako napisaną przez człowieka, czy w odwrotnej sytuacji można ufać wynikom?

2. Deklaracja niepodległości Stanów Zjednoczonych

Deklaracja Niepodległości Stanów Zjednoczonych została przyjęta przez Kongres 4 lipca 1776 roku, co oznacza, że ​​została spisana prawie 250 lat temu.

Gdyby Thomas Jefferson, twórca Deklaracji Niepodległości, nie posiadał zdolności podróżowania w czasie, sztuczna inteligencja w żaden sposób nie mogłaby napisać Deklaracji Niepodległości Stanów Zjednoczonych. Co ciekawe, ZeroGPT uważa inaczej i twierdzi, że sztuczna inteligencja wygenerowała 97,75% tekstu. To jest śmieszne!

3. Biblia

Biblia hebrajska została ukończona około roku 100 n.e., mniej więcej 1676 lat przed Deklaracją Niepodległości. Detektory AI, takie jak ZeroGPT, często oznaczają znane dzieła literackie i teksty historyczne jako wygenerowane przez AI, ponieważ dzieła te mają wpływ na modele AI.

Niezależnie od tego, fakt, że wprowadzenie tekstu z Biblii do ZeroGPT uruchamia ostrzeżenie generowane w 100% przez sztuczną inteligencję, dowodzi, że nie można w pełni ufać detektorom treści.

4.Moby Dick

Moby Dick, powieść Hermana Melville’a o jego przeżyciach na morzu, została opublikowana po raz pierwszy w 1851 roku – na długo przed wynalezieniem sztucznej inteligencji. Autor poddał znany fragment pierwszego rozdziału analizie za pomocą ZeroGPT i okazało się, że w 88,24% został on napisany przez sztuczną inteligencję.

Chociaż wynik ten nie jest specjalnie zaskakujący, biorąc pod uwagę, że modele sztucznej inteligencji czerpią inspirację z klasycznych dzieł literackich, to jednak fakt, że znany tekst został błędnie sklasyfikowany jako dzieło stworzone przez sztuczną inteligencję, nadal rzuca światło na ważny problem i pokazuje, jak zawodne mogą być narzędzia do wykrywania treści.

5. Pierwsza informacja prasowa Apple'a na temat iPhone'a

Oczywiście modele sztucznej inteligencji są trenowane na szerokiej gamie tekstów, w tym na klasycznych dziełach literackich, takich jak Szekspir czy Moby Dick. Choć mogłoby to wyjaśniać, dlaczego Moby Dick może zostać błędnie zidentyfikowany jako dzieło sztucznej inteligencji, gdy przepuści się go przez program sprawdzający treść, pomysł, że komunikat prasowy Apple miałby zostać wykorzystany do wytrenowania modelu sztucznej inteligencji, wydaje się absurdalny.

Zamiast sprawdzać nowy komunikat prasowy firmy Apple, autor przeszukał archiwa wiadomości Apple i znalazł pierwszy komunikat prasowy Apple dotyczący iPhone'a. Autor wkleił cały komunikat prasowy do ZeroGPT, a program wykrył, że 89,77% treści zostało wygenerowane przez sztuczną inteligencję.

Poza nagłówkami i jednym lub dwoma akapitami, reszta tekstu została podobno wygenerowana przez sztuczną inteligencję.

Ogólnie rzecz biorąc, istnieje wiele narzędzi do wykrywania sztucznej inteligencji, z którymi można przeprowadzić eksperymenty. Sednem sprawy jest jednak to, że narzędzia do wykrywania treści oparte na sztucznej inteligencji nie działają. Chociaż oznacza to, że wykrywanie tekstu generowanego przez sztuczną inteligencję jest jeszcze trudniejsze, tekst napisany w całości przez sztuczną inteligencję nadal można rozpoznać, po prostu uważnie go czytając.