Ho testato 5 app di rilevamento della scrittura a mano basate sull'intelligenza artificiale: questa ha funzionato meglio, questa non è stata precisa.

Da un lato, strumenti di intelligenza artificiale come ChatGPT e Google Gemelli e DeepSeek Incredibilmente utile quando si tratta di scrivere e-mail, riassumere il contenuto e capire il tono della nostra scrittura.

È difficile immaginare la vita prima della fine del 2022, quando la maggior parte di noi ha scoperto che ChatGPT poteva fare la parte del lavoro più impegnativo quando si trattava di scrivere contenuti. Hai bisogno di una lettera di presentazione? Puoi scriverne una in 5 secondi, completa di saluti e un riepilogo delle tue esperienze lavorative.

D'altra parte, i contenuti di scarsa qualità generati dall'intelligenza artificiale sono ovunque intorno a noi. I testi scritti dai chatbot mostrano segni rivelatori, come la mancanza di originalità e la vaghezza dei dettagli. Ma in questa guerra di parole, i bot di intelligenza artificiale sono in costante miglioramento.

Puoi chiedere a ChatGPT di riscrivere i tuoi contenuti per renderli più autentici ed evitare di essere rilevati da app come GPTZero. La guerra è iniziata, ed è davvero un gioco del gatto e del topo.

Non sappiamo davvero chi sta vincendo questa guerra. Se sei uno studente, stai scrivendo contenuti per il tuo lavoro o stai anche scrivendo un'email per una riunione di famiglia quest'estate, scoprire che scrivere con l'intelligenza artificiale è molto più facile di quanto tu possa immaginare, il che potrebbe farti riflettere.

Ad esempio, la maggior parte dei professori universitari ora sa come utilizzare un servizio di rilevamento basato sull'intelligenza artificiale per i propri elaborati. Uno strumento popolare, chiamato GPTZero, utilizza un indice di probabilità per rilevare se l'intelligenza artificiale è coinvolta in un contenuto.

Tuttavia, non tutte le app di rilevamento dell'intelligenza artificiale funzionano allo stesso modo.

Ho trovato uno strumento che eccelleva e un altro che falliva. Per condurre i miei test, ho utilizzato un capitolo campione di un libro che sto scrivendo e l'ho caricato per intero nelle cinque app di rilevamento IA elencate di seguito.

Ho anche chiesto a ChatGPT di scrivere una lettera di presentazione per un lavoro fittizio. Ho chiesto al bot di usare un po' di stile e originalità, cercando di evitare di rivelare la sua IA. Infine, ho chiesto a ChatGPT di finire questo saggio per me, con una divisione 50-50 tra me e l'IA (ovvero, qualcosa che non farei mai nella vita reale).

Ecco come si sono comportati i singoli strumenti di rilevamento basati sull'intelligenza artificiale nei tre test, incluso il grande vincitore.

1. Migliore in assoluto: GPTZero

Ho usato GPTZero diverse volte, anche perché la versione gratuita permette di rilevare piccole quantità di testo senza abbonarsi al servizio. Per questa recensione, ho utilizzato la versione Premium completa, che costa 23.99 dollari al mese e consente di eseguire scansioni di base e avanzate.

Utilizzando una scansione avanzata, GPTZero suddivide un lungo testo in pagine e valuta la probabilità di testo generato dall'IA per ciascuna sezione. GPTZero ha effettivamente segnalato alcuni paragrafi con una probabilità dell'1% di IA e alcune frasi con una probabilità del 5%. Tuttavia, nel complesso, il servizio ha funzionato molto bene.

Quando ho testato la lettera di presentazione scritta da ChatGPT, GPTZero si è davvero distinta rispetto a tutte le altre app. Il servizio ha segnalato che la lettera era probabilmente scritta da un'intelligenza artificiale al 100%. L'unico problema era la presenza di alcuni falsi segnali, nonostante questa valutazione complessiva.

GPTZero ha classificato un piccolo numero di frasi come generate da esseri umani. Quando ho chiesto a GPTZero di esaminare il mio saggio, composto al 50% da esseri umani e al 50% da intelligenza artificiale, il servizio lo ha classificato al 58% come generato da esseri umani, il più accurato tra le applicazioni di rilevamento basate su intelligenza artificiale.

2. Originality.AI: uno strumento completo per rilevare i contenuti generati dall'intelligenza artificiale

Originality.AI è una soluzione completa e avanzata per il rilevamento di contenuti generati dall'intelligenza artificiale, che fornisce risultati dettagliati e accurati. Il piano Pro costa circa 12.95 dollari al mese e include 2000 crediti. Testando lo strumento su estratti del mio libro, Originality.AI è stato in grado di identificare l'intero testo come scritto da un essere umano con il 100% di sicurezza: l'unico strumento a farlo correttamente. Questo è molto rassicurante, sebbene lo strumento abbia messo in dubbio alcune frasi, ritenendole scritte da un'intelligenza artificiale, pur con un punteggio complessivo del 100%.

Nel test della lettera di presentazione generata da ChatGPT, Originality.AI ha riportato che il 91% era scritto da un essere umano. Questo perché ho chiesto a ChatGPT di evitare il rilevamento dell'IA e di scrivere in uno stile distintivo, ma questo risultato è un po' preoccupante.

In un altro test, ho chiesto a ChatGPT di completare questo saggio e i risultati mi hanno scioccato. Originality.AI ha classificato l'intero saggio come originale con il 100% di sicurezza, nonostante solo la prima metà fosse stata scritta da un essere umano. (Quando ho chiesto a ChatGPT di completare il saggio, ha prodotto del contenuto generico, nonostante avessi chiesto al bot di rispettare lo stile del saggio.) Originality.AI sembra essere caduta in questo tranello, sebbene sia una pratica comune, soprattutto tra gli studenti. Questo evidenzia l'importanza di utilizzare gli strumenti di rilevamento dell'IA con cautela e di valutare i risultati in modo critico, tenendo presente che questi strumenti non sono infallibili al 100% e a volte possono commettere errori.

3. Grammarly

Grammarly è principalmente uno strumento progettato per aiutarti a scrivere senza errori ed evitare il plagio, ma include anche un potente rilevatore di intelligenza artificiale. Lo trovo un po' troppo sensibile.

È considerata un'interfaccia Grammarly È un po' confusionario, perché segnala contemporaneamente sia il plagio che la scrittura artificiale. L'app ha segnalato uno dei miei capitoli, dicendo: "Il 7% del tuo testo corrisponde a fonti esterne", cosa che ho trovato offensiva. È falso e frustrante.

L'app ha anche affermato di non rilevare schemi di intelligenza artificiale comuni nella scrittura, il che è stato un sollievo. Tuttavia, non ho apprezzato le false segnalazioni. Grammarly è anche costoso, con un costo di 30 dollari al mese con pagamento mensile.

Il mio trucco, ovvero chiedere a ChatGPT di scrivere una lettera di presentazione per evitare di essere scoperto, ha funzionato alla perfezione: Grammarly ha risposto: "Il tuo documento non corrisponde a nulla nei nostri riferimenti né contiene schemi di testo comuni dell'intelligenza artificiale".

Questo era completamente falso, poiché il testo era interamente generato dall'IA. Lo stesso risultato si è verificato quando ho fornito un articolo composto al 50% da me e al 50% da IA: Grammarly ha dichiarato di essere stato generato interamente da esseri umani. Pertanto, data la sua limitata efficacia nel rilevare il testo generato dall'IA, gli utenti dovrebbero essere cauti e adottare strategie diverse da Grammarly per verificare l'originalità dei loro contenuti.

4. Winston AI

Winston AI è un'applicazione potente e completa, molto simile a Originality.AI per molti aspetti. Quando ho esaminato il capitolo di esempio del mio libro, ho assegnato a Winston AI un punteggio "Umano" del 96%, una valutazione abbastanza equa.

Purtroppo, analogamente a Grammarly, il sistema ha segnalato alcuni passaggi con una probabilità del 50% di essere stati scritti da un essere umano. Nella sezione centrale, Winston AI ha valutato due interi paragrafi come scritti al 100% da un'intelligenza artificiale, anche se non lo erano.

Ho testato il piano Essential di Winston AI, che costa 18 $ al mese ma non rileva il plagio; costa 12 $ al mese se pagato annualmente.

Per quanto riguarda la lettera di presentazione, l'intelligenza artificiale di Winston si è dimostrata estremamente precisa. Il sistema ha classificato il testo come scritto al 100% da un'intelligenza artificiale, sebbene abbia indicato che la seconda metà della lettera potrebbe essere stata generata da un essere umano (suggerendo una probabilità del 48%).

Fortunatamente, Winston AI ha anche classificato correttamente il mio saggio, indicando una probabilità del 46% che fosse stato generato da un essere umano. L'app ha identificato una sezione centrale scritta interamente da un'IA, ma ha omesso la sezione conclusiva (anch'essa generata dall'IA).

5. Meno efficace: Monica

Monica è il mio strumento preferito per il rilevamento di testi generati dall'intelligenza artificiale, principalmente per la sua multifunzionalità, di cui il rilevamento tramite intelligenza artificiale è solo una delle tante. Infatti, Monica si affida a Copyleaks per il suo processo di rilevamento.

Per il capitolo del libro, Monica ha classificato il mio script di test come simile al 99% a quello umano, simile a GPTZero e ZeroGPT, ma non ha fornito ulteriori indicazioni o feedback su sezioni specifiche. Questa mancanza di dettagli ne riduce l'utilità come strumento di analisi approfondita.

Al contrario, Monica è riuscita a riconoscere correttamente la lettera di presentazione come scritta interamente dall'IA con una precisione del 100%. Ciò non sorprende, dato che GPTZero ha fornito lo stesso risultato e Monica si basa sulla stessa applicazione.

Monica ha avuto notevoli difficoltà a rilevare il mio articolo, che era al 50% generato da esseri umani e al 50% generato dall'intelligenza artificiale. Il software ha determinato che l'articolo era scritto al 100% da esseri umani e non è riuscito a identificare l'altra metà, generata dall'intelligenza artificiale. Questo errore significativo solleva dubbi sulla precisione di Monica nell'analisi di testi misti.