Πώς να εντοπίσετε τη λογοκλοπή ChatGPT και γιατί είναι τόσο δύσκολο

Τα chatbots είναι καυτά πράγματα αυτή τη στιγμή, και ChatGPT είναι ο κυριότερος ανάμεσά τους. Όμως, χάρη στο πόσο ισχυρές και ανθρώπινες είναι οι απαντήσεις του, οι ακαδημαϊκοί, οι εκπαιδευτικοί και οι εκδότες αντιμετωπίζουν το αυξανόμενο κύμα λογοκλοπής και εξαπάτησης που δημιουργείται από την τεχνητή νοημοσύνη. Τα παλιά σας εργαλεία ανίχνευσης λογοκλοπής μπορεί να μην είναι αρκετά για να ξεχωρίσετε το αληθινό από το ψεύτικο.

Σε αυτό το άρθρο, θα μιλήσω λίγο για αυτήν την εφιαλτική πλευρά των chatbots AI, θα ελέγξω μερικά διαδικτυακά εργαλεία ανίχνευσης λογοκλοπής και θα εξερευνήσω πόσο τρομερή έχει γίνει η κατάσταση.

Πολλές επιλογές ανίχνευσης

Η πιο πρόσφατη εκκίνηση του Νοεμβρίου 2022 ChatGPT του OpenAI βασικά ώθησε την ανδρεία chatbot στο προσκήνιο. Επέτρεπε σε κάθε κανονικό Joe (ή σε οποιονδήποτε επαγγελματία) να δημιουργεί έξυπνα, κατανοητά δοκίμια ή άρθρα και να λύνει μαθηματικά προβλήματα βασισμένα σε κείμενο. Για τον άγνωστο ή άπειρο αναγνώστη, το περιεχόμενο που δημιουργείται με τεχνητή νοημοσύνη μπορεί εύκολα να περάσει ως νόμιμο κείμενο, γι' αυτό οι μαθητές το λατρεύουν - και οι δάσκαλοι το μισούν.

Μια μεγάλη πρόκληση με τα εργαλεία γραφής AI είναι η ικανότητά τους με δίκοπο μαχαίρι να χρησιμοποιούν φυσική γλώσσα και γραμματική για τη δημιουργία μοναδικού και σχεδόν εξατομικευμένου περιεχομένου ακόμα κι αν το ίδιο το περιεχόμενο αντλήθηκε από α βάση δεδομένων. Αυτό σημαίνει ότι ο αγώνας για να νικήσουμε την εξαπάτηση που βασίζεται στην τεχνητή νοημοσύνη βρίσκεται σε εξέλιξη. Εδώ είναι μερικές επιλογές που βρήκα και είναι διαθέσιμες αυτήν τη στιγμή δωρεάν.

Ανιχνευτής εξόδου GPT-2 προέρχεται απευθείας από τον προγραμματιστή του ChatGPT OpenAI για να αποδείξει ότι διαθέτει ένα bot ικανό να ανιχνεύει κείμενο chatbot. Ο ανιχνευτής εξόδου είναι εύκολος στη χρήση — οι χρήστες πρέπει απλώς να εισάγουν κείμενο σε ένα πεδίο κειμένου και το εργαλείο θα παρέχει αμέσως την αξιολόγησή του για το πόσο πιθανό είναι το κείμενο να προέρχεται από άνθρωπο ή όχι.

Δύο ακόμη εργαλεία που έχουν καθαρές διεπαφές είναι Writer AI Content Detector και Περιεχόμενο σε κλίμακα. Μπορείτε είτε να προσθέσετε μια διεύθυνση URL για σάρωση του περιεχομένου (μόνο για εγγραφή) είτε να προσθέσετε κείμενο με μη αυτόματο τρόπο. Στα αποτελέσματα δίνεται μια ποσοστιαία βαθμολογία για το πόσο πιθανό είναι το περιεχόμενο να έχει δημιουργηθεί από τον άνθρωπο.

GPTZero είναι ένα οικιακό εργαλείο beta που φιλοξενείται στο Streamlit και δημιουργήθηκε από τον φοιτητή του Πανεπιστημίου Πρίνστον Έντουαρντ Ζεν. Διαφέρει από τα υπόλοιπα ως προς τον τρόπο με τον οποίο παρουσιάζει τα αποτελέσματά του το μοντέλο «algiarism» (κλοπή υποβοηθούμενη από AI). Το GPTZero σπάει τις μετρήσεις σε αμηχανία και έντονο. Το Burstiness μετρά τη συνολική τυχαιότητα για όλες τις προτάσεις σε ένα κείμενο, ενώ η αμηχανία μετρά τη τυχαιότητα σε μια πρόταση. Το εργαλείο εκχωρεί έναν αριθμό και στις δύο μετρήσεις — όσο χαμηλότερος είναι ο αριθμός, τόσο μεγαλύτερη είναι η πιθανότητα το κείμενο να έχει δημιουργηθεί από ένα bot.

Για πλάκα, συμπεριέλαβα Giant Language Model Test Room (GLTR), που αναπτύχθηκε από ερευνητές του MIT-IBM Watson AI Lab και του Harvard Natural Language Processing Group. Όπως και το GPTZero, δεν παρουσιάζει τα τελικά αποτελέσματά του ως ξεκάθαρη διάκριση «ανθρώπινη» ή «ρομπότ». Το GLTR χρησιμοποιεί βασικά bots για να προσδιορίσει κείμενο που γράφτηκε από bots, καθώς τα bots είναι λιγότερο πιθανό να επιλέξουν απρόβλεπτες λέξεις. Ως εκ τούτου, τα αποτελέσματα παρουσιάζονται ως ένα χρωματικά κωδικοποιημένο ιστόγραμμα, κατατάσσοντας το κείμενο που δημιουργείται από την τεχνητή νοημοσύνη έναντι του κειμένου που δημιουργείται από τον άνθρωπο. Όσο μεγαλύτερη είναι η ποσότητα του απρόβλεπτου κειμένου, τόσο πιο πιθανό είναι το κείμενο να προέρχεται από άνθρωπο.

Δοκιμάζοντάς τους

Όλες αυτές οι επιλογές μπορεί να σας κάνουν να πιστεύετε ότι βρισκόμαστε σε καλό σημείο με την ανίχνευση AI. Αλλά για να δοκιμάσω την πραγματική αποτελεσματικότητα καθενός από αυτά τα εργαλεία, ήθελα να το δοκιμάσω μόνος μου. Έτσι, έτρεξα μερικές παραγράφους δειγμάτων που έγραψα ως απάντηση σε ερωτήσεις που έθεσα επίσης, σε αυτήν την περίπτωση, στο ChatGPT.

Η πρώτη μου ερώτηση ήταν απλή: Γιατί η αγορά ενός προεγκατεστημένου υπολογιστή είναι απογοητευτική; Δείτε πώς απαντώ οι δικές μου απαντήσεις σε σύγκριση με την απάντηση από το ChatGPT.

Όπως μπορείτε να δείτε, οι περισσότερες από αυτές τις εφαρμογές μπορούσαν να πουν ότι τα λόγια μου ήταν γνήσια, με τις τρεις πρώτες να είναι οι πιο ακριβείς. Αλλά το ChatGPT ξεγέλασε τις περισσότερες από αυτές τις εφαρμογές ανιχνευτή με την απόκρισή του επίσης. Βαθμολογήθηκε 99% ως άνθρωπος στην εφαρμογή Writer AI Content Detector, για αρχή, και επισημάνθηκε μόλις 36% ψεύτικο από τον ανιχνευτή που βασίζεται σε GPT. Ο GLTR ήταν ο μεγαλύτερος παραβάτης, ισχυριζόμενος ότι τα δικά μου λόγια ήταν εξίσου πιθανό να γραφτούν από άνθρωπο όπως τα λόγια του ChatGPT.

Ωστόσο, αποφάσισα να του δώσω άλλη μια βολή, και αυτή τη φορά, οι απαντήσεις βελτιώθηκαν σημαντικά. Ζήτησα από το ChatGPT να παράσχει μια περίληψη της έρευνας του Ελβετικού Ομοσπονδιακού Ινστιτούτου Τεχνολογίας σχετικά με την αντιθαμβωτική χρήση σωματιδίων χρυσού. Σε αυτό το παράδειγμα, οι εφαρμογές ανιχνευτή έκαναν πολύ καλύτερη δουλειά στην έγκριση της δικής μου απόκρισης και στον εντοπισμό του ChatGPT.

Οι τρεις πρώτες δοκιμές έδειξαν πραγματικά τη δύναμή τους σε αυτή την απόκριση. Και ενώ το GLTR δυσκολευόταν ακόμα να δει τη δική μου γραφή ως ανθρώπινη, τουλάχιστον έκανε καλό να πιάσει το ChatGPT αυτή τη φορά.

Κλείσιμο

Είναι προφανές από τα αποτελέσματα κάθε ερωτήματος ότι οι διαδικτυακοί ανιχνευτές λογοκλοπής δεν είναι τέλειοι. Για πιο σύνθετες απαντήσεις ή γραπτά (όπως στην περίπτωση της δεύτερης προτροπής μου), είναι λίγο πιο εύκολο ώστε αυτές οι εφαρμογές να ανιχνεύουν τη γραφή που βασίζεται σε AI, ενώ οι απλούστερες απαντήσεις είναι πολύ πιο δύσκολες συμπεραίνω. Αλλά σαφώς, δεν είναι αυτό που θα έλεγα αξιόπιστο. Περιστασιακά, αυτά τα εργαλεία ανίχνευσης ταξινομούν εσφαλμένα άρθρα ή δοκίμια ως δημιουργημένα από το ChatGPT, κάτι που αποτελεί πρόβλημα για τους δασκάλους ή τους συντάκτες που θέλουν να βασιστούν σε αυτά για να πιάσουν απατεώνες.

Οι προγραμματιστές βελτιώνουν συνεχώς την ακρίβεια και τα ψευδώς θετικά ποσοστά, αλλά προετοιμάζονται επίσης για την άφιξη του GPT-3, το οποίο διαφημίζει ένα σημαντικά βελτιωμένο σύνολο δεδομένων και πιο σύνθετες δυνατότητες από το GPT-2 (εκ των οποίων το ChatGPT είναι εκπαιδευμένο από).

Σε αυτό το σημείο, για να προσδιορίσουν το περιεχόμενο που δημιουργείται από AI, οι συντάκτες και οι εκπαιδευτικοί θα πρέπει να συνδυάσουν τη σύνεση και λίγη ανθρώπινη διαίσθηση με έναν (ή περισσότερους) από αυτούς τους ανιχνευτές AI. Και για τους χρήστες chatbot που έχουν ή μπαίνουν στον πειρασμό να χρησιμοποιήσουν chatbots όπως το Chatsonic, το ChatGPT, το Notion ή το YouChat για να περάσουν την «εργασία» τους ως νόμιμη — μην το κάνετε. Ο επαναπροσδιορισμός του περιεχομένου που δημιουργείται από ένα bot (που προέρχεται από σταθερές πηγές στη βάση δεδομένων του) εξακολουθεί να είναι λογοκλοπή, ανεξάρτητα από το πώς το βλέπεις.

Συστάσεις των συντακτών

• Το Google Bard μπορεί τώρα να μιλήσει, αλλά μπορεί να πνίξει το ChatGPT;
• ChatGPT: τα τελευταία νέα, οι διαμάχες και οι συμβουλές που πρέπει να γνωρίζετε
• Η δυνατότητα περιήγησης Bing του ChatGPT απενεργοποιήθηκε λόγω ελαττώματος πρόσβασης στο paywall
• Το 81% πιστεύει ότι το ChatGPT αποτελεί κίνδυνο για την ασφάλεια, σύμφωνα με έρευνα
• Ο αντίπαλος ChatGPT της Apple μπορεί να γράψει αυτόματα κώδικα για εσάς

Αναβαθμίστε τον τρόπο ζωής σαςΤο Digital Trends βοηθά τους αναγνώστες να παρακολουθούν τον γρήγορο κόσμο της τεχνολογίας με όλα τα τελευταία νέα, διασκεδαστικές κριτικές προϊόντων, διορατικά editorial και μοναδικές κρυφές ματιές.