ChatGPT intihali nasıl tespit edilir ve bunun neden bu kadar zor olduğu

Chatbot'lar şu anda popüler şeyler ve ChatGPT bunların başında gelmektedir. Ancak yanıtlarının ne kadar güçlü ve insani olduğu sayesinde akademisyenler, eğitimciler ve editörlerin tümü, yapay zeka kaynaklı intihal ve kopya çekmenin yükselen dalgasıyla uğraşıyor. Eski intihal tespit araçlarınız, gerçeği sahteden ayırt etmek için yeterli olmayabilir.

Bu makalede, AI sohbet robotlarının bu kabus gibi yönünden biraz bahsedeceğim, birkaç çevrimiçi intihal tespit aracına göz atacağım ve durumun ne kadar vahim hale geldiğini keşfedeceğim.

Çok sayıda algılama seçeneği

Startup'ın en son Kasım 2022 sürümü OpenAI'nin ChatGPT'si temel olarak chatbot hünerini ilgi odağına itti. Herhangi bir normal Joe'nun (veya herhangi bir profesyonelin) akıllı, anlaşılır denemeler veya makaleler oluşturmasına ve metin tabanlı matematik problemlerini çözmesine izin verdi. Farkında olmayan veya deneyimsiz okuyucuya, AI tarafından oluşturulan içerik oldukça kolay bir şekilde yasal bir yazı olarak geçebilir, bu yüzden öğrenciler onu sever ve öğretmenler bundan nefret eder.

Yapay zeka yazma araçlarıyla ilgili büyük bir zorluk, doğal dili kullanma konusundaki iki ucu keskin kılıç yeteneğidir ve İçeriğin kendisi bir kaynaktan alınmış olsa bile benzersiz ve neredeyse kişiselleştirilmiş içerik oluşturmak için dilbilgisi veri tabanı. Bu, AI tabanlı hileyi yenme yarışının başladığı anlamına gelir. İşte şu anda ücretsiz olarak sunulan bulduğum bazı seçenekler.

GPT-2 Çıkış Dedektörü Chatbot metnini tespit edebilen bir bota sahip olduğunu göstermek için doğrudan ChatGPT geliştiricisi OpenAI'den gelir. Çıktı Dedektörünün kullanımı kolaydır — kullanıcıların bir metin alanına metin girmesi yeterlidir ve araç, metnin bir insandan gelip gelmeme olasılığının ne kadar yüksek olduğuna ilişkin değerlendirmesini hemen sağlar.

Temiz kullanıcı arayüzlerine sahip iki araç daha Yazar AI İçerik Dedektörü Ve Geniş Ölçekte İçerik. İçeriği taramak için bir URL ekleyebilir (yalnızca yazar) veya metni manuel olarak ekleyebilirsiniz. Sonuçlara, içeriğin insanlar tarafından üretilmiş olma olasılığının yüzdelik bir puanı verilir.

GPTZero Streamlit'te barındırılan ve Princeton Üniversitesi öğrencisi Edward Zen tarafından oluşturulan, ev yapımı bir beta aracıdır. "Algiarism" (AI destekli intihal) modelinin sonuçlarını sunma şekli diğerlerinden farklıdır. GPTZero, metrikleri şaşkınlık ve patlama olarak ayırır. Patlama, bir metindeki tüm cümleler için genel rastgeleliği ölçerken, şaşkınlık bir cümledeki rastgeleliği ölçer. Araç, her iki metriğe de bir sayı atar; sayı ne kadar düşükse, metnin bir bot tarafından oluşturulmuş olma olasılığı o kadar artar.

Sadece eğlence için dahil ettim Dev Dil Modeli Test Odası (GLTR), MIT-IBM Watson AI Lab ve Harvard Natural Language Processing Group'tan araştırmacılar tarafından geliştirilmiştir. GPTZero gibi, nihai sonuçlarını net bir "insan" veya "bot" ayrımı olarak sunmaz. GLTR temelde botlar tarafından yazılan metni tanımlamak için botları kullanır, çünkü botların tahmin edilemeyen kelimeleri seçme olasılığı daha düşüktür. Bu nedenle sonuçlar, yapay zeka tarafından oluşturulan metni insan tarafından oluşturulan metne karşı sıralayan renk kodlu bir histogram olarak sunulur. Öngörülemeyen metin miktarı ne kadar fazlaysa, metnin bir insandan gelme olasılığı o kadar yüksektir.

Onları teste tabi tutmak

Tüm bu seçenekler, AI tespiti konusunda iyi bir noktada olduğumuzu düşünmenize neden olabilir. Ancak bu araçların her birinin gerçek etkinliğini test etmek için kendim denemek istedim. Bu yüzden, bu durumda ChatGPT'ye de yönelttiğim sorulara yanıt olarak yazdığım birkaç örnek paragraf çalıştırdım.

İlk sorum basitti: Önceden oluşturulmuş bir bilgisayar satın almak neden hoş karşılanmıyor? İşte kendi yanıtlarımın ChatGPT'den gelen yanıtla karşılaştırması.

Gördüğünüz gibi, bu uygulamaların çoğu sözlerimin gerçek olduğunu söyleyebilir, ilk üçü en doğru olanıdır. Ancak ChatGPT, bu dedektör uygulamalarının çoğunu yanıtıyla da kandırdı. Yeni başlayanlar için Writer AI Content Detector uygulamasında %99 insan puanı aldı ve GPT tabanlı dedektör tarafından yalnızca %36 sahte olarak işaretlendi. GLTR, kendi sözlerimin bir insan tarafından ChatGPT'nin sözleriyle eşit derecede yazılacağını iddia ederek en büyük suçluydu.

Yine de bir şans daha vermeye karar verdim ve bu sefer tepkiler önemli ölçüde iyileşti. ChatGPT'den İsviçre Federal Teknoloji Enstitüsü'nün altın parçacıkları kullanarak buğulanmayı önleme araştırmasının bir özetini vermesini istedim. Bu örnekte, dedektör uygulamaları kendi yanıtımı onaylama ve ChatGPT'yi algılama konusunda çok daha iyi bir iş çıkardı.

İlk üç test, bu yanıtta gerçekten güçlerini gösterdi. Ve GLTR, kendi yazımı insan olarak görmekte hâlâ zorlanırken, en azından bu sefer ChatGPT'yi yakalamakta iyi oldu.

Kapanış

Çevrimiçi intihal dedektörlerinin mükemmel olmadığı her sorgunun sonuçlarından açıkça görülüyor. Daha karmaşık cevaplar veya yazı parçaları için (ikinci istemimdeki gibi), biraz daha kolay Bu uygulamaların AI tabanlı yazıyı algılaması için, daha basit yanıtların alınması çok daha zordur. sonuç çıkarmak. Ama açıkçası, güvenilir dediğim şey bu değil. Nadiren, bu algılama araçları, makaleleri veya denemeleri ChatGPT tarafından oluşturulmuş olarak yanlış sınıflandırır; bu, hilecileri yakalamak için bunlara güvenmek isteyen öğretmenler veya editörler için bir sorundur.

Geliştiriciler sürekli olarak doğrulukta ve yanlış pozitif oranlarda ince ayar yapıyor, ancak aynı zamanda Önemli ölçüde geliştirilmiş bir veri kümesi ve GPT-2'den daha karmaşık yetenekler sunan GPT-3 (ChatGPT'nin eğitildiği) itibaren).

Bu noktada, yapay zekalar tarafından üretilen içeriği belirlemek için editörlerin ve eğitimcilerin sağduyu ve biraz da insan sezgisini bu yapay zeka dedektörlerinden biriyle (veya daha fazlasıyla) birleştirmeleri gerekecek. Ve Chatsonic, ChatGPT, Notion veya YouChat gibi sohbet robotlarına sahip olan veya "çalışmalarını" yasal olarak aktarmak için kullanmaya meyilli olan sohbet robotu kullanıcıları için - lütfen yapmayın. Bir bot (veritabanındaki sabit kaynaklardan gelen kaynaklar) tarafından oluşturulan içeriği başka bir amaca uygun hale getirmek, ona nasıl bakarsanız bakın yine de intihaldir.

Editörlerin Önerileri

• Google Bard artık konuşabiliyor, ancak ChatGPT'yi bastırabilir mi?
• ChatGPT: bilmeniz gereken en son haberler, tartışmalar ve ipuçları
• ChatGPT'nin Bing tarama özelliği, ödeme duvarı erişim kusuru nedeniyle devre dışı bırakıldı
• Ankete göre %81'i ChatGPT'nin bir güvenlik riski olduğunu düşünüyor
• Apple'ın ChatGPT rakibi sizin için otomatik olarak kod yazabilir

Yaşam tarzınızı yükseltinDijital Eğilimler, en son haberler, eğlenceli ürün incelemeleri, anlayışlı başyazılar ve türünün tek örneği ön incelemelerle okuyucuların hızlı tempolu teknoloji dünyasını takip etmelerine yardımcı olur.