False Positive Detektor AI: Mengapa Tulisan Manusia Ditandai sebagai AI

False positive detektor AI terjadi ketika sebuah alat melabeli tulisan manusia sebagai buatan AI. Ini lebih sering terjadi daripada yang dikira kebanyakan orang, karena detektor menilai seberapa mudah ditebak sebuah teks terlihat, bukan siapa yang sebenarnya menulisnya. Tulisan formal, teks pendek, dan tulisan karya non-penutur asli bahasa Inggris adalah yang paling mungkin ditandai secara keliru. Jika ini terjadi pada Anda, tetap tenang, kumpulkan draf dan riwayat versi Anda, dan minta kesempatan berdiskusi alih-alih memperdebatkan skornya.

Di bawah ini dijelaskan mengapa hal itu terjadi, siapa yang paling terdampak, dan rencana praktis tentang apa yang harus dilakukan selanjutnya.

Mengapa tulisan manusia ditandai

Detektor menjalankan teks Anda melalui model statistik dan memperkirakan seberapa mirip teks itu dengan output AI. Detektor melihat hal-hal seperti seberapa mudah setiap kata ditebak dan seberapa bervariasi struktur kalimatnya. Kami menjelaskan mekanismenya di cara kerja detektor AI.

Poin pentingnya: detektor tidak bisa melihat Anda mengetik. Ia hanya melihat kata-kata yang sudah jadi. Tulisan manusia mana pun yang kebetulan mulus, teratur, dan mudah ditebak bisa jatuh di sisi garis yang salah.

Berikut penyebab yang paling umum.

Genre yang berpola baku

Beberapa jenis tulisan memang sengaja dibuat mudah ditebak. Laporan praktikum mengikuti struktur yang tetap. Esai lima paragraf mengikuti templat. Surat lamaran kerja, abstrak, ringkasan kebijakan, dan deskripsi produk semuanya memakai ungkapan baku karena memang itulah yang diharapkan dari genrenya. Keterkejutan yang rendah adalah ciri genre itu, dan bagi detektor hal itu terbaca seperti keterkejutan rendah pada teks AI.

Menulis dalam bahasa kedua

Ini kasus yang paling banyak didokumentasikan. Pada 2023, peneliti di Stanford yang dipimpin Weixin Liang, dalam studi yang diterbitkan di jurnal Patterns, menguji beberapa detektor GPT populer pada esai yang ditulis non-penutur asli untuk ujian bahasa Inggris TOEFL. Detektor-detektor itu menandai sebagian besar esai tersebut sebagai buatan AI, sementara esai karya siswa Amerika Serikat yang penutur asli dinilai jauh lebih akurat.

Alasannya tidak misterius. Saat menulis dalam bahasa yang masih Anda pelajari, Anda cenderung memakai kata-kata umum yang Anda yakini dan pola kalimat yang Anda tahu benar. Gaya yang hati-hati dan teratur itulah yang dikaitkan detektor dengan mesin.

Teks pendek

Detektor membutuhkan cukup banyak kata untuk mengukur apa pun. Pada jawaban 150 kata, beberapa kalimat yang mudah ditebak bisa mengubah hasilnya. Banyak alat menetapkan panjang minimum, dan hasil yang mendekati batas minimum itu paling tidak andal.

Penyuntingan tata bahasa dan gaya yang berat

Pemeriksaan ejaan tidak masalah. Tetapi menerima puluhan saran penulisan ulang dari asisten menulis bisa meratakan ritme alami Anda menjadi sesuatu yang lebih mulus dan seragam. Makin banyak ungkapan Anda yang diganti oleh alat, makin kurang teks itu terlihat seperti Anda.

Teks terkenal atau yang banyak disalin

Orang-orang pernah membagikan tangkapan layar dokumen sejarah terkenal yang dinilai kemungkinan besar buatan AI oleh detektor gratis. Alasan yang paling mungkin adalah teks seperti itu begitu sering muncul di data latih sehingga model menganggapnya sangat mudah ditebak. Ini pengingat yang baik bahwa "mudah ditebak oleh model" dan "ditulis oleh model" bukanlah hal yang sama.

Seperti apa false positive itu

Berikut paragraf jenis yang ditulis siswa setiap hari, sepenuhnya dengan tangan sendiri:

Perubahan iklim merupakan salah satu tantangan paling signifikan yang dihadapi dunia saat ini. Perubahan iklim memengaruhi ekosistem, perekonomian, dan masyarakat dengan berbagai cara. Pemerintah, dunia usaha, dan individu semuanya memiliki peran dalam mengatasi permasalahan ini.

Tidak ada yang tidak jujur dari paragraf itu. Tetapi lihat apa yang dilihat detektor: tiga kalimat dengan panjang yang mirip, pembuka yang sangat umum, daftar tiga hal di dua dari tiga kalimat, dan tidak ada detail yang hanya bisa datang dari penulis ini. Setiap katanya mudah ditebak. Itulah profil output model, jadi detektor mungkin menilainya kemungkinan besar buatan AI.

Sekarang bandingkan dengan versi yang punya maksud sama tetapi lebih banyak menghadirkan penulisnya:

Musim kemarau ketika sumur kakek-nenek saya kering adalah pertama kalinya perubahan iklim terasa dekat bagi saya. Mereka sudah memakai sumur itu selama empat puluh tahun. Biaya memperbaikinya lebih mahal daripada harga mobil mereka.

Tidak ada yang akan mengira itu templat. Itu juga tulisan yang lebih baik. Tumpang tindih ini bukan kebetulan, dan inilah hal paling berguna untuk dipahami tentang false positive: kebiasaan yang memicunya sebagian besar adalah kebiasaan yang membuat tulisan terasa generik.

Jika bahasa Inggris bukan bahasa pertama Anda

Anda tidak seharusnya harus terdengar seperti penutur asli agar dipercaya. Meski begitu, beberapa hal bisa membantu. Simpan draf dan catatan Anda. Gunakan contoh dari pengalaman dan bacaan Anda sendiri, yang tidak bisa ditebak oleh model mana pun. Dan jika Anda memakai alat terjemahan atau tata bahasa, simpan salinan tulisan Anda sebelum memakainya, agar Anda bisa menunjukkan kata-kata Anda sendiri jika diminta.

Apa yang harus dilakukan jika Anda ditandai secara keliru

Jika guru, dosen, editor, atau klien memberi tahu bahwa karya Anda terdeteksi sebagai AI, berikut rencana yang lebih efektif daripada panik.

1. Tetap tenang dan tanyakan apa yang ditandai

Tanyakan alat apa yang dipakai, berapa skornya, dan bagian mana yang disorot. Anda berhak memahami kekhawatiran tersebut. Jaga nada tetap faktual. Orang yang mengangkat masalah ini mungkin juga ragu seberapa jauh alat itu bisa dipercaya.

2. Kumpulkan bukti proses Anda

Bukti terkuat adalah catatan bahwa karya itu dikerjakan dari waktu ke waktu:

• Riwayat versi. Google Docs (File, lalu Histori versi) dan Microsoft Word dengan OneDrive sama-sama menyimpan suntingan bertanda waktu. Dokumen yang tumbuh selama beberapa sesi terlihat sangat berbeda dari dokumen yang ditempel sekaligus.
• Catatan dan kerangka. Tulisan tangan atau digital, sebaiknya bertanggal.
• Draf sebelumnya. Bahkan yang masih kasar.
• Sumber. Riwayat browser, peminjaman buku perpustakaan, PDF yang Anda beri anotasi.

Jika Anda biasanya tidak menyimpan semua ini, mulailah sekarang. Tidak ada biayanya, dan ini cara paling mudah untuk melindungi diri di masa depan.

3. Tawarkan untuk membahas karya Anda

Tawarkan untuk menjelaskan argumen Anda, menguraikan bagaimana Anda menemukan sumber, atau menjawab pertanyaan tentang pilihan yang Anda buat. Orang yang menulis sebuah karya biasanya bisa membahasnya secara mendalam. Ini sering lebih meyakinkan daripada dokumen apa pun.

4. Rujuk panduan dari alat itu sendiri

Vendor detektor jelas menyatakan bahwa skor bukanlah bukti. Turnitin, misalnya, menyatakan bahwa indikator tulisan AI-nya tidak boleh dijadikan satu-satunya dasar untuk mengambil tindakan terhadap mahasiswa, dan Turnitin menyembunyikan skor rendah justru karena skor itu kurang andal. Penjelasan kami tentang Turnitin membahas apa yang sebenarnya ditampilkan laporannya. Mengutip panduan alat itu sendiri bukanlah sikap menantang. Itu hanya menempatkan skor dalam konteksnya.

5. Pahami proses formalnya

Jika diskusi tidak menyelesaikan masalah, cari kebijakan integritas akademik institusi Anda atau ketentuan sengketa dalam kontrak Anda. Kebanyakan kampus punya proses banding, dan banyak yang punya pendamping mahasiswa atau perwakilan serikat yang bisa membantu. Minta keputusan dan buktinya secara tertulis.

Cara mengurangi risiko di lain waktu

Anda tidak seharusnya mengubah cara menulis demi memuaskan sebuah alat. Tetapi beberapa kebiasaan membuat false positive lebih kecil kemungkinannya dan jauh lebih mudah ditangani:

• Menulislah di dokumen yang punya riwayat versi, bukan di editor teks biasa yang isinya Anda tempel.
• Pertahankan gaya Anda sendiri. Contoh spesifik, pendapat, dan panjang kalimat yang bervariasi membuat tulisan lebih baik sekaligus kurang "mirip AI". Panduan kami tentang mengapa tulisan terdengar seperti AI mendaftar pola-pola yang perlu diwaspadai.
• Jangan terlalu banyak menerima saran penulisan ulang dari alat tata bahasa. Perbaiki kesalahannya, pertahankan ungkapan Anda.
• Cek sebelum mengumpulkan jika taruhannya tinggi. Menjalankan draf melalui detektor, seperti Detektor AI RealWrite, akan menandai kalimat yang terbaca seperti AI dan menjelaskan alasannya. Anggap hasilnya sebagai petunjuk tentang bagian yang perlu direvisi, bukan vonis.

Catatan untuk guru, dosen, dan editor

Jika Anda berada di sisi sebaliknya, skor yang tinggi adalah alasan untuk berdiskusi, bukan untuk menarik kesimpulan. Minta untuk melihat draf. Minta penulisnya menjelaskan karyanya. Bandingkan dengan karya mereka sebelumnya. Berhati-hatilah terutama pada penulis non-penutur asli dan pada jenis tugas yang formal, tempat false positive paling mungkin terjadi.

Beberapa universitas memilih menonaktifkan fitur deteksi AI sepenuhnya karena alasan-alasan ini. Vanderbilt University termasuk yang pertama menyatakannya secara terbuka, pada 2023. Universitas lain tetap memakai alatnya tetapi melatih staf untuk memperlakukannya sebagai salah satu masukan di antara banyak masukan lain.

Kesimpulannya

False positive adalah keterbatasan yang sudah diketahui dari cara kerja detektor AI, bukan tanda bahwa Anda melakukan kesalahan. Simpan bukti proses Anda, tetap faktual, dan minta agar keputusan tidak hanya bergantung pada satu angka.

Jika Anda ingin melihat skor tulisan Anda sendiri sebelum orang lain mengeceknya, Anda bisa cek gratis di RealWrite. Rincian paket ada di halaman harga.