Apa itu pengesan teks AI dan sejauh mana ia tepat
Sejak chatbot AI popular, banyak sekolah, universiti dan majikan mula menggunakan alat pengesan teks AI. Alat ini mendakwa boleh meneka sama ada sesuatu tulisan dihasilkan oleh manusia atau mesin.
Isunya penting kepada pelajar dan pekerja di Malaysia. Jika alat itu tersilap, tulisan asli anda boleh dituduh sebagai hasil AI.
Jadi, mari kita fahami cara ia berfungsi dan hadnya.
Apa itu pengesan teks AI?
Pengesan teks AI ialah perisian yang menganalisis gaya sesuatu tulisan. Ia kemudian memberi skor atau label seperti "mungkin ditulis AI" atau "mungkin ditulis manusia".
Ia tidak membaca fikiran penulis. Ia hanya membuat anggaran berdasarkan corak bahasa dalam teks.
Bagaimana ia berfungsi?
Banyak pengesan bergantung pada ukuran yang dipanggil "perplexity". Secara mudah, ia mengukur sejauh mana perkataan dalam ayat itu mudah dijangka.
Model bahasa AI cenderung memilih perkataan yang paling biasa dan dijangka. Oleh itu, tulisan yang ringkas, teratur dan menggunakan perkataan lazim lebih mudah dianggap sebagai hasil AI.
Bukti bahawa ia tidak selalu tepat
Pada Januari 2023, OpenAI sendiri melancarkan alat pengesan yang dipanggil AI Classifier. Dalam ujian syarikat itu, alat tersebut hanya mengenal pasti 26 peratus teks AI dengan betul.
Ia juga tersilap melabel 9 peratus teks tulisan manusia sebagai hasil AI. Pada Julai 2023, OpenAI menutup alat itu dengan alasan kadar ketepatannya rendah.
Kajian penyelidik Universiti Stanford yang diterbitkan pada 2023 pula menguji tujuh pengesan AI. Mereka menggunakan 91 esei ujian TOEFL yang ditulis oleh pelajar bukan penutur asli bahasa Inggeris.
Hasilnya, lebih 61 peratus esei itu dilabel sebagai hasil AI walaupun semuanya ditulis manusia. Sebanyak 89 daripada 91 esei ditanda oleh sekurang-kurangnya satu pengesan.
Sebaliknya, esei pelajar gred lapan kelahiran Amerika Syarikat dinilai hampir sempurna oleh alat yang sama.
Kenapa ini penting kepada rakyat Malaysia?
Ramai rakyat Malaysia menulis dalam bahasa Inggeris sebagai bahasa kedua. Kita mungkin menggunakan perbendaharaan kata yang lebih ringkas dan struktur ayat yang biasa.
Menurut kajian Stanford tadi, gaya seperti ini mempunyai skor "perplexity" yang lebih rendah. Akibatnya, tulisan asli lebih berisiko ditanda sebagai hasil AI.
Penyelidik yang sama juga mendapati pengesan mudah diperdaya. Teks AI yang ditulis semula dengan bahasa yang lebih berbunga boleh terlepas daripada pengesanan.
Ini bermakna alat itu boleh menuduh orang yang jujur dan pada masa yang sama terlepas pandang teks AI sebenar.
Apa yang boleh anda lakukan?
- Simpan bukti proses menulis. Draf awal, nota dan sejarah versi dalam Google Docs atau Microsoft Word boleh menunjukkan cara anda membina tulisan.
- Fahami polisi institusi. Tanya pensyarah atau majikan sama ada penggunaan AI dibenarkan, dan sejauh mana.
- Nyatakan jika anda guna AI. Jika AI membantu menyemak tatabahasa atau mencari idea, berterus terang lebih selamat.
- Bagi pendidik dan majikan: jangan jadikan skor pengesan sebagai satu-satunya bukti. Gunakannya sebagai petunjuk awal, kemudian berbincang dengan penulis.
Rumusan
Pengesan teks AI hanya memberi anggaran, bukan kepastian. Bukti daripada OpenAI dan Universiti Stanford menunjukkan alat ini boleh tersilap, terutamanya terhadap penulis bukan penutur asli bahasa Inggeris.
Gunakan keputusan pengesan dengan berhati-hati dan sentiasa sertakan penilaian manusia.
Sumber: