डिटेक्टर यह नहीं जान सकता कि टाइप करते समय कौन-सा सॉफ़्टवेयर खुला था। वह तैयार टेक्स्ट पढ़ता है और अनुमान लगाता है कि शब्दों का चुनाव कितना अनुमानित है। ऑटोकम्प्लीट का इस्तेमाल टेक्स्ट को मशीन द्वारा तैयार किया हुआ साबित नहीं करता, लेकिन डिटेक्टर फिर भी मानवीय लेखन को गलत वर्गीकृत कर सकते हैं।
डिटेक्टर वास्तव में क्या मापता है
ये टूल टेक्स्ट के सांख्यिकीय गुण देखते हैं: पहले के शब्दों को देखते हुए हर शब्द कितना अनुमानित है, वाक्यों की लंबाई में कितना बदलाव है, और शब्दावली कितनी व्यापक है। भाषा मॉडल द्वारा जनरेट किया गया टेक्स्ट इन वितरणों के उच्च-प्रायिकता वाले मध्य भाग में रहने की प्रवृत्ति रखता है, क्योंकि मॉडल को इसी तरह का टेक्स्ट बनाने के लिए बनाया गया है। मानवीय लेखन में अधिक उतार-चढ़ाव होता है।
यह टेक्स्ट के बारे में एक निर्णय है, इसे कैसे बनाया गया था इसका रिकॉर्ड नहीं। दस्तावेज़ में ऐसा कुछ नहीं होता जिससे पता चले कि कौन-सी कुंजियाँ सुझाव से आई थीं—और इसी तरह, ऐसा कुछ भी नहीं जो संयोग से सादे और नियमित लेखन को सुरक्षित रखे।
डिटेक्टरों के लिए शोध के नतीजे अच्छे नहीं हैं
Stanford में Liang, Yuksekgonul, Mao, Wu और Zou द्वारा किया गया एक स्वतंत्र मूल्यांकन 2023 में Patterns में प्रकाशित हुआ। उन्होंने व्यापक रूप से इस्तेमाल किए जाने वाले सात डिटेक्टरों को लोगों द्वारा लिखे गए 91 TOEFL निबंधों और US के आठवीं कक्षा के विद्यार्थियों द्वारा लिखे गए 88 निबंधों पर चलाया।
- आठवीं कक्षा के निबंधों का सही वर्गीकरण किया गया—लगभग 5.1% को गलत ढंग से चिह्नित किया गया।
- TOEFL निबंधों के साथ ऐसा नहीं हुआ: गलत सकारात्मक नतीजों की औसत दर 61.3% थी।
- सातों डिटेक्टरों ने मिलकर TOEFL निबंधों में से 19.8% को गलत ढंग से चिह्नित किया।
- कम-से-कम एक डिटेक्टर ने उनमें से 97.8% को चिह्नित किया।
लेखक इस नतीजे का कारण डिटेक्टरों द्वारा इस्तेमाल की जाने वाली विशेषताओं को मानते हैं। सीमित शब्दावली और अनुमानित वाक्य संरचना डिटेक्टर को मशीन-जैसी लग सकती हैं, लेकिन दूसरी भाषा में लिखे गए लेखन में भी ये आम हैं। इसलिए ये टूल मानवीय लेखन को उसकी सांख्यिकीय सादगी के लिए दंडित करने का जोखिम पैदा करते हैं।
यह अध्ययन 2023 का है और तब से डिटेक्टर बदल गए हैं। लेकिन समस्या का स्वरूप नहीं बदला: ये प्रायिकता-आधारित वर्गीकारक हैं, और इनमें से कोई भी प्रति-दस्तावेज़ त्रुटि दर प्रकाशित नहीं करता जिस पर किसी पर आरोप लगाने के लिए भरोसा किया जा सके।
तो ऑटोकम्प्लीट इसमें कहाँ आता है
यह पूरी तरह इस बात पर निर्भर करता है कि टेक्स्ट का कितना हिस्सा आपका अपना है।
| आपने क्या किया | डिटेक्टर को क्या दिखाई देता है |
|---|---|
| अपने बनाए वाक्यों में शब्दों के कुछ सुझाव स्वीकार किए | आपका लेखन, आपकी संरचना और शब्दावली के साथ |
| कभी-कभार किसी सामान्य वाक्य को पूरा करने के लिए कोई वाक्यांश स्वीकार किया | अधिकतर आपका अपना लेखन; सामान्य वाक्य किसी भी स्थिति में सामान्य ही होते हैं |
| चैटबॉट से पैराग्राफ लिखवाकर उसे कॉपी-पेस्ट किया | जनरेट किया गया टेक्स्ट, क्योंकि वह जनरेट किया गया टेक्स्ट है |
| दूसरी भाषा में सादे ढंग से खुद लिखा | फिर भी चिह्नित किया जा सकता है—ऊपर देखें |
प्रासंगिक अंतर यह है कि टेक्स्ट आपने खुद बनाया है या नहीं। अपने ही वाक्य को सुझाव से पूरा करने पर रचना आपकी ही रहती है, जबकि जनरेट किए गए पैराग्राफ को माँगकर स्वीकार करने पर ऐसा नहीं होता।
अगर आपके मौलिकता का मूल्यांकन हो रहा है
- वास्तविक नियम पता करें। कई संस्थान वर्तनी, व्याकरण और प्रेडिक्टिव-टेक्स्ट सहायता की अनुमति देते हैं और जनरेट किए गए कंटेंट पर रोक लगाते हैं। कुछ संस्थान हर तरह की मदद पर रोक लगाते हैं। किसी भी दिशा में अनुमान लगाने से बेहतर है कि लिखित नियम देखें।
- अपने दस्तावेज़ का वर्शन इतिहास सुरक्षित रखें। Google Docs और Word, दोनों ऐसा करते हैं। घंटों में बना दस्तावेज़, जिसमें जोड़, हटाव और दोबारा लिखे गए वाक्य हों, इस बात का रिकॉर्ड है कि लेखन हो रहा था—यह स्कोर से अलग तरह का सबूत है, जिसका जवाब कोई स्कोर नहीं दे सकता।
- डिटेक्टर को मात देने के लिए दोबारा न लिखें। स्कोर कम करने के लिए वाक्यों में असामान्य शब्द भरने से आपका लेखन खराब होता है और यह “ह्यूमनाइज़र” टूल के काम से अलग नहीं पहचाना जा सकता। अगर आप पर आरोप लगाया जाए, तो वर्शन इतिहास ही जवाब है।
- स्कोर को बातचीत की शुरुआत मानें, फैसला नहीं। ऊपर बताई गई गलत सकारात्मक नतीजों की दरों को देखते हुए, ईमानदारी से कहें तो यह केवल इतना ही हो सकता है।
स्थानीय ऑटोकम्प्लीट किस तरह अलग है
एक व्यावहारिक अंतर का डिटेक्शन से कोई लेना-देना नहीं। क्लाउड लेखन सहायक आपके टाइप किए हुए शब्दों को सुझाव जनरेट करने के लिए सर्वर पर भेजते हैं। Typeahead यह llama.cpp के ज़रिए आपके अपने PC पर एक कॉम्पैक्ट मॉडल चलाता है, इसलिए मॉडल डाउनलोड हो जाने के बाद आप जो भी लिखते हैं, वह कहीं भी प्रसारित नहीं होता और यह बिना किसी कनेक्शन के भी काम करता है।
यह आपके लिखे जा रहे वाक्य के अगले कुछ शब्द कर्सर के पास सुझाता है और जब तक आप Tab नहीं दबाते, कुछ भी नहीं जोड़ता। यह पैराग्राफ जनरेट नहीं करता और इसमें “मेरे लिए यह लिखो” फ़ंक्शन नहीं है—यही वह सुविधा है जो वास्तव में जनरेट किया गया टेक्स्ट आपके दस्तावेज़ में डालती।
इनमें से कोई भी बात किसी खास डिटेक्टर के नतीजे की गारंटी नहीं देती। आपके वाक्य आपकी मशीन पर ही रहते हैं, और इस टूल में आपके लिए पैराग्राफ जनरेट करने वाला कोई फ़ंक्शन शामिल नहीं है।