टेक्स्ट एआई वॉटरमार्क कैसे काम करते हैं और उन्हें कैसे बायपास करें
Anthropic
Google/DeepMind
DeepSeek
यह लेख एलएलएम आउटपुट में टेक्स्ट वॉटरमार्क के पीछे की तंत्र को समझाता है, जो हाल के यूरोपीय संघ एआई नियमों द्वारा अनिवार्य है, और उन्हें हटाने के व्यावहारिक तरीके प्रदान करता है। लेखक वॉटरमार्किंग में उपयोग किए जाने वाले प्रोबेबिलिस्टिक टोकन वितरण शिफ्ट का विवरण देता है और खुले-वजन वाले मॉडलों के साथ अनुवाद और पुनर्लेखन शामिल एक बहु-चरण बायपास दृष्टिकोण सुझाता है। वे इस प्रक्रिया को स्वचालित करने के लिए स्ट्रीमलिट और लैंगचेन के साथ निर्मित एक कस्टम टूल भी पेश करते हैं।
लेख की शुरुआत इस बात से होती है कि EU के नियम अब LLM प्रदाताओं को AI-जनित टेक्स्ट पर वॉटरमार्क लगाने के लिए बाध्य करते हैं, जिसमें Anthropic के Claude का उदाहरण दिया गया है। लेखक बताते हैं कि वॉटरमार्किंग जनरेशन के दौरान टोकन की प्रोबेबिलिटी डिस्ट्रीब्यूशन को बदलकर काम करती है, जिससे कुछ दुर्लभ टोकन अधिक बार दिखाई देते हैं। यह मनुष्यों के लिए अदृश्य होता है, लेकिन मशीनें जो वास्तविक डिस्ट्रीब्यूशन जानती हैं, वे इसे पहचान सकती हैं। वॉटरमार्क को बायपास करने के लिए, लेखक टेक्स्ट को प्री-प्रोसेस करके एम डैश और जीरो-विड्थ स्पेस जैसे स्पष्ट आर्टिफैक्ट्स को हटाने, फिर टेक्स्ट को एक इंटरमीडिएट भाषा में अनुवाद करके वापस लाने, और अंत में DeepSeek-v4 जैसे ओपन-वेट LLM के साथ फिर से लिखने का सुझाव देते हैं जो वॉटरमार्क नहीं जोड़ता है। लेखक ने Streamlit और LangChain पर आधारित एक टूल बनाया है जो इन चरणों को स्वचालित करता है, जिससे उपयोगकर्ता प्रत्येक चरण को चुन और कॉन्फ़िगर कर सकते हैं, और यह GitHub पर उपलब्ध है।
स्रोत: Habr — хаб ИИ —
मूल
