ओपन सोर्स 🇷🇺 13.08.2026 16:02

पूरी किताब का अनुवाद: मैंने LLM-संचालित पाइपलाइन कैसे बनाई

AnthropicAnthropic OpenAIOpenAI Google/DeepMindGoogle/DeepMind
एक डेवलपर ने BookTrans बनाया, जो एक ओपन-सोर्स पाइपलाइन है जो पूरी किताबों का अनुवाद करने के लिए भुगतान वाली LLM सदस्यताओं का उपयोग करती है, और यह Claude Code, Antigravity CLI, और Codex का समर्थन करती है। पाइपलाइन बहु-चरणीय प्रक्रिया के माध्यम से अनुवाद की गुणवत्ता सुनिश्चित करती है: टोह लेना, अनुक्रमिक अनुवाद, और ब्लाइंड संपादन, साथ ही स्वचालित अखंडता जाँच और प्रॉम्प्ट इंजेक्शन के खिलाफ सुरक्षा उपाय।
लेखक को दो विज्ञान कथा पुस्तकों, सू बर्क की 'यूज़रपेशन' और पॉल मेल्को की 'सिंगुलैरिटीज़ रिंग' के लिए रूसी अनुवादों की कमी ने प्रेरित किया। दूसरों की मदद करने के विचार पर आगे बढ़ते हुए, उन्होंने कुछ हफ्ते बुकट्रांस विकसित करने में बिताए, जो एक ओपन-सोर्स पाइपलाइन है जो भुगतान किए गए एलएलएम सब्सक्रिप्शन का उपयोग करके पुस्तकों का अनुवाद करती है। यह पाइपलाइन क्लाउड कोड, एंटीग्रैविटी क्ली और कोडेक्स का समर्थन करती है, और प्रति एजेंट दो मॉडल का उपयोग करती है: बौद्धिक कार्य के लिए सबसे मजबूत और तकनीकी कार्यों के लिए अगला सबसे मजबूत। अनुवाद से पहले, यह भाषा पहचान और एन्कोडिंग जैसे सस्ते जांच करता है, और टैग और शैलियों को सामग्री प्रकारों से मैप करने के लिए एक सस्ता मॉडल का उपयोग करता है। अनुवाद प्रक्रिया के तीन मुख्य चरण हैं: टोही (मॉडल पुस्तक को स्कैन करके एक शब्दावली और विश्व संदर्भ बनाता है), अनुक्रमिक अनुवाद (अध्यायों का पिछले अध्यायों के संदर्भ के साथ क्रम में अनुवाद किया जाता है), और ब्लाइंड एडिटिंग (एक संपादक मॉडल मूल को देखे बिना अनुवाद की समीक्षा करता है, प्राकृतिक रूसी पर ध्यान केंद्रित करता है)। पाइपलाइन कविताओं को भी संभालती है, उद्धरणों को पहचानती है, और त्रुटियों और अस्पष्ट शब्दों के लिए फुटनोट का उपयोग करती है। यह अध्यायों को 2000-3000 शब्दों के टुकड़ों में विभाजित करती है, और प्रत्येक पैराग्राफ को लापता या मनगढ़ंत पैराग्राफ की जांच के लिए एक स्थिर संख्या मिलती है। स्वचालित जांच पैराग्राफ अखंडता, शब्दावली शर्तों, संख्याओं और संरचना को सत्यापित करती हैं। सुरक्षा एक प्राथमिकता है: पुस्तक पाठ को अविश्वसनीय डेटा के रूप में माना जाता है, और पाइपलाइन प्रॉम्प्ट इंजेक्शन प्रयास पाए जाने पर रुक जाती है। एजेंटों को अक्षम उपकरण, सैंडबॉक्स और सीमित फाइल सिस्टम एक्सेस के साथ चलाया जाता है। डेटा लीक को रोकने के लिए वेब खोज अक्षम है। लेखक ने रूसी और अंग्रेजी प्रॉम्प्ट की भी तुलना की और गुणवत्ता में कोई महत्वपूर्ण अंतर नहीं पाया, इसलिए उन्होंने प्रॉम्प्ट रूसी में लिखे।
स्रोत: Habr — хаб ИИ — मूल
इस विषय पर हमारी पिछली पोस्ट ↓
ताज़ा समाचार