अनुकूली समांतर तर्क: कुशल एआई अनुमान स्केलिंग के लिए एक नया प्रतिमान
Berkeley Artificial Intelligence Research
अनुकूली समांतर तर्क (APR) एक प्रतिमान है जिसमें एलएलएम गतिशील रूप से यह तय करना सीखते हैं कि तर्क उप-कार्यों को कब और कैसे समांतर किया जाए, जिससे अनावश्यक गणना से बचा जा सके और दक्षता में सुधार हो। निश्चित समांतरता विधियों के विपरीत, एपीआर मॉडलों को प्रति समस्या विघटन रणनीतियाँ, थ्रेड गणना और समन्वय चुनने की अनुमति देता है, जो सुदृढीकरण सीखने और विशेष नियंत्रण टोकन का लाभ उठाता है।
BAIR ब्लॉग पोस्ट में एडेप्टिव पैरेलल रीज़निंग (APR) को एलएलएम इन्फेरेंस को कुशलतापूर्वक स्केल करने के लिए एक प्रतिमान के रूप में प्रस्तुत किया गया है। पारंपरिक अनुक्रमिक तर्क अन्वेषण के साथ रैखिक रूप से स्केल होता है, जिससे विलंबता और कॉन्टेक्स्ट-रोट जैसी समस्याएं उत्पन्न होती हैं। सेल्फ-कंसिस्टेंसी, ट्री-ऑफ-थॉट्स या मोंटे कार्लो ट्री सर्च (MCTS, संक्षिप्त नाम का विस्तार करें: मोंटे कार्लो ट्री सर्च) जैसी मौजूदा समानांतर विधियां निश्चित समानांतर संरचनाएं लागू करती हैं, जो सरल समस्याओं पर कम्प्यूटेशन बर्बाद करती हैं। एपीआर, जिसे पैन एट अल. (2025) द्वारा अग्रणी रूप से प्रस्तुत किया गया है, रीइन्फोर्समेंट लर्निंग (RL, संक्षिप्त नाम का विस्तार करें: रीइन्फोर्समेंट लर्निंग) के माध्यम से मॉडलों को विशेष टोकन उत्पन्न करने के लिए प्रशिक्षित करता है जो यह नियंत्रित करते हैं कि कब समानांतर या अनुक्रमिक रूप से तर्क किया जाए। थ्रेडवीवर (लियान एट अल., 2025) एक एपीआर विधि है। इन्फेरेंस निष्पादन फोर्क-जॉइन डिज़ाइन का उपयोग करता है, जिसमें मल्टीवर्स जैसे दृष्टिकोण संश्लेषण के दौरान केवी कैश का पुन: उपयोग करने के लिए इन्फेरेंस इंजन को संशोधित करते हैं, जबकि ब्रांच-डिकोडिंग-आधारित विधियों जैसे अन्य इंजन संशोधनों से बचते हैं। प्रमुख लाभ: डोमेन-विशिष्ट अनुमानों की आवश्यकता नहीं, कम अतिरेकता, और कार्य जटिलता के अनुसार अनुकूली समानांतरता।
स्रोत: BAIR (Berkeley AI) —
मूल
