HeadlinesBriefing favicon HeadlinesBriefing.com

RAG की जटिलता क्यों अर्जित की जानी चाहिए, डिफ़ॉल्ट नहीं

Towards Data Science •
×

पुनर्प्राप्ति-ऑगमेंटेड जेनरेशन (RAG) वास्तुकला मूल पुनर्प्राप्ति-और-जेनरेट पैटर्न से काफी आगे बढ़ गई है। समकालीन प्रणालियों में घन और लेक्सिकल पुनर्प्राप्ति, क्वेरी रीराइटिंग, रैंक फ्यूजन, न्यूरल रीरैंकिंग, प्रश्न विघटन, सुधारात्मक पुनर्प्राप्ति, परावर्तन और एजेंट-आधारित ऑर्केस्ट्रेशन को बढ़ते हुए शामिल किया जा रहा है। इन तकनीकों से जटिल सूचना खोज कार्यों पर प्रदर्शन में महत्वपूर्ण सुधार हो सकता है।

हालांकि, इनका अक्सर तब परिचय दिया जाता है जब अंतर्निहित पुनर्प्राप्ति उपतंत्र का स्वतंत्र रूप से मूल्यांकन नहीं किया गया होता है। हाल के अध्ययनों से पता चलता है कि तुलनात्मक रूप से पारंपरिक पुनर्प्राप्ति विधियाँ अभी भी अत्यधिक प्रतिस्पर्धी हैं: लेक्सिकल पुनर्प्राप्ति विशेषज्ञ डोमेन में अच्छा प्रदर्शन करती है, रीरैंकिंग के साथ हाइब्रिड पुनर्प्राप्ति ठोस आधार प्रदान करती है, और incluso एजेंटिक प्रणालियाँ भी मजबूत पुनर्प्राप्ति पर बनाई जाने पर बेहतर प्रदर्शन करती हैं।

पुनर्प्राप्ति की गुणवत्ता और एजेंटिक तर्क समस्या के विभिन्न हिस्सों को संबोधित करते हैं। जब प्रमाण को एक अच्छी तरह से परिभाषित पुनर्प्राप्ति चरण के माध्यम से पुनः प्राप्त किया जा सकता है, तो मुख्य चिंता खोज की गुणवत्ता होती है। जब पुनर्प्राप्ति 반복ात्मक, बहु-हॉप होती है, या मध्यवर्ती प्रमाण पर निर्भर करती है, तो एजेंट-आधारित पुनर्प्राप्ति बहुत अधिक उपयोगी हो जाती है। वास्तुकलिक जटिलता को एक प्रदर्शित विफलता मोड के अनुरूप होना चाहिए।

जब प्रमाण एक पुनर्प्राप्ति योग्य इकाई में मौजूद होता है लेकिन संदर्भ विंडो में प्रवेश नहीं कर पाता है, तो संभावना अधिक होती है कि प्रमुख समस्या खोज और पुनर्प्राप्ति उपतंत्र में हो। सिस्टम-डिज़ाइन के दृष्टिकोण से, पुनर्प्राप्ति और जेनरेशन अवधारणात्मक रूप से अलग-अलग संचालन हैं जिनकी विफलता मोड का स्वतंत्र रूप से मूल्यांकन किया जाना चाहिए।

अक्सर पूछे जाने वाले प्रश्न: RAG की जटिलता क्यों डिफ़ॉल्ट के रूप में अपनाने के बजाय अर्जित की जानी चाहिए?

क्योंकि अतिरिक्त तर्क परतें मूल पुनर्प्राप्ति विफलता को ठीक नहीं कर सकतीं। जब संबंधित प्रमाण उम्मीदवार सेट के बाहर रैंक किया जाता है, तो कोई भी मात्रा में क्वेरी रीराइटिंग, रीरैंकिंग, या एजेंटिक ऑर्केस्ट्रेशन इसे पुनः प्राप्त नहीं कर सकेगा। जटिलता केवल तभी पेश की जानी चाहिए जब पुनर्प्राप्ति का स्वतंत्र रूप से मूल्यांकन किया गया हो और एक विशिष्ट विफलता मोड पहचाना गया हो।