Alibaba ने Qwen3.8-Flash-Next जारी किया है, जो Qwen4 आर्किटेक्चर पर निर्मित एक ओपन-वेट मल्टीमॉडल मिक्स्चर-ऑफ-एक्सपर्ट्स मॉडल है, इससे पहले कि कोई Qwen4 मॉडल मौजूद हो। आधिकारिक Hugging Face रिपॉजिटरी 24 अगस्त को लाइव हुई, जो 26 अगस्त को निर्धारित Model Scope रिलीज़ से दो दिन पहले है। मॉडल कार्ड इसे "Qwen4 की नींव रखने वाले आर्किटेक्चर का एक प्रायोगिक पूर्वावलोकन" के रूप में पुष्टि करता है।

मुख्य आर्किटेक्चरल परिवर्तनों में गेटेड डेल्टा नेटवर्क (GDN) और Qwen स्पार्स अटेंशन (QSA) शामिल हैं, जो 48-परत हाइब्रिड में 36 लीनियर-अटेंशन और 12 फुल-अटेंशन परतों के साथ है। मॉडल में 125B कुल पैरामीटर हैं, प्रति टोकन 6B सक्रिय, 512 विशेषज्ञ, एक अलग 51B n-ग्राम एम्बेडिंग तालिका, और 262,144-टोकन मूल संदर्भ, जो 1,000,000 तक विस्तार योग्य है। वेट गैर-गेटेड और पूरी तरह से स्पेक्ड हैं।

Alibaba इसे एक तकनीकी प्रतिबद्धता के रूप में प्रस्तुत करता है: पहले कठिन हिस्से का पूर्वावलोकन करें, ताकि रनटाइम और एप्लिकेशन Qwen4 परिवार के लिए तैयार हों। हालांकि, बेंचमार्क स्कोर अभी भी अपुष्ट हैं और स्वतंत्र रूप से अप्राप्य हैं। औपचारिक Model Scope रिलीज़ अभी भी 2026-08-26 23:00 (UTC+08:00) के लिए निर्धारित है, लेकिन वेट पहले ही टाइमर को हरा चुके हैं।

मुख्य संस्थाएँ: कंपनियाँ: Alibaba | लोग: @kimmonismus | स्थान: Hugging Face, Model Scope