एआई पायनियर की दीपसेक अनावरण: सच्ची विकास लागतों का अनावरण

दीपसेक की आश्चर्यजनक रूप से सस्ती एआई मॉडल चुनौतियां उद्योग मानदंडों को चुनौती देती हैं। कंपनी का दावा है कि केवल 2048 GPU का उपयोग करते हुए, अपने शक्तिशाली डीपसेक वी 3 न्यूरल नेटवर्क को केवल $ 6 मिलियन के लिए प्रशिक्षित किया गया है, जो प्रतियोगियों को काफी कम कर रहा है। हालांकि, यह आंकड़ा भ्रामक है।

छवि: ensigame.com

दीपसेक वी 3 अभिनव प्रौद्योगिकियों का लाभ उठाता है: मल्टी-टोकन भविष्यवाणी (एमटीपी) बढ़ी हुई सटीकता और दक्षता के लिए; विशेषज्ञों (एमओई) का मिश्रण , प्रशिक्षण में तेजी लाने और प्रदर्शन में सुधार करने के लिए 256 तंत्रिका नेटवर्क का उपयोग करना; और मल्टी-हेड लेटेंट ध्यान (एमएलए) महत्वपूर्ण वाक्य तत्वों पर ध्यान केंद्रित करने के लिए, सूचना हानि को कम करना।

छवि: ensigame.com

उनके शुरुआती दावे के विपरीत, सेमियालिसिस से पता चला कि डीपसेक के वास्तविक बुनियादी ढांचे में लगभग 50,000 एनवीडिया हॉपर जीपीयू शामिल हैं, जो लगभग 1.6 बिलियन डॉलर के कुल निवेश और $ 944 मिलियन की परिचालन लागत का प्रतिनिधित्व करता है। यह बड़े पैमाने पर निवेश, अपने शोधकर्ताओं के लिए उच्च वेतन के साथ मिलकर (सालाना $ 1.3 मिलियन से अधिक), कम प्रशिक्षण लागत कथा के विपरीत है।

छवि: ensigame.com

डीपसेक की अनूठी संरचना, उच्च-फ्लाइर हेज फंड की सहायक कंपनी के रूप में, डेटा केंद्रों और स्व-वित्त पोषण, चपलता और तेजी से नवाचार को बढ़ावा देने के लिए अनुमति देता है। यह प्रतियोगियों के साथ क्लाउड कंप्यूटिंग पर निर्भर है। $ 6 मिलियन का आंकड़ा केवल पूर्व-प्रशिक्षण GPU लागतों को दर्शाता है, अनुसंधान, शोधन, डेटा प्रसंस्करण और बुनियादी ढांचे को छोड़कर। एआई विकास में दीपसेक का कुल निवेश $ 500 मिलियन से अधिक है।

छवि: ensigame.com

जबकि दीपसेक की सफलता एक अच्छी तरह से वित्त पोषित स्वतंत्र एआई कंपनी की क्षमता को प्रदर्शित करती है, "क्रांतिकारी बजट" का दावा एक ओवरसिम्पलीफिकेशन है। उनकी प्रतिस्पर्धी बढ़त पर्याप्त निवेश, तकनीकी सफलताओं और एक उच्च कुशल टीम से उपजी है। हालांकि, इन महत्वपूर्ण खर्चों के साथ, दीपसेक की लागत अभी भी इसके प्रतिद्वंद्वियों की तुलना में काफी कम है, पिछले मॉडल प्रशिक्षण लागत के साथ $ 5 मिलियन (R1) की तुलना में $ 100 मिलियन (CHATGPT4O) की तुलना में $ 5 मिलियन (R1)।