असंरचित डेटा प्रबंधन फर्म कॉम्प्राइज़ ने एक पेटेंट तकनीक विकसित की है जो बड़े पैमाने पर असंरचित डेटासेट को गतिशील रूप से विभाजित करने में सक्षम है। यह समाधान एआई प्रोसेसिंग जीपीयू में डेटा ट्रांसमिशन के दौरान कई कंप्यूट इंजनों में वर्कलोड वितरित करता है, जिससे समग्र प्रोसेसिंग गति में काफी तेजी आती है।
आधिकारिक तौर पर पेटेंट यूएस-12566637-बी2 के रूप में दर्ज, कॉम्प्राइज़ इलास्टिक शेयर्स (केईएस) तकनीक कॉम्प्राइज़ सीटीओ माइकल पीरसी और उनकी शोध टीम द्वारा प्रस्तुत की गई थी। इसका औपचारिक शीर्षक है "कई कंप्यूट इंजनों द्वारा संचालन के निष्पादन के लिए एक अज्ञात पेड़ को उप-विभाजित करने की प्रणाली और विधियाँ।"
पीरसी ने कहा: "इलास्टिक शेयर्स हमारे ग्राहकों को मूल्यवान कंप्यूटिंग, मेमोरी और नेटवर्क संसाधनों का पूरी तरह से लाभ उठाने में सक्षम बनाता है। प्रौद्योगिकी निकट-रेखीय प्रदर्शन स्केलिंग प्रदान करती है, जिससे उद्यमों को प्रमुख प्रतिस्पर्धी लाभ प्राप्त करने में मदद मिलती है।"
एनालिटिक्स, एलएलएम अनुमान या एआई एजेंट गणना के लिए एआई सर्वर पर प्रेषित पेटाबाइट-स्केल डेटासेट के लिए, एक एकल गणना इंजन को निर्देशिका पेड़ों या ऑब्जेक्ट स्टोरेज उपसर्गों को पार करने के लिए घंटों की आवश्यकता होती है। एक कंप्यूट इंजन को सभी परिदृश्यों में सुसंगत परिचालन सिद्धांतों के साथ एक स्वतंत्र सर्वर, व्यक्तिगत थ्रेड, थ्रेड समूह, प्रक्रिया या प्रक्रिया क्लस्टर के रूप में परिभाषित किया जा सकता है। हालाँकि उपयोगकर्ता समानांतर कंप्यूटिंग के लिए पहले से कई इंजन तैनात कर सकते हैं, स्थैतिक आवंटन अक्सर अक्षमता का कारण बनता है। असमान शाखा आकार के परिणामस्वरूप कुछ कंप्यूट नोड्स जल्दी समाप्त हो जाते हैं और असाइन किए गए कार्यों को पूरा करने के लिए धीमे नोड्स की प्रतीक्षा करते हुए निष्क्रिय रहते हैं।
कॉम्प्राइज़ पेटेंट यूएस-12566637-बी2।
पीयरसी की टीम ने वास्तविक समय में नोड स्थिति की निगरानी करने के लिए एक कंप्यूट इंजन के भीतर एम्बेडेड एक बुद्धिमान जॉब शेड्यूलर का आविष्कार किया। जब डेटा प्रोसेसिंग कार्य शुरू किया जाता है, तो कार्यभार शुरू में उपलब्ध कंप्यूट इंजनों में आवंटित किया जाता है। एक बार जब कोई नोड अपना निर्दिष्ट विभाजन पूरा कर लेता है, तो वह लंबित कार्यों को प्राप्त करने के लिए संसाधन पूल में वापस आ जाता है। यह तंत्र निष्क्रिय समय को समाप्त करता है, मुक्त कंप्यूट नोड्स को लगातार नए कार्यभार सौंपता है, और समग्र प्रसंस्करण अवधि को छोटा करता है।
एक आधिकारिक कॉम्प्राइज़ ब्लॉग पोस्ट के अनुसार, केईएस स्ट्रीमिंग तरीके से सर्वर क्लस्टर में असंरचित डेटा वर्कलोड को गतिशील रूप से पुनर्वितरित करता है। प्रौद्योगिकी डेटासेट क्षमता, आंतरिक संरचना या प्रसंस्करण विलंबता के संबंध में पूर्व-प्राप्त जानकारी की आवश्यकता के बिना बड़े पैमाने पर डेटा प्रोसेसिंग के लिए लगभग-रेखीय गति प्राप्त करती है।
इसे सीधे शब्दों में कहें: प्रत्येक कंप्यूटिंग नोड वर्तमान असाइनमेंट को पूरा करने के तुरंत बाद स्वचालित रूप से नए कार्य प्राप्त करता है, संपूर्ण डेटा कार्य पूरा होने तक पूर्ण संसाधन उपयोग बनाए रखता है।
माइकल पीरसी.
पेटेंट दस्तावेज़ इंगित करता है कि फ़ाइल सर्वर या स्टोरेज वॉल्यूम के बीच बड़े पैमाने पर डेटा माइग्रेशन कार्यों को अक्सर सख्त समय की कमी का सामना करना पड़ता है। एक एकल कंप्यूट नोड, चाहे वह थ्रेड, प्रोसेस या स्टैंडअलोन सर्वर हो, में भारी कार्यभार को तेजी से पूरा करने के लिए पर्याप्त थ्रूपुट का अभाव होता है, जिससे मल्टी-इंजन समानांतर प्रसंस्करण एक आवश्यक समाधान बन जाता है।
दस्तावेज़ आगे बताता है कि निर्देशिका वृक्ष संरचनाओं को केवल जड़ से पत्ती नोड्स तक पुनरावर्ती ट्रैवर्सल के दौरान पहचाना जा सकता है। कुछ मामलों में, डेटा को एक निश्चित क्रम में संसाधित किया जाना चाहिए, जैसे कि सबफ़ोल्डर्स और फ़ाइलों से पहले मूल निर्देशिकाओं को प्राथमिकता देना। इसके लिए कठोर स्थैतिक विभाजन के बजाय वास्तविक समय गतिशील कार्यभार विभाजन की आवश्यकता होती है, जिसे विविध और अज्ञात डेटा आर्किटेक्चर के अनुकूल होना चाहिए।
यह पेटेंट तकनीक फ़ाइलों, फ़ोल्डरों, स्टोरेज ऑब्जेक्ट और ऑब्जेक्ट उपसर्गों पर लागू होती है। हालाँकि मूल रूप से स्वतंत्र भौतिक सर्वरों के लिए डिज़ाइन किया गया है, यह थ्रेड, प्रक्रियाओं और बैकएंड सर्विस क्लस्टर सहित सभी प्रकार के कंप्यूट इंजनों के साथ संगत है।
कॉम्प्रिज़ केईएस प्रौद्योगिकी द्वारा लाए गए तीन मुख्य लाभों पर प्रकाश डालता है:
-
गतिशील कार्य विभाजन: उच्च-मूल्य वाले कंप्यूटिंग संसाधन निष्क्रिय हो जाने पर तुरंत नए कार्यों के साथ पुन: असाइन किए जाते हैं।
-
ब्लाइंड डेटा प्रोसेसिंग: सिस्टम डेटा आकार, आंतरिक संरचना और परिवर्तनीय प्रसंस्करण विलंबता के बारे में पूर्व जागरूकता के बिना डेटासेट गणना का समर्थन करता है, जो एआई स्ट्रीमिंग डेटा ट्रांसमिशन परिदृश्यों के लिए बिल्कुल उपयुक्त है।
-
बुद्धिमान संसाधन पुनर्संतुलन: यह अप्रत्याशित शाखा घनत्व के साथ असंरचित डेटा पदानुक्रम के अनुकूल होने के लिए आवंटन रणनीतियों को स्वचालित रूप से अनुकूलित करता है।
यह नवीन पेटेंट तकनीक बड़े पैमाने पर असंरचित डेटा कंप्यूटिंग के लिए व्यावहारिक और कुशल अनुकूलन प्रदान करती है।
बीजिंग कियानक्सिंग जिएतोंग टेक्नोलॉजी कंपनी लिमिटेड
सैंडी यांग/वैश्विक रणनीति निदेशक
व्हाट्सएप/वीचैट: +86 13426366826
ईमेल: angyd@qianxingdata.com
वेबसाइट: www.qianxingdata.com/www.storagesserver.com
व्यवसाय फोकस:
आईसीटी उत्पाद वितरण/प्रणाली एकीकरण एवं सेवाएँ/बुनियादी ढाँचा समाधान
20+ वर्षों के आईटी वितरण अनुभव के साथ, हम विश्वसनीय उत्पाद और पेशेवर सेवाएं प्रदान करने के लिए अग्रणी वैश्विक ब्रांडों के साथ साझेदारी करते हैं।
"एक बुद्धिमान दुनिया बनाने के लिए प्रौद्योगिकी का उपयोग करना" आपका विश्वसनीय आईसीटी उत्पाद सेवा प्रदाता!