MLPerf Storage v3.0 मौजूदा POSIX फ्रेमवर्क में एक S3 डेटा लेयर जोड़ता है, नए KV कैश और वेक्टर डेटाबेस वर्कलोड के साथ,आधुनिक एआई डेटा प्रणाली आवश्यकताओं के साथ बेंचमार्क मानदंडों का निकट से संरेखण.
एमएलसी कॉमन्स द्वारा विकसित, एमएलपरफ स्टोरेज बेंचमार्क ने मूल रूप से यूनेट 3 डी, कॉस्मोफ्लो और रेसनेट 50 सहित मशीन लर्निंग प्रशिक्षण कार्यभार के लिए स्टोरेज प्रदर्शन का मूल्यांकन किया,NVIDIA A100 और H100 GPU हार्डवेयर का उपयोग करना. v3.0 रिलीज़ में चार मुख्य कार्यभार परिदृश्यों पर केंद्रित एक व्यापक परीक्षण पुनर्गठन है।
अद्यतन परीक्षण ढांचे में Unet3D और RetinaNet पर आधारित एआई प्रशिक्षण शामिल है जो 90% से अधिक उपयोग को बनाए रखते हुए अधिकतम त्वरक स्केलेबिलिटी को मापता है।NVIDIA B200 या AMD MI355 GPU पर अनुकरण किया गयायह 8B से 1.25T पैरामीटर तक के लमा 3 शैली के मॉडल के लिए चेकपॉइंटिंग को भी कवर करता है, जो पुनरावर्ती लेखन और पढ़ने के 10 दौरों के लिए कम विलंबता को प्राथमिकता देता है। इसके अतिरिक्त,सूट 1 मिलियन पर वेक्टर डेटाबेस परीक्षण शामिल है, 1536-आयामी मिल्वस डेटासेट विलंबता और रिकॉल दरों को ट्रैक करते हुए क्वेरी थ्रूपुट को अधिकतम करने के लिए, साथ ही अधिकतम समवर्ती वार्तालाप समर्थन क्षमता को मापने के लिए केवी कैश परीक्षण।
एमएलपरफ स्टोरेज वर्किंग ग्रुप के सह-अध्यक्ष ब्रायन बेल्गोडेर ने कहा कि नया परीक्षण पोर्टफोलियो मुख्यधारा के एआई निष्कर्ष भंडारण मांगों के लिए बेंचमार्क कवरेज को समृद्ध करता है।अद्यतन सूट प्रशिक्षण-केंद्रित प्रशिक्षण और चेकपॉइंटिंग परीक्षणों को अनुमान-उन्मुख केवी कैश और वेक्टर डेटाबेस मूल्यांकन के साथ संतुलित करता हैएकीकृत एआई प्रणालियों को लक्षित भंडारण कार्यभार आकलन में तोड़कर, चेकपॉइंटिंग, केवी कैशिंग और वेक्टर क्वेरी प्रसंस्करण सहित,यह बेंचमार्क उद्योग व्यवसायियों को एआई बुनियादी ढांचे के विन्यास को बेहतर ढंग से अनुकूलित करने और भंडारण प्रदर्शन की बाधाओं को समाप्त करने में सक्षम बनाता है।.
हाल ही में जोड़ा गया S3 ऑब्जेक्ट स्टोरेज लेयर प्रशिक्षण, चेकपॉइंटिंग और आंशिक वेक्टर डेटाबेस परीक्षणों का समर्थन करता है, लगभग सभी v3.0 सबमिशनों में से एक-छठा भाग S3-आधारित स्टोरेज एक्सेस को अपनाता है।
कर्टिस एंडरसन, एक अन्य कार्य समूह सह-अध्यक्ष ने कहा कि जैसे-जैसे एआई संदर्भ खरबों टोकन तक बढ़ता है, वस्तु भंडारण एक व्यवहार्य के रूप में उभर रहा है,पारंपरिक फाइल-सिस्टम भंडारण के लिए बेहतर विकल्पv3.0 में मूल S3 समर्थन उद्यम भंडारण तैनाती निर्णयों का मार्गदर्शन करने के लिए पारदर्शी प्रदर्शन डेटा प्रदान करता है.
इस बेंचमार्क चक्र के लिए कुल 19 विक्रेताओं ने परिणाम प्रस्तुत किए। विशेष रूप से, डीडीएन, डेल, हुआवेई, आईबीएम, नेटएप,VAST डेटा और WEKA प्रस्तुत सूची में अनुपस्थित थेएमएलपीआरएफ के अधिकारियों ने टिप्पणी की कि पारंपरिक एनएएस विक्रेताओं की भागीदारी सीमित है, अधिकांश स्थापित संस्थापक नवीनतम दौर से बाहर हैं।
विविध एआई भंडारण परिदृश्य को देखते हुए, v3.0 एक एकल समग्र रैंकिंग प्रकाशित नहीं करता है। इसके बजाय, यह बहुआयामी मीट्रिक के साथ चार कार्यभार श्रेणियों के लिए स्वतंत्र परिणाम प्रदान करता है।पूर्ण परिणाम डेटासेट लगभग 145 पंक्तियों और 55 स्तंभों को शामिल करता है, कुल मिलाकर लगभग 8,000 डेटा कोशिकाओं के साथ 12 समर्पित स्तंभ विशेष रूप से केवी कैश प्रदर्शन मेट्रिक्स के लिए। ये थ्रूपुट को कवर करते हैं,8B और 70B लामा मॉडल वर्कलोड के लिए केवल स्टोरेज और स्टोरेज+मेमोरी आर्किटेक्चर दोनों के तहत पढ़ने/लिखने का बैंडविड्थ और P95 विलंबता.
एमएलसी कॉमन्स ने बुनियादी ढांचे की समग्र परिचालन प्रभावशीलता को मापने के लिए प्रति रैक घनत्व और प्रति वाट ऊर्जा दक्षता पर आधारित मानकीकृत प्रदर्शन मूल्यांकन की भी सिफारिश की है।
अद्यतन बेंचमार्क सूट में अत्यधिक जटिल मूल्यांकन तर्क है, जो विक्रेताओं को लक्षित कार्यभारों के लिए चुनिंदा रूप से परिणाम प्रस्तुत करने की अनुमति देता है।सुज़ौ ज़िशान और टीटीए ने वेक्टर डेटाबेस में परीक्षण के परिणाम प्रस्तुत किए.
Everpure ने 405B और 1.25T पैरामीटर मॉडल के लिए चेकपॉइंटिंग और KV कैश परीक्षणों में अपने FlashBlade//EXA के लिए शीर्ष स्तर के प्रदर्शन की सूचना दी।024 सिमुलेटेड एक्सेलेरेटर, प्लेटफॉर्म ने 1.25T मॉडल चेकपॉइंटिंग के लिए 877.52 गीगाबाइट / सेकंड लिखने के लिए बैंडविड्थ (17.74s पूरा) और 588.28 गीगाबाइट / सेकंड पढ़ने के लिए बैंडविड्थ (28.99s पूरा) हासिल किया। इसका प्रदर्शन 327 से रैखिक रूप से बढ़ गया।65 गीगाबाइट/सेकंड 10 नोड्स पर लिखने की दर अधिकतम 30 नोड्स के परिणाम तक.
पूरक आंकड़ों से पता चलता है कि स्थानीय चेकपॉइंट लेखन प्रस्तुतियों ने प्रति वाट 14 जीबी/एस की औसत ऊर्जा दक्षता प्रदान की, जिसमें 201 जीबी/एस प्रति वाट का शिखर है।UNet3D रीड टेस्ट में 34 GB/s प्रति वाट और अधिकतम 277 GB/s प्रति वाट की औसत दक्षता दर्ज की गई है.
बीजिंग कियानक्सिंग जीएटोंग टेक्नोलॉजी कं, लिमिटेड
सैंडी यांग/वैश्विक रणनीति निदेशक
व्हाट्सएप / वीचैटः +86 13426366826
ईमेलः yangyd@qianxingdata.com
वेबसाइटः www.qianxingdata.com/www.storagesserver.com
व्यापार फोकसः
आईसीटी उत्पाद वितरण/सिस्टम एकीकरण और सेवाएं/पूर्वाधार समाधान
20+ वर्षों के आईटी वितरण अनुभव के साथ, हम विश्वसनीय उत्पादों और पेशेवर सेवाओं को वितरित करने के लिए अग्रणी वैश्विक ब्रांडों के साथ साझेदारी करते हैं।
एक बुद्धिमान दुनिया के निर्माण के लिए प्रौद्योगिकी का उपयोग करना आपका विश्वसनीय आईसीटी उत्पाद सेवा प्रदाता!