एंड्रॉयड

अमेज़ॅन ऑटोमेट्स डेवलपर्स के लिए हैडोप उपयोग

Informatica बिग डाटा एडब्ल्यूएस डेमो - अमेज़न एडब्ल्यूएस पर बिग डेटा प्रबंधन

Informatica बिग डाटा एडब्ल्यूएस डेमो - अमेज़न एडब्ल्यूएस पर बिग डेटा प्रबंधन
Anonim

Amazon.com ने डेवलपर्स के लिए प्रोसेसर क्लस्टर में बड़े डेटा सेट को प्रोसेस करने के लिए मैपरेडस प्रोग्रामिंग मॉडल के हडोप कार्यान्वयन के उपयोग को सरल बनाने के लिए डिज़ाइन की गई एक होस्टेड सेवा लॉन्च की है।

अमेज़ॅन लोचदार मैपराइडस कहा जाता है, क्लाउड कंप्यूटिंग सेवा डेवलपर्स के लिए है जिनके अनुप्रयोगों को बड़ी मात्रा में डेटा को कम करने की आवश्यकता है, जिसके लिए हडोप आदर्श रूप से उपयुक्त है।

अमेज़ॅन लोचदार मैपराइडस के साथ, डेवलपर्स को हडोप से मैन्युअल रूप से संबंधित हैंडल करने के लिए कई कार्यों को स्वचालित किया जाता है, कंपनी की अमेज़ॅन वेब सर्विसेज (एडब्लूएस) क्लाउड कंप्यूटिंग डिवीजन ने गुरुवार को एक आधिकारिक ब्लॉग में कहा।

[आगे पढ़ने: सर्वश्रेष्ठ टीवी स्ट्रीमिंग सेवाएं]

"लोचदार MapReduce का उपयोग करके, आप हडोप नौकरियां बना सकते हैं, चला सकते हैं, निगरानी कर सकते हैं और नियंत्रित कर सकते हैं पॉइंट-एंड-क्लिक आसानी से। आपको बाहर जाने और हार्डवेयर के स्कैड्स खरीदने की ज़रूरत नहीं है। आपको इसे रैक करने, इसे नेटवर्क करने, या इसे प्रशासित करने की ज़रूरत नहीं है। आपको संसाधनों से बाहर निकलने या अपने संगठन के अन्य सदस्यों के साथ साझा करने की चिंता करने की आवश्यकता नहीं है। ब्लॉग मॉनींग पढ़ने के बाद आपको यह निगरानी करने, इसे ट्यून करने या सिस्टम या एप्लिकेशन सॉफ़्टवेयर को अपग्रेड करने में समय बिताना नहीं है।

एडब्ल्यूएस ने यह सेवा बनाने के बाद यह सेवा बनाने का फैसला किया है कि इसमें अमेज़ॅन पर हडोप नौकरियां चल रही हैं लोचदार कंप्यूट क्लाउड (ईसी 2) सेवा, जो होस्टेड कंप्यूटिंग क्षमता प्रदान करती है। क्योंकि हैडोप तेजी से लोकप्रिय हो रहा है, अमेज़ॅन का उद्देश्य अन्य डेवलपर्स के लिए मैपरेडस के इस खुले स्रोत कार्यान्वयन का लाभ उठाना आसान बनाना है।

लोचदार MapReduce संयोजन के साथ काम करता है ईसी 2 और अमेज़ॅन सरल स्टोरेज सर्विस (एस 3) ने स्टोरेज क्लाउड सेवा की मेजबानी की। "लोचदार मैपराइडस स्वचालित रूप से अमेज़ॅन ईसी 2 उदाहरणों पर मैपरेडस फ्रेमवर्क के एक हडोप कार्यान्वयन को स्पिन करता है, जो नौकरी प्रवाह में डेटा को छोटे हिस्सों में विभाजित करता है ताकि वे हो सकें संसाधित - 'नक्शा' फ़ंक्शन - समानांतर में, और आखिरकार संसाधित डेटा को अंतिम समाधान में पुनः संयोजित करना - 'कम करें' फ़ंक्शन। अमेज़ॅन एस 3 विश्लेषण के डेटा के स्रोत के रूप में कार्य करता है, और अंत परिणामों के लिए आउटपुट गंतव्य के रूप में, "सेवा के एक अलग विवरण के अनुसार।

अन्य एडब्ल्यूएस क्लाउड सेवाओं के साथ, अमेज़ॅन इसके आधार पर लोचदार MapReduce के लिए शुल्क लेता है न्यूनतम शुल्क के बिना उपयोग।