هل حصلت على الكثير من البيانات؟ انقلها إلى السحابة باستخدام AWS Snowball

جدول المحتويات:

هل حصلت على الكثير من البيانات؟ انقلها إلى السحابة باستخدام AWS Snowball
هل حصلت على الكثير من البيانات؟ انقلها إلى السحابة باستخدام AWS Snowball
Anonim

يمكن أن يكون ترحيل البيانات عملية بطيئة وشاقة. حتى عند استخدام ارتباط جيجابت ، قد يستغرق الأمر شهورًا لنقل مجموعات البيانات الضخمة. توفر AWS Snowball جهازًا ماديًا يمكنك تعبئته في الموقع وشحنه مرة أخرى إلى AWS للاستيراد إلى S3.

إنها علبة من محركات الأقراص الثابتة جدًا

ليس من غير المألوف رؤية مجموعات بيانات ضخمة ، حيث عادة ما تجمع الشركات الناشئة الناجحة الكثير من البيانات. على الرغم من أن 100 تيرابايت من البيانات قد لا تكون بهذه الصعوبة لتخزينها فعليًا على خوادمك ، إلا أنك ستصل إلى نقطة لا تمتلك فيها سعة الحوسبة المطلوبة للعمل فعليًا مع مثل هذه المجموعة الكبيرة من البيانات.في هذه المرحلة ، فإن نقله إلى السحابة ، AWS S3 في هذه الحالة ، له الكثير من المزايا ، ولكن في الواقع يصبح الحصول عليه هناك مشكلة لوجستية خاصة به.

الإنترنت بطيء جدًا مقارنة بالسرعات التي يمكن تحقيقها على الشبكات الخاصة. في أحسن الأحوال ، قد تحصل على سرعة جيجابت ، ولكن من غير المرجح أن تحقق ذلك في الممارسة العملية - حتى إن خدمة AWS Direct Connect تصل إلى 500 ميجابايت في الثانية. في كلتا الحالتين ، لن ترغب في تشبع هذا الاتصال بالكامل لعدة أشهر أثناء نقل مجموعة البيانات الخاصة بك. وفي الوقت نفسه ، من الشائع أن تصل سرعة اتصالات الإنترانت إلى 10 إلى 40 جيجابت مع الأجهزة المناسبة والكابلات الحديثة ، وتكون سرعات محرك الأقراص الثابتة سريعة إلى حد ما ، خاصة في مصفوفات RAID أو عند القراءة بالتوازي.

إذن ، الحل المجنون الذي تقدمه AWS هو تحميل البيانات على محرك الأقراص الثابتة وإرسال محرك الأقراص الثابتة هذا بالبريد إلى AWS. الوقت الذي يستغرقه تحميل البيانات ، وشحنها عبر البلاد ، واستلامها بواسطة Amazon ، وقراءتها وتحميلها في S3 أقل بكثير من مجرد استخدام أنابيب الإنترنت (لمجموعات البيانات الضخمة على الأقل).لقد عرضت AWS هذا بالفعل كخدمة منذ عام 2009 ، حيث يمكنك إرسال محركات الأقراص الثابتة الخاصة بك للاستيراد. ومع ذلك ، فإن القضايا اللوجستية المعنية كانت أقل من مثالية.

Snowball هو التكرار التالي لهذه الخدمة. يحتوي الصندوق على محركات أقراص صلبة متعددة ، ويأتي بسعة 50 تيرابايت و 80 تيرابايت. في الجزء الأمامي من الصندوق ، ستجد شاشة Kindle e-Ink ، والتي تعمل بمثابة ملصق الشحن وواجهة للجهاز. في الجزء الخلفي ، ستجد قابس الطاقة بالإضافة إلى منفذ RJ45 ومنفذ ضوئي لتوصيله بشبكتك. كل هذا موجود في حاوية بلاستيكية متينة تعمل كصندوق شحن خاص بها:

كرة الثلج في صندوق الشحن الخاص بها
كرة الثلج في صندوق الشحن الخاص بها

يمكن أن تصل كرة الثلج إلى معدل نقل بيانات بحد أقصى من 250 إلى 400 ميجابت في الثانية ، وهو ما يعادل اتصال 2.5 إلى 3 جيجابت. قد تكون مقيدًا أيضًا بسرعات القراءة من شبكتك الخاصة ، ولكن يمكنك تشغيل مهام استيراد متعددة بالتوازي ، لذا يجب أن تكون قادرًا على تشبعها.يمكنك أيضًا طلب كرات ثلجية متعددة لنقل مجموعات بيانات أكبر من 50 تيرابايت.

تبلغ تكلفة لعبة Snowball 200 دولار لكل عملية تحويل ، أو 250 دولارًا لإصدار 80 تيرابايت. هذا في الواقع رخيص حقا ؛ مقارنة بنقل هذه البيانات إلى S3 عبر أنابيب الإنترنت (التي يتم فرض ضرائب عليها) ، فهي تمثل حوالي خمس التكلفة ، وبالمقارنة بشراء محركات الأقراص الثابتة الخاصة بك وإرسالها ، فستتعرض لضغوط شديدة للعثور على 50 تيرابايت من تخزين 200 دولار (يمكن أن يكلف محرك أقراص واحد سعة 8 تيرابايت هذا الكثير).

يضع هذا Snowball كخيار معقول لنقل البيانات للشركات التي ترغب في التبديل إلى السحابة وإحضار مجموعة البيانات الخاصة بها معهم. ومع ذلك ، ضع في اعتبارك أن التكلفة الرئيسية لن تكون كرة الثلج نفسها ، بل تكلفة تخزين تلك البيانات في السحابة في المقام الأول. تبلغ تكلفة كرة الثلج المليئة بالبيانات 1 دولارًا و 150 دولارًا شهريًا بموجب المستوى القياسي لـ S3 ، ولكن يمكن خفض ذلك إلى حوالي 750 دولارًا أو نحو ذلك باستخدام التصنيف الذكي. إذا لم يتم الوصول إلى بياناتك كثيرًا ، يمكنك استخدام S3 Glacier ، والتي يمكن أن تخفض التكاليف إلى 200 دولار شهريًا ، أو 50 دولارًا فقط شهريًا باستخدام Glacier Deep Archive.في كلتا الحالتين ، فإن تكلفة Snowball لا تكاد تذكر إذا كنت تفكر بجدية في نقل بياناتك إلى السحابة.

كيفية استخدام كرة الثلج

بقدر ما يتم استخدام الشيء فعليًا ، بمجرد وصوله ، ستقوم ببساطة بتوصيله بالطاقة وتوصيله بجهاز كمبيوتر على شبكتك باستخدام مقابس RJ45 أو SFP + Copper أو SFP + الضوئية. ستحتاج إلى التأكد من أن محطة العمل التي تتصل بها قوية إلى حد ما ، حيث إنها عادة ما تكون عنق الزجاجة. سيكون أيضًا مثاليًا إذا كانت محطة العمل هذه متصلة مباشرة بمصدر البيانات الخاص بك دون أي شيء آخر يسد الشبكة.

باستخدام الشاشة الأمامية ، يمكنك تعيين Snowball عنوان IP ثابت:

تعيين عنوان IP ثابت للعبة Snowball
تعيين عنوان IP ثابت للعبة Snowball

بمجرد توصيل الشبكة ، يمكنك بدء النقل. ستحتاج إلى استخدام Snowball S3 Adapter ، وهي حزمة برامج تعمل كنقطة نهاية S3 وتستخدم نفس واجهة برمجة التطبيقات التي ستستخدمها للنقل إلى السحابة.هناك أيضًا عميل عادي ، والذي سيمكنك ببساطة من سحب الملفات وإفلاتها على Snowball ، ولكنه أبطأ بكثير من محول S3.

بمجرد تحميلها ، يمكنك شحنها مرة أخرى إلى AWS ، ويتم تحميلها في S3 لاستخدامها مع بقية نظام AWS البيئي.

يمكنك أيضًا طلب شاحنة كاملة لهم

إذا كنت من النوع الذي يقرأ هذا ويتساءل كيف ستوصل مئات كرات الثلج بمركز البيانات الخاص بك لنقل عشرات البيتابايت ، فإن AWS لديها خدمة من أجلك. بأخذ مفهوم Snowball إلى أقصى الحدود ، ابتكر مهندس مجنون AWS Snowmobile ، وهو بالضبط ما تعتقده - شاحنة مقطورة تسحب محركًا ثابتًا ضخمًا مخزنًا في حاوية شحن بطول 45 قدمًا. يمكنه نقل 100 بيتابايت من البيانات ، أي ما يعادل حوالي 1250 كرة ثلجية.

مقطورة عربة الثلج AWS
مقطورة عربة الثلج AWS

بطبيعة الحال ، إنها باهظة الثمن إلى حد ما.يتم تحصيل 0.005 دولار أمريكي لكل جيجابايت شهريًا ، وهي طريقة جيدة للقول إن تم تحصيل 5000 دولار أمريكي لكل بيتابايت عن كل شهر تستغرقه عملية التحويل. ولكن ، على هذا النطاق ، هذا هو الحل الأرخص حقًا - فالحل القائم على الشبكة سيستغرق عقودًا لنقل مئات البيتابايت إلى السحابة ، مما يجعله مستحيلًا من الناحية الواقعية ، حتى لو وضعنا جانباً ملايين الدولارات في تكاليف الاستثمار والتحويل. ستكلف مهمة AWS Snowmobile بضع مئات الآلاف على الأكثر إذا قمت بملئها بالكامل ، وسيتم الانتهاء منها في غضون أسابيع قليلة.

موضوع شعبي