أفضل الأدوات لتخزين الكائنات وإدارة البيانات

سواء كنت مهندس سحابة متمرسًا أو مبتدئًا يحاول فهم تفاصيل السحابة، ففي نقطة ما، ستصادف خيار تخزين مثير للاهتمام يُسمى تخزين الكائنات لتخزين أو أرشفة البيانات غير المهيكلة الخاصة بك. في هذه المقالة، ستتعرف على تخزين الكائنات وأدوات رئيسية مثل MinIO و Cyberduck وغيرها.

فهم تخزين الكائنات

تعتبر تخزين الكائنات هي بنية تخزين البيانات التي تدير المعلومات كوحدات متفردة تُسمى كائنات، بدلاً من كملفات في مجلدات أو كتل على الخوادم. يشمل كل كائن عادة البيانات ذاتها، وكمية متغيرة من البيانات التوجيهية، ومُعرف فريد عالمي. توفر هذه النهج عدة مزايا على طرق التخزين التقليدية، خاصةً عند التعامل مع مجموعات كبيرة من البيانات غير المهيكلة.

الميزات الرئيسية لتخزين الكائنات

1. قابلية التوسع: يمكن لأنظمة تخزين الكائنات التوسع إلى بتابايتات وأكثر بسهولة، مما يجعلها مثالية للشركات ذات احتياجات بيانات تنمو بسرعة.
2. المتانة: من خلال تقنيات مثل ترميز الاستحداث وإعادة البيانات، يضمن تخزين الكائنات متانة بيانات عالية وتوافرًا.
3. كفاءة التكلفة: من خلال القضاء على الحاجة إلى أجهزة مكلفة ومتخصصة، يمكن لتخزين الكائنات تقليل تكاليف التخزين بشكل كبير.
4. ثراء البيانات التوجيهية: القدرة على ربط البيانات التوجيهية الواسعة مع كل كائن يعزز إمكانية البحث وقدرات إدارة البيانات.
5. الوصول بناءً على واجهة برمجة التطبيقات: تجعل واجهات برمجة تطبيقات RESTful من السهل دمج تخزين الكائنات مع مختلف التطبيقات والخدمات.

الأدوات والتقنيات لتخزين الكائنات

ظهرت العديد من الأدوات والتقنيات لدعم وتعزيز أنظمة تخزين الكائنات. دعونا نستكشف بعض من أبرزها:

MinIO

MinIO هو نظام تخزين كائنات مفتوح المصدر وعالي الأداء مصمم لتطبيقات السحابة الأصلية. يوفر حلاً قابلاً للتوسع وفعال لتخزين واسترجاع كميات كبيرة من البيانات غير المهيكلة، مثل الوثائق والصور ومقاطع الفيديو. يتوافق MinIO مع واجهة برمجة تطبيقات Amazon S3، مما يجعله خيارًا شائعًا بين المؤسسات التي تبحث عن تنفيذ حلول تخزين على الأماكن أو السحابة الهجينة.

الميزات الرئيسية لـ MinIO

يقدم MinIO عدة ميزات بارزة تجعله حلاً قويًا لتخزين الكائنات:

1. التوافق مع S3: يدعم MinIO بالكامل واجهة برمجة التطبيقات Amazon S3، مما يسمح بالتكامل السلس مع الأدوات والتطبيقات المتوافقة مع S3 الموجودة.
2. أداء عالي: مُحسّن للأجهزة الحديثة، يوفر MinIO وصولًا منخفض الكم وعالي النفاذ إلى البيانات.
3. القابلية للتوسع: يمكن نشر MinIO في وضع موزع، مما يتيح التوسع الأفقي عبر عدة عقد.
4. حماية البيانات: ينفذ تشفير المحو بيانات لحماية ضد فقدان البيانات وضمان التوفرية العالية.
5. الأمان: يوفر MinIO تشفير للبيانات في وضع الراحة وأثناء النقل، جنبًا إلى جنب مع ميزات إدارة الهوية.
6. إشعارات الحدث: يدعم إجراءات قابلة للتكوين أو المشغلات لأحداث محددة مثل إنشاء الكائنات أو حذفها.
7. إدارة دورة الحياة: تسمح بتحديد قواعد لإدارة دورة حياة الكائنات، بما في ذلك التحولات التلقائية بين طبقات التخزين.

MinIO Client (mc)

يوفر MinIO واجهة سطر أوامر قوية تسمى MinIO Client (mc) تتيح للمستخدمين التفاعل مع خوادم MinIO وخدمات التخزين المتوافقة مع S3 الأخرى . تقدم هذه الواجهة السطرية البديلة الحديثة لأوامر UNIX التقليدية لإدارة تخزين الكائنات.

الميزات الرئيسية لـ MinIO Client

1. دعم متعدد المنصات: يعمل mc على أنظمة تشغيل مختلفة، بما في ذلك Windows و macOS و Linux.
2. التوافق مع S3: يمكنه التفاعل مع أي خدمة تخزين متوافقة مع S3، وليس فقط خوادم MinIO.
3. بناء الجملة المألوفة: تم تصميم أوامر mc لتكون مشابهة لأوامر UNIX الشائعة، مما يجعلها بديهية للعديد من المستخدمين.
4. وظائف غنية: يقدم مجموعة واسعة من الأوامر لإدارة الدلاء والكائنات وتكوينات الخادم.

أوامر mc الأساسية

1. mc alias: إدارة بيانات اعتماد الخادم والتكوينات.
2. mc ls: قائمة الحاويات والكائنات، مشابهة لأمر ls في نظام التشغيل UNIX.
3. mc mb: إنشاء حاوية جديدة.
4. mc cp: نسخ الكائنات بين نظام الملفات المحلي وتخزين الكائنات أو بين خدمات تخزين الكائنات.
5. mc mv: نقل الكائنات داخل مواقع التخزين أو بينها.
6. mc rm: إزالة الكائنات أو الحاويات.
7. mc mirror: مزامنة الكائنات بين مواقع مختلفة.
8. mc find: البحث عن الكائنات استنادًا إلى معايير مختلفة.
9. mc diff: مقارنة الكائنات بين مواقعين.
10. mc cat: عرض محتويات الكائن.

باستخدام MinIO Client

لاستخدام أداة mc، يجب عليك أولاً إعداد اسم مستعار لخادم MinIO الخاص بك:

mc alias set myminio https://s3.<REGION>.<ENDPOINT> <YOUR-ACCESS-KEY> <YOUR-SECRET-KEY>

بعد إعداد الاسم المستعار، يمكنك تنفيذ عمليات مختلفة. على سبيل المثال:

قائمة الحاويات:

 mc ls myminio

إنشاء حاوية جديدة:

  mc mb myminio/newbucket

نسخ ملف إلى MinIO:

  mc cp myfile.txt myminio/newbucket/

تنزيل كائن من MinIO:

  mc cp myminio/newbucket/myfile.txt ./

البحث المتقدم

مطابقة أسماء الدلائل المطابقة لأنماط البدائل:

mc find myminio/newbucket --path "*logs*" 

قائمة بشكل تكراري:

mc ls --recursive myminio/newbucket

​

mc ls --summarize myminio/newbucket

يوفر عميل MinIO مجموعة شاملة من الأوامر لإدارة تخزين الكائنات، مما يجعله أداة قوية للمسؤولين والمطورين الذين يعملون مع MinIO أو أنظمة التخزين المتوافقة مع S3. إن صيغته البديهية ومجموعة الميزات الغنية تجعله عنصرًا أساسيًا في نظام MinIO البيئي، مما يمكّن من إدارة فعالة وتفاعل مع موارد تخزين الكائنات.

سايبر دوك

سايبر دوك هو متصفح مجاني لـ FTP و SFTP و WebDAV و S3 و OpenStack Swift لنظامي ماك وويندوز. على الرغم من أنه ليس نظام تخزين كائنات بحد ذاته، إلا أنه أداة قيمة للتفاعل مع خدمات تخزين الكائنات. تشمل الميزات:

• واجهة مستخدم سهلة لإدارة الملفات والدلاء
• دعم لمزودي خدمات التخزين السحابية المتعددة
• القدرة على تحرير الملفات مباشرة في محررين خارجيين
• مزامنة الملفات المحلية والبعيدة
• تكامل مع سلسلة مفاتيح النظام لتخزين بيانات الاعتماد بشكل آمن

الميزات الرئيسية لتكامل S3

1. إعداد اتصال سهل: يمكن للمستخدمين إنشاء اتصالات S3 عن طريق اختيار بروتوكول Amazon S3 وتقديم معرف مفتاح الوصول ومفتاح الوصول السري.
2. إدارة الدلاء: يتيح سايبر دوك إنشاء وحذف وإدارة دلاء S3 مباشرة من خلال واجهته.
3. عمليات الملفات: يمكن للمستخدمين تحميل وتنزيل وإدارة الملفات داخل دلاء S3 باستخدام وظيفة السحب والإفلات.
4. خيارات الأمان: يدعم سايبر دوك التشفير من جانب الخادم في S3، بما في ذلك الخيارات لخدمة إدارة مفاتيح AWS (KMS).
5. دعم النسخ المتعددة: يتيح التطبيق إدارة إصدارات دلو S3، مما يسمح للمستخدمين بالحفاظ على إصدارات الكائنات واسترجاعها واستعادتها.
6. بحث متقدم: يدعم البحث بنمط الأحرف البديلة باستخدام * أو ?. إليك مثال، كما هو مذكور في وثائق Cyberduck.

مقارنة أدوات الرسم البياني وأدوات أخرى

هذا الرسم البياني يقارن الأدوات المختلفة التي أستخدمها في تفاعلاتي اليومية مع دلاء تخزين الكائنات. هناك أدوات أخرى قمت بإدراجها أدناه للرجوع إليها:

بالإضافة إلى MinIO و Cyberduck و S3 Browser، هناك عدة أدوات بارزة أخرى في مجال تخزين الكائنات ونقل الملفات:

1. راي درايف: أداة لنظام التشغيل Windows تتيح للمستخدمين ربط خدمات تخزين السحابة ومحركات الشبكة كمحركات محلية، وتدعم اتصالات WebDAV و FTP و SFTP.
2. كوماندر وان: مدير ملفات ذو لوحتين لنظام macOS مع دعم FTP و FTPS و SFTP، يوفر التكامل مع حسابات تخزين السحابة.
3. فايل زيلا برو: عميل FTP شهير يدعم أيضًا S3 وبروتوكولات تخزين السحابة الأخرى.
4. لوسيد لينك: يوفر نظام ملفات سحابيًا يمكنه العمل مع S3 وأنظمة تخزين الكائنات الأخرى.
5. ركلون: أداة سطر أوامر مفتوحة المصدر لمزامنة الملفات والدلائل من وإلى مزودي تخزين السحابة المختلفة، بما في ذلك S3.
6. AWS CLI: واجهة سطر الأوامر الرسمية للتفاعل مع خدمات AWS، بما في ذلك S3.
7. S3cmd: أداة سطر أوامر مصممة خصيصًا لإدارة البيانات في Amazon S3.
8. كلاود بيري إكسبلورر: مدير ملفات مصمم لـ Amazon S3 وخدمات تخزين السحابة الأخرى.
9. كروس إف تي بي برو: عميل نقل ملفات متعدد البروتوكولات يدعم S3 بالإضافة إلى بروتوكولات أخرى.
10. إيرفايل: عميل نقل ملفات آخر بدعم S3.

الاستنتاج

تقدم هذه الأدوات ميزات مختلفة لإدارة تخزين الكائنات، من واجهات رسومية إلى أدوات سطر الأوامر، ملبية لاحتياجات وتفضيلات المستخدمين المختلفة في نظام تخزين السحابة.

قراءة متعمقة

• استخدام MinIO Client