كيف تُنشئ زاحفًا لجلب البيانات من حاوية S3؟

Kyf Tunshy Zahfa A Ljlb Albyanat Mn Hawyt S3



يتم استخدام AWS Glue لاكتشاف البيانات ودمج البيانات والزحف إلى البيانات وإنشاء كتالوج البيانات على السحابة. يمكن للمستخدم إنشاء زاحف من AWS Glue يقوم بالزحف إلى البيانات من المصدر المحدد ثم تخزينها في كتالوج البيانات للحصول على المعلومات. يتعين على المستخدم فقط تشغيل الزاحف وسيتم تنفيذ كل شيء آخر بواسطة الزاحف في غضون بضع لحظات.

سيشرح هذا الدليل كيفية إنشاء برامج زحف لجلب البيانات من حاوية S3.

كيفية إنشاء الزاحف لجلب البيانات من حاوية S3؟

لإنشاء برنامج تتبع الارتباطات في AWS ، تفضل بزيارة ' AWS Glue خدمة 'من لوحة معلومات Amazon:









اضغط على ' قواعد بيانات 'من قسم كتالوج البيانات لإنشاء قاعدة بيانات:







اضغط على ' أضف قاعدة البيانات 'لبدء التكوين:



أدخل اسم قاعدة البيانات واترك كل شيء كما هو اختياري قبل النقر فوق ' إنشاء قاعدة بيانات ' زر:

تم إنشاء قاعدة البيانات بنجاح:

بعد ذلك ، توجه ببساطة إلى ' الزواحف 'بالنقر فوقه من اللوحة اليمنى:

اضغط على ' إنشاء الزاحف ' زر:

اكتب اسم الزاحف وانقر على ' التالي ' زر:

اضغط على ' أضف مصدر بيانات 'لتحديد مصدر البيانات:

للتحقق من المسار حيث يتم تخزين البيانات ، قم بزيارة خدمة S3:

توجه إلى دلو S3 حيث يتم تحميل البيانات. يمكن للمستخدم يخلق دلو و رفع البيانات الموجودة عليه من لوحة معلومات AWS S3:

اضغط على ' Browse S3 'لاختيار مسار البيانات:

حدد المجلد الذي يحتوي على البيانات ، ثم انقر فوق ' يختار ' زر:

تم تحديد مسار S3 ، انقر الآن على الزر ' أضف مصدر بيانات S3 ' زر:

بمجرد إضافة مصدر البيانات ، ما عليك سوى النقر فوق ' التالي ' زر:

أضف دور IAM ثم انقر فوق ' التالي ' زر:

أدخل قاعدة البيانات الهدف التي تم إنشاؤها مسبقًا ثم اكتب اسم الجدول:

حدد الجدول عند الطلب للزاحف وانقر على ' التالي ' زر:

راجع الزاحف وانقر على ' إنشاء الزاحف ' زر:

تم إنشاء الزاحف بنجاح ، انقر فوق ' يجري زر 'بعد تحديده:

سيستغرق تشغيل الزاحف بضع دقائق وسيجلب البيانات وينشئ جدولًا لتخزين البيانات:

توجه إلى ' الجداول 'من لوحة معلومات Glue:

حدد الجدول بالضغط على اسمه:

تم عرض تفاصيل الحكاية التي تحتوي على البيانات الوصفية للبيانات التي تم جلبها:

قم بالتمرير لأسفل الصفحة وحدد القسم لعرض الجدول الذي يحتوي على البيانات:

هذا كل شيء عن إنشاء زاحف لجلب البيانات من حاوية S3.

خاتمة

لإنشاء برنامج زاحف لجلب البيانات من حاوية S3 ، أنشئ قاعدة بيانات على AWS Glue حيث سيتم تخزين البيانات التي تم الزحف إليها. قم بتكوين الزاحف من لوحة معلومات Glue من خلال توفير مصدر البيانات (حاوية S3) وقاعدة البيانات الهدف. قم بتشغيل الزاحف وجلب البيانات من حاوية S3 إلى جدول قاعدة البيانات كما أوضح هذا الدليل بدقة.