یہ گائیڈ وضاحت کرے گا کہ S3 بالٹی سے ڈیٹا حاصل کرنے کے لیے کرالر کیسے بنائے جائیں۔
S3 بالٹی سے ڈیٹا حاصل کرنے کے لیے کرالر کیسے بنایا جائے؟
AWS میں کرالر بنانے کے لیے، ' AWS گلو ایمیزون ڈیش بورڈ سے سروس:
پر کلک کریں ' ڈیٹا بیس ڈیٹا بیس بنانے کے لیے ڈیٹا کیٹلاگ سیکشن سے ” بٹن:
پر کلک کریں ' ڈیٹا بیس شامل کریں۔ کنفیگریشن شروع کرنے کے لیے بٹن:
ڈیٹا بیس کا نام درج کریں اور 'پر کلک کرنے سے پہلے سب کچھ چھوڑ دیں کیونکہ یہ اختیاری ہے۔ ڈیٹا بیس بنائیں بٹن:
ڈیٹا بیس کامیابی کے ساتھ بنایا گیا ہے:
اس کے بعد، بس کی طرف جائیں ' رینگنے والے بائیں پینل سے اس پر کلک کرکے صفحہ:
پر کلک کریں ' کرالر بنائیں بٹن:
کرالر کا نام ٹائپ کریں اور 'پر کلک کریں۔ اگلے بٹن:
پر کلک کریں ' ڈیٹا کا ذریعہ شامل کریں۔ ڈیٹا کا ذریعہ منتخب کرنے کے لیے بٹن:
اس راستے کو چیک کرنے کے لیے جہاں ڈیٹا محفوظ ہے، S3 سروس ملاحظہ کریں:
S3 بالٹی میں جائیں جہاں ڈیٹا اپ لوڈ ہوتا ہے۔ صارف کر سکتا ہے۔ بنانا ایک بالٹی اور اپ لوڈ کریں AWS S3 ڈیش بورڈ سے اس پر ڈیٹا:
پر کلک کریں ' S3 کو براؤز کریں۔ ڈیٹا کا راستہ منتخب کرنے کے لیے بٹن:
ڈیٹا پر مشتمل فولڈر کو منتخب کریں، پھر 'پر کلک کریں۔ منتخب کریں۔ بٹن:
S3 راستہ منتخب کیا گیا ہے، اب 'پر کلک کریں S3 ڈیٹا ماخذ شامل کریں۔ بٹن:
ڈیٹا کا ذریعہ شامل ہونے کے بعد، صرف 'پر کلک کریں اگلے بٹن:
IAM کردار شامل کریں اور پھر 'پر کلک کریں۔ اگلے بٹن:
پہلے بنایا گیا ٹارگٹ ڈیٹا بیس درج کریں اور پھر ٹیبل کا نام ٹائپ کریں:
کرالر کے لیے آن ڈیمانڈ شیڈول کو منتخب کریں اور ' اگلے بٹن:
کرالر کا جائزہ لیں اور 'پر کلک کریں کرالر بنائیں بٹن:
کرالر کامیابی کے ساتھ بنایا گیا ہے، 'پر کلک کریں رن اسے منتخب کرنے کے بعد بٹن:
کرالر کو چلانے میں چند لمحے لگیں گے اور یہ ڈیٹا حاصل کرے گا اور ڈیٹا کو ذخیرہ کرنے کے لیے ایک ٹیبل بنائے گا:
میں داخل ہوں ' میزیں گلو ڈیش بورڈ سے صفحہ:
اس کے نام پر کلک کرکے ٹیبل کو منتخب کریں:
حاصل کردہ ڈیٹا کے میٹا ڈیٹا پر مشتمل کہانی کی تفصیلات ظاہر کی گئی ہیں:
صفحہ کو نیچے سکرول کریں اور ڈیٹا پر مشتمل جدول دیکھنے کے لیے سیکشن کو منتخب کریں:
یہ سب کچھ S3 بالٹی سے ڈیٹا حاصل کرنے کے لیے ایک کرالر بنانے کے بارے میں ہے۔
نتیجہ
S3 بالٹی سے ڈیٹا حاصل کرنے کے لیے ایک کرالر بنانے کے لیے، AWS Glue پر ایک ڈیٹا بیس بنائیں جس میں کرال شدہ ڈیٹا کو محفوظ کیا جائے گا۔ ڈیٹا کا ذریعہ (S3 بالٹی) اور ٹارگٹ ڈیٹا بیس فراہم کرکے Glue ڈیش بورڈ سے کرالر کو ترتیب دیں۔ کرالر چلائیں اور ڈیٹا کو S3 بالٹی سے ڈیٹا بیس ٹیبل پر لائیں جیسا کہ اس گائیڈ نے اچھی طرح سے وضاحت کی ہے۔