چھتے اور سوت سے چنگاری سے بجلی پیدا ہوجاتی ہے

اس بلاگ میں ، آئیے دیکھتے ہیں کہ مخصوص ہڈوپ ورژن کے لئے اسپارک کو کیسے بنایا جائے۔

ہم یہ بھی سیکھیں گے کہ ایچ آئی وی اور یاران کے ساتھ چنگاری بنانے کا طریقہ۔

جاوا میں ڈیٹا کی قسم کاسٹنگ

جو آپ کے پاس ہے اس پر غور کرنا ہڈوپ ، جے ڈی کے ، ایم وی این اور جاؤ پہلے سے نصب اور پہلے سے تشکیل شدہ آپ کے سسٹم پر۔

کھولو موزیلا براؤزر اور ڈاؤن لوڈ کریں چنگاری نیچے لنک کا استعمال کرتے ہوئے۔

https://edureka.wistia.com/medias/k14eamzaza/

کھلا ٹرمینل۔

کمانڈ: tar -xvf Downloads / spark-1.1.1.tgz

کمانڈ: ایل ایس

کھولیں چنگاری 1.1.1 ڈائرکٹری۔

آپ کھول سکتے ہیں pom.xml فائل یہ فائل آپ کو تمام کے بارے میں معلومات فراہم کرتی ہے انحصار آپ کو ضرورت ہے.

پریشانی سے دور رہنے کے لئے اس میں ترمیم نہ کریں۔

کمانڈ: سی ڈی چنگاری۔ 1.1.1 /

کمانڈ: sudo gedit sbt / sbt -unch-lib.bash

فائل کو نیچے کی طرح اسنیپ شاٹ میں ترمیم کریں ، اسے محفوظ کریں اور اسے بند کردیں۔

آبجیکٹ ہیپ اسپیس کے مسئلے سے بچنے کے لئے ہم میموری کو کم کررہے ہیں جیسا کہ ذیل میں اسنیپ شاٹ میں بتایا گیا ہے۔

اب ، HIVE اور YARN کے ساتھ ہڈوپ 2.2.0 کے لئے چنگاری بنانے کے لئے ٹرمینل میں نیچے کی کمانڈ چلائیں۔

کمانڈ: ./sbt/sbt -P سوت -پی چھتے -فڈوپ -2،2 -ڈی hadoop.version = 2.2.0 -D اسکیپ ٹیسٹ اسمبلی

نوٹ: میرا ہڈوپ ورژن 2.2.0 ہے ، آپ اسے اپنے ہڈوپ ورژن کے مطابق تبدیل کرسکتے ہیں۔

دیگر ہڈوپ ورژنوں کے لئے

# اپاچی ہیدوپ 2.0.5-الفا

-Dhaoop.version = 2.0.5-alpha

# کلودرا سی ڈی ایچ 4.2.0

-Dhaoop.version = 2.0.0-cd4.2.0

# اپاچی ہڈوپ 0.23.x

-فیڈوپ- 0.23 -Dhaoop.version = 0.23.7

# اپاچی ہیدوپ 2.3.X

-فڈوپ -2،3-ڈھڈوپ.وورسین = 2.3.0

# اپاچی ہیدوپ 2.4.X

-فڈوپ -2،4-ڈھڈوپ.وورسین = 2.4.0

مرتب کرنے اور پیکیجنگ میں کچھ وقت لگے گا ، براہ کرم اس کے مکمل ہونے تک انتظار کریں۔

دو مرتبان چنگاری-اسمبلی -1،1.1-hadoop2.2.0.jar اور چنگاری-مثالوں -1،1.1-hadoop2.2.0.jar تخلیق ہوجاتا ہے۔

کا راستہ چنگاری-اسمبلی -1،1.1-hadoop2.2.0.jar : /home/edureka/spark-1.1.1/ashala/target/scala-2.10/spark-asocolate-1.1.1-haoop2.2.0.jar

کا راستہ چنگاری-مثالوں -1،1.1-hadoop2.2.0.jar: /home/edureka/spark-1.1.1// نمونے / ستارے / اسکالا-2.10/spark- مثالوں مثال کے طور پر .1.1.1- shaoop2.2.0.jar

مبارک ہو ، آپ نے ہائوی اینڈ سوت کے لئے سپارک کو کامیابی کے ساتھ تعمیر کیا ہے۔

ہمارے لئے ایک سوال ہے؟ برائے کرم ان کا تذکرہ سیکشن میں ذکر کریں اور ہم آپ کو واپس ملیں گے۔

متعلقہ اشاعت:

ہاڈوپ کے ساتھ اپاچی چنگاری - کیوں اس سے فرق پڑتا ہے؟