Hadoop Iran

سلام دوستان کسی در مورد نصب و راه اندازی هدوپ در ویندوز چیزی میدونه به من کمک کنه؟؟؟

https://wiki.apache.org/hadoop/Hadoop2OnWindows

ممنون به خاطر راهنماییتون، بعد از نصب چطور میشه یه پروژه کوچک با هدوپ بالا بیارم؟؟

چه نوع پروژه ای؟

پروژه کلان داده به صورت توزیع شده بر روی چند سرور

برای اینکار قبلش باید هدوپ رو به صورت چندگره راه اندازی کنید و بعد می توانید پروژه سادی رو با موتور پردازشی MapReduce اجرا کنید.

میشه در این زمینه بیشتر توضیح بدید

با سلام و احترام، معذرت میخوام بین بحث تون. اجازه هست لینک این گروه رو در کانال cloud & cloudsim به اشتراک بگذارم؟

بله حتما.

سپاسگزارم

سلام و درود

انتشارات دانشگاه یزد

خیر*

سلام
دوستان برنامه اين گروه چيه؟

احتمالا یک ژورنال دانشگاهی هست.

جالب اینجاست که شرکت ما به آقای گندمی در این مورد مشاوره داده بود

بیشتر توضیح بدید

جدی!؟

بحث خیلی خیلی گسترده ای هست. می توانید به مقالات درون سایت مراجعه کنید.

راستش نمیشه من به شخصه توصیه نمیکنم کسی بدون پیش ضمینه وارد هیچ موضوعی بشه. من خودم از دیتابیس های NoSQL و MongoDB شروع کردم و بعد با هدوپ آشنا شدم

http://www.hadoop.ir

اوکی.
برای انجام پایان نامه و نوشتن مقالات و...چی؟
باید پیش زمینه داشت

بله حتما. مراجعه به مقالات

و ژورنال هاب معتبر علمی

اوکی
ببخشید
مقالات سایت شما برای مبدتیان خوبه یا باید هز سطوح پایین تر شروع کرد؟

از

هم مبتدیان و هم سطح بالا و متوسط

البته برای پایان نامه مقالات ژورنالی منظورم بود

بله در همین زمینه پرسیدم.

سلام به همگی

کسی متلب رو به هدوپ متصل کرده؟

یک کلاستر هدوپ دارم با ۳ تا نود روی اوبونتو

متلب من روی ویندوز نصب شده که ربطی به کلاستر هدوپ نداره

یه سری دستورات توی متلب زدم اما ارور میگیرم

بله

خطایی که میده مربوط به این هست که آدرس موردنظر مربوط به آدرس ریشه نصب هدوپ نیست

آدرس outputfolder رو به آدرس hdfs تغییر بدید

اوت پوت هدوپه؟

یا دقیقا همین آدرس hadoop_prefix?

پوزش متوجه شدم،
اما اصلا به اون مرحله نمیرسه، روی خط اول ارور داره!

اون مسیر برای کامپیوترهای دیگر قابل دسترس نیست

مگر دسترسی 777 داشته باشین

دسترسی ها 777 هست اما برای اطمینان عوضش میکنم. اما بعید میدونم مشکل اصلی رو حل کنه، چک میکنم نتیجه رو میگم.
ممنون مهندس

بسته به الگوریتم و نیازی که دارید شاید نیاز باشه که MapReduce در هدوپ را با اسپارک و یا Flink و Storm جایگذین کنید.

به پوشه logs مراجعه کنید و لاگ هارو کنترل کنید.

hadoop-2.3.0\logs\userlogs

خالی هست

لاگ مربوط به Hbase

پوشه نداره تو conf این هست...log4j.properties

پوشه Logs در پوشه نصبی HBase ندارید؟

نه

مسیر /var/log/hbase هم چک کنید.

کلا پوشه هایی که من دارم اینهاست...bin-conf-docs-hbase-webapps-lib

از اینجام دانلودش کردم http://www.apache.org/dyn/closer.cgi/hbase/

حالا میگید من چیکارش کنم مشکلم حل بشه؟؟؟؟

کار با کدوم یک از این زیر پروژ ههای هدوپ بهتر است؟؟

هر کدام یک کاربرد دارند

ذخیره سازی
پردازش
تحلیل
....

یعنی هر کدام از این ابزارها کار خاصی انجام میدن

تنها راه مراجعه به لاگ هست. مسیر hadoop-2.3.0\logs را چک کنید نه hadoop-2.3.0\logs\userlogs

مهندس رنجبر این مطلبت خیلی جالب بود اگه متن زبان اصلی این رو بگید از کجا آوردید خیلی ممنون میشم. با سپاس

والا این متن ترجمه نیست. ترکیبی از تجربه و کتاب و مقالاته

راستی این متن رو از کجا اوردید. یادمه این متن رو در گروهی نوشته بودم که بعدا به دلایلی از آن گروه جدا شدم.

ممنون خانم اردشیری