OCCC Wiki - مشارکت‌های کاربر [fa]

کارگروه ها:BigData

2016-02-16T03:07:36Z

Mobinranjbar: /* لینک های مرتبط */

فعالیت این کارگروه بررسی روش های پیاده سازی [[کلان داده]] و یا همان [[BigData]] است. اعضای این کارگروه به بررسی و پیاده سازی پروژه های مبتنی بر [[کلان داده]] می پردازند.

فعالیت های این کارگروه بر اساس نظر و مشارکت خود افراد فعال در جامعه و کارگروه انجام میشود و این فعالیت ها بصورت عمومی و آزاد انجام میشود.

'''بنابراین''' اگر فکر میکنید کار دیگری باید در این کارگروه انجام شود، میتوانید مستقیما اقدام کنید، در صفحه [[بحث:کارگروه ها:BigData| بحث]] نظر خود را مطرح کنید، مطالب مورد نیاز را اضافه کنید، مطالب موجود را اصلاح کنید، به بورد عمومی کارگروه مراجعه کنید، در جلسات حضوری جامعه شرکت کنید، اسم خود را به قسمت اعضا اضافه کنید و ...

== اعضای کارگروه ==
در حال حاضر اعضای این کار گروه عبارتند از:

* [[مرتضی سرگلزایی جوان]]
* [[امید کرمی]]
* [[وحید امیری]]
* [[احسان وحدت درخشان]]
* [[علی حلاجی]]
* [[امید یوسفیان]]
* [[میثم آقا احمدی]]
* [[احسان بنی هاشم]]
* [[میلاد محمدی زیوه]]
* [[بهروز حسینی]]
* [[حمید رضا قوامی]]
* [[بامداد وفائی]]
* [[معصومه رضائی جم]]
* [[زهره گلی]]
* [[عطاالله فخاری]]
* [[ فاطمه سادات کریمی ]]
* [[ مبین رنجبر ]]
* [[ مهرناز معروف ]]

== فعالیت ها ==
* مقاله [[کلان داده]]
* مقاله [[مجازی سازی داده]]
* مقاله [[Smart Data]]
* [[برنامه ریزی در حوزه کلان داده]]
* [[فرم های نظرسنجی مرتبط با کلان داده]]
* بررسی [[چالش واقعی سازمانها در رابطه با کلان داده ها و بررسی دقیقتر مدلهای کلان داده]]
* [[پیاده سازی سیستم های اطلاعاتی با حجم دیتای بالا و پراکندگی جغرافیایی بر بستر ابر]]
* [[ارائه_راهکارهایی_جهت_رفع_مشکل_پراکندگی_جغرافیایی|ارائه راهکارهایی جهت رفع مشکل پراکندگی جغرافیایی]]
* [[مستند سازی همایش کلان داده دی ۱۳۹۳]]

== جلسات کارگروه ==
'''شرکت در جلسات و مشارکت در کارگروه برای عمومی آزاد است.'''
صورتجلسات این کارگروه در این بخش مستند میشود.

* [[کارگروه کلان داده:جلسه هفتم]] − 29 اردیبهشت 94
* [[کارگروه کلان داده:جلسه ششم]] − 9 آذر 93
* [[کارگروه کلان داده:جلسه پنجم]] - 28 مهر 93
* [[کارگروه کلان داده: جلسه چهارم]] - 18 شهریور 93
* [[جلسه_شانزدهم_جامعه_آزاد_رایانش_ابری_ایران| کارگروه کلان داده:جلسه سوم]] - 21 مرداد 93
* [[کارگروه کلان داده:جلسه دوم]] - 24 تیر 93
* [[کارگروه کلان داده:جلسه اول]] - 3 تیر 93
* [[الگو:کارگروه کلان داده:قالب صفحه جلسات]]

== لینک های مرتبط ==

* [https://trello.com/b/FCAfB1Qc/occc-bigdata بورد مربوط به کارگروه کلان داده]
* [https://trello.com/occc_board بورد اطلاع رسانی و هماهنگی جامعه آزاد رایانش ابری ایران]
* [http://occc.ir/index.php/2014-04-27-19-44-41/meetingsarchive آرشیو جلسات عمومی جامعه آزاد رایانش ابری ایران]
* [http://occc.ir/index.php/2014-04-27-19-44-41/location زمان و مکان جلسات عمومی جامعه آزاد رایانش ابری ایران]
* [[کارگروه ها| کارگروه های جامعه آزاد رایانش ابری ایران]]
* [http://www.bigdata.ir/ پردازش و مهندسی داده]
* [http://www.hadoop.ir/ مرجع هدوپ ایران]

Hadoop

2015-09-15T08:03:24Z

Mobinranjbar:

هادوپ یک سکوی نرم افزای متن باز می باشد که از طریق آن می توان بسادگی حجم بسیار بزرگی از داده ها را ذخیره، تحلیل و پردازش کرد. برای مثال، هادوپ می تواند برای کارهایی نظیر شاخص گذاری صفحات وب، داده کاوی، تحلیل فایل های log، یادگیری ماشین، تحلیل های مالی، شبیه سازی های علمی و یا تحقیقات در زمینه بیوانفورماتیک مورد استفاده قرار بگیرد.

== ویژگی ها ==
سکوی هادوپ دارای ویژگی های زیر می باشد:

* '''مقیاس پذیری:''' توسط سکوی هادوپ این امکان وجود داردکه مجموعه داده هایی با حجمی در مقیاس چندین پتابایت داده را توسط توزیع داده ها در مقیاس چندین هزار نود در یک کلاستر را مدیریت و پردازش کرد.
* '''کارآمدی:''' پردازش موازی داده ها و وجود یک سیستم فایل توزیع شده این امکان را فراهم می کند که بتوان با سرعت بیشتری داده ها را پردازش کرد.
* '''قابلیت اعتماد:''' چندین تکرار از داده ها می تواند ایجاد و در سطح کلاستر توزیع شود. در هنگام ایجاد خطا در یکی از نود ها، پلاتفرم می تواند بدون دخالت کاربر به سازماندهی مجدد بپردازد. در نتیجه، تصحیح خطا خودکار نیز امکان پذیر است.
* '''سادگی:''' با هادوپ، نوشتن کدهای موازی کارا به سرعت و سهولت میسر است و جزئیات پردازش موازی، مانند توزیع داده میان گره‌های پردازشی، راه‌اندازی مجددِ زیر‌وظیفه‌های از کار‌افتاده، و ذخیره‌ی نتایج نهایی محاسبات در سیستم‌فایل، از دید کاربر پنهان می‌ماند . همچنین حتی دانشجوها هم می‌توانند به سرعت و با هزینه‌ی پایین برای خود یک خوشه هادوپ ایجاد کنند.

== معماری هادوپ ==
معماری هادوپ یک معماری Master/Slave می باشد. در این معماری، بر روی ماشینی که به عنوان ماشین Master انتخاب می شود، سرویس هایی برای مدیریت و پیکربندی کل سیستم و مدیریت برنامه ها اجرا می شوند. همچنین در ماشین Master ابزارهایی برای مدیریت داده ها و تحویل برنامه به سیستم وجود دارد که کاربرانِ سیستم برای کار با هادوپ می توانند از آنها استفاده کنند. در ماشین Slave نیز سرویس هایی برای اجرای وظایفی که از سمت ماشین Master به آن ارسال می شود، به اجرا در می آیند.

سکوی هادوپ از دو قسمت اصلی تشکیل شده است که این قسمت ها شامل 1) [[سیستم فایل توزیع شده هادوپ (HDFS )]] و 2) چهارچوب برنامه نویسی [[MapReduce]] می باشند. HDFS وظیفه ذخیره سازی و مدیریت داده ها در سیستم فایل را بر عهده داشته و داده های ورودی را به بلوک های مساوی تقسیم می کند و به ماشین های Slave تحویل می دهد. این سیستم فایل از طریق تکرار داده ها به مقابله با خطا می پردازد. چهارچوب MapReduce نیز یک مدل برنامه نویسی با هدف پردازش و تولید مجموعه ی عظیمی از داده ها فراهم می کند.

== روش های استقرار ==
سیستم فایل توزیع شده هادوپ (HDFS) و چهارچوب برنامه نویسی MapReduce که اجزای اصلی هادوپ را تشکیل می دهند مبین این هستند که هادوپ سیستمی است برای موازی سازی کارها وکارایی حقیقی آن در محیطی توزیع شده مشخص می گردد. با این حال در کارهای تست و توسعه همیشه فراهم آوردن چنین زیرساختی آسان نیست از این رو است که هادوپ به چند شکل قابل استقرار است. سه حالت نصب و راه اندازی مختلف برای هادوپ در نظر گرفته شده است، در حالت تک نوده یا عملکرد مستقل، شما می توانید روی یک نود (مثلا یک لپتاپ) هادوپ را نصب کنید. در حالت شبه توزیع شده نیز این امر میسر است با این تفاوت که هر یک از پردازه های هادوپ روی یک پردازه جاوای مستقل اجرا خواهند شد. حالت سوم هم وضعیت تمام توزیع شده آن می باشد که نصب در این حالت بر روی کلاستر خواهد بود.

* [http://hadoop.apache.org/docs/r1.2.1/single_node_setup.html Single Node Setup]: در این حالت چند روش عملکردی وجود دارد: Standalone، Pseudo-Distributed و Fully-Distributed
* [http://hadoop.apache.org/docs/r1.2.1/cluster_setup.html Cluster Setup]
* [http://hadoop.apache.org/docs/r1.2.1/cli_minicluster.html CLI MiniCluster]

یک مستند دیگر در خصوص ایجاد یک کلاستر هادوپ در [http://docs.hortonworks.com/HDPDocuments/HDP1/HDP-1.3.0/bk_cluster-planning-guide/content/typical-hadoop-cluster-hardware.html اینجا] ارایه شده است. در این مستند به انواع بار کاری و مشخصات سخت افزاری و نرم افزاری اشاره شده است.

== کاربران و ارائه دهندگان سرویس هادوپ ==
در اثبات قدرتمندی و کارامدی هادوپ می توان بیان کرد که امروزه بسیاری از شرکتهای بزرگ و مطرح دنیا در حوزه فناوری اطلاعات و کلان داده از هادوپ برای ذخیره سازی و پردازش کلان داده های خود استفاده می نمایند که از جمله آنها می توان به گوگل، یاهو، فیسبوک، آمازون، linkedIn و IBM اشاره نمود. همچنین شرکت هایی همچون گوگل و آمازون و مایکروسافت سرویس های ابری هادوپ را در اختیار کاربران قرار می دهند.

== نصب و راه‌اندازی ==
* [[نصب در UBUNTU ]]
* [http://hadoop.ir/howtoinstall/ نحوه نصب هدوپ به صورت تک گره به فارسی]
* [http://hadoop.ir/multinodeinstallation/ نحوه نصب هدوپ به صورت چند گره به فارسی]

== منابع مرتبط ==
* [http://hadoop.ir/%D9%88%DB%8C%D8%AF%DB%8C%D9%88-%D8%A2%D9%85%D9%88%D8%B2%D8%B4-%D9%86%D8%B5%D8%A8-%D9%87%D8%AF%D9%88%D9%BEhadoop-%D8%A8%D9%87-%D8%B5%D9%88%D8%B1%D8%AA-multinode/ فیلم آموزشی فارسی نصب هدوپ به صورت چند گره بر روی سرور های واقعی]
فیلم آموزشی در رابطه با آپاچی هادوپ که محصول شرکت CBT Nuggets می باشد. برای دانلود روی لینک زیر کلیک نمایید.

[http://p30download.com/fa/entry/53338/ فیلم آموزشی هادوپ]

مبین رنجبر

2015-09-15T07:48:55Z

Mobinranjbar:

{{#widget:LinkedIn Profile
|profile=http://www.linkedin.com/in/mobinranjbar
|name=Mobin Ranjbar
|norelated
}}

== معرفی ==
* دانشجوی کارشناسی ارشد مهندسی نرم افزار
* موسس و مدیرعامل شرکت مهندسی تکنولوژی فرافکر(مجری پروژه های داده های کلان در ایران)
* موسس مرجع هدوپ ایران (ارائه سرویس های ابری مبتنی بر هدوپ و تولید محتوای پارسی)
* موسس مجله سه زبانه دیده بان کلان داده
* مشارکت کننده در پروژه های Cloudera Hue و Apache Hadoop
* مدیر بخش پایگاه های داده ای غیررابطه ای یا NoSQL انجمن برنامه نویس

== مدارک کسب شده ==
* MongoDB for DBAs Certificate - 10gen Inc
* Hadoop Essentials - MapR Academy
* Hadoop Fundamentals - Big Data University

== مقالات پژوهشی ==
* NoSQL : A Distributed Solution of Big Data - 2014 - International Conference on New Innovations in Information Techonology, Tehran, Iran
* Mining Unstructured Data - 2015 - International Conference on Software and Electronic Engineering, Tehran, Iran

== حوزه های تحقیقاتی ==
* [[داده هوشمند]]
* [[رایانش ابری]]
* [[رایانش فراگیر]]
* [[تجارت الکترونیک]]
* [[کلان داده]]
* [[هوش تجاری]]
* [[هدوپ]]

== لینک های مرتبط ==
* [http://hadoop.ir مرجع هدوپ ایران]
* [http://mobinranjbar.com سایت شخصی]
* [http://bigdatawatcher.com مجله سه زبانه دیده بان کلان داده]
* [http://barnamenevis.org/forumdisplay.php?203-NoSQL بخش پایگاه های داده ای غیر رابطه ای انجمن برنامه نویس]
* [http://github.com/MobinRanjbar حساب کاربری در گیت هاب - مشارکت های انجام شده]
* [http://www.telewebion.com/fa/1283029/%DA%A9%D9%84%D8%A7%D9%86-%D8%AF%D8%A7%D8%AF%D9%87%E2%80%8C%D9%87%D8%A7-%D9%88-%DA%A9%D8%A7%D8%B1%D8%A8%D8%B1%D8%AF%D9%87%D8%A7%DB%8C-%D8%A2%D9%86/%DA%A9%D8%A7%D9%81%D9%87-%D9%81%D9%86%D8%A7%D9%88%D8%B1%DB%8C.html ویدیو حضور در برنامه کافه فناوری شبکه چهار - با موضوع داده های کلان]

مبین رنجبر

2015-09-15T07:47:53Z

Mobinranjbar:

{{#widget:LinkedIn Profile
|profile=http://www.linkedin.com/in/mobinranjbar
|name=Mobin Ranjbar
|norelated
}}

== معرفی ==
* دانشجوی کارشناسی ارشد مهندسی نرم افزار
* موسس و مدیرعامل شرکت مهندسی تکنولوژی فرافکر(مجری پروژه های داده های کلان در ایران)
* موسس مرجع هدوپ ایران (ارائه سرویس های ابری مبتنی بر هدوپ و تولید محتوای پارسی)
* موسس مجله سه زبانه دیده بان کلان داده
* مشارکت کننده در پروژه های Cloudera Hue و Apache Hadoop
* مدیر بخش پایگاه های داده ای غیررابطه ای یا NoSQL انجمن برنامه نویس

== مدارک کسب شده ==
* MongoDB for DBAs Certificate = 10gen Inc.
* Hadoop Essentials - MapR Academy
* Hadoop Fundamentals - Big Data University

== مقالات پژوهشی ==
* NoSQL : A Distributed Solution of Big Data - 2014 - International Conference on New Innovations in Information Techonology, Tehran, Iran
* Mining Unstructured Data - 2015 - International Conference on Software and Electronic Engineering, Tehran, Iran

== حوزه های تحقیقاتی ==
* [[داده هوشمند]]
* [[رایانش ابری]]
* [[رایانش فراگیر]]
* [[تجارت الکترونیک]]
* [[کلان داده]]
* [[هوش تجاری]]
* [[هدوپ]]

== لینک های مرتبط ==
* [http://hadoop.ir مرجع هدوپ ایران]
* [http://mobinranjbar.com سایت شخصی]
* [http://bigdatawatcher.com مجله سه زبانه دیده بان کلان داده]
* [http://barnamenevis.org/forumdisplay.php?203-NoSQL بخش پایگاه های داده ای غیر رابطه ای انجمن برنامه نویس]
* [http://github.com/MobinRanjbar حساب کاربری در گیت هاب - مشارکت های انجام شده]
* [http://www.telewebion.com/fa/1283029/%DA%A9%D9%84%D8%A7%D9%86-%D8%AF%D8%A7%D8%AF%D9%87%E2%80%8C%D9%87%D8%A7-%D9%88-%DA%A9%D8%A7%D8%B1%D8%A8%D8%B1%D8%AF%D9%87%D8%A7%DB%8C-%D8%A2%D9%86/%DA%A9%D8%A7%D9%81%D9%87-%D9%81%D9%86%D8%A7%D9%88%D8%B1%DB%8C.html ویدیو حضور در برنامه کافه فناوری شبکه چهار - با موضوع داده های کلان]

مبین رنجبر

2015-09-15T07:46:20Z

Mobinranjbar: صفحه‌ای جدید حاوی «{{#widget:LinkedIn Profile |profile=www.linkedin.com/in/mobinranjbar |name=Mobin Ranjbar |norelated }} == معرفی == * دانشجوی...» ایجاد کرد

{{#widget:LinkedIn Profile
|profile=www.linkedin.com/in/mobinranjbar
|name=Mobin Ranjbar
|norelated
}}

== معرفی ==
* دانشجوی کارشناسی ارشد مهندسی نرم افزار
* موسس و مدیرعامل شرکت مهندسی تکنولوژی فرافکر(مجری پروژه های داده های کلان در ایران)
* موسس مرجع هدوپ ایران (ارائه سرویس های ابری مبتنی بر هدوپ و تولید محتوای پارسی)
* موسس مجله سه زبانه دیده بان کلان داده
* مشارکت کننده در پروژه های Cloudera Hue و Apache Hadoop
* مدیر بخش پایگاه های داده ای غیررابطه ای یا NoSQL انجمن برنامه نویس

== مدارک کسب شده ==
* MongoDB for DBAs Certificate = 10gen Inc.
* Hadoop Essentials - MapR Academy
* Hadoop Fundamentals - Big Data University

== مقالات پژوهشی ==
* NoSQL : A Distributed Solution of Big Data - 2014 - International Conference on New Innovations in Information Techonology, Tehran, Iran
* Mining Unstructured Data - 2015 - International Conference on Software and Electronic Engineering, Tehran, Iran

== حوزه های تحقیقاتی ==
* [[داده هوشمند]]
* [[رایانش ابری]]
* [[رایانش فراگیر]]
* [[تجارت الکترونیک]]
* [[کلان داده]]
* [[هوش تجاری]]
* [[هدوپ]]

== لینک های مرتبط ==
* [http://hadoop.ir مرجع هدوپ ایران]
* [http://mobinranjbar.com سایت شخصی]
* [http://bigdatawatcher.com مجله سه زبانه دیده بان کلان داده]
* [http://barnamenevis.org/forumdisplay.php?203-NoSQL بخش پایگاه های داده ای غیر رابطه ای انجمن برنامه نویس]
* [http://github.com/MobinRanjbar حساب کاربری در گیت هاب - مشارکت های انجام شده]
* [http://www.telewebion.com/fa/1283029/%DA%A9%D9%84%D8%A7%D9%86-%D8%AF%D8%A7%D8%AF%D9%87%E2%80%8C%D9%87%D8%A7-%D9%88-%DA%A9%D8%A7%D8%B1%D8%A8%D8%B1%D8%AF%D9%87%D8%A7%DB%8C-%D8%A2%D9%86/%DA%A9%D8%A7%D9%81%D9%87-%D9%81%D9%86%D8%A7%D9%88%D8%B1%DB%8C.html ویدیو حضور در برنامه کافه فناوری شبکه چهار - با موضوع داده های کلان]

کارگروه ها:BigData

2015-09-15T07:26:27Z

Mobinranjbar: /* اعضای کارگروه */

فعالیت این کارگروه بررسی روش های پیاده سازی [[کلان داده]] و یا همان [[BigData]] است. اعضای این کارگروه به بررسی و پیاده سازی پروژه های مبتنی بر [[کلان داده]] می پردازند.

فعالیت های این کارگروه بر اساس نظر و مشارکت خود افراد فعال در جامعه و کارگروه انجام میشود و این فعالیت ها بصورت عمومی و آزاد انجام میشود.

'''بنابراین''' اگر فکر میکنید کار دیگری باید در این کارگروه انجام شود، میتوانید مستقیما اقدام کنید، در صفحه [[بحث:کارگروه ها:BigData| بحث]] نظر خود را مطرح کنید، مطالب مورد نیاز را اضافه کنید، مطالب موجود را اصلاح کنید، به بورد عمومی کارگروه مراجعه کنید، در جلسات حضوری جامعه شرکت کنید، اسم خود را به قسمت اعضا اضافه کنید و ...

== اعضای کارگروه ==
در حال حاضر اعضای این کار گروه عبارتند از:

* [[مرتضی سرگلزایی جوان]]
* [[امید کرمی]]
* [[وحید امیری]]
* [[امید یوسفیان]]
* [[میثم آقا احمدی]]
* [[احسان بنی هاشم]]
* [[میلاد محمدی زیوه]]
* [[بهروز حسینی]]
* [[حمید رضا قوامی]]
* [[بامداد وفائی]]
* [[معصومه رضائی جم]]
* [[زهره گلی]]
* [[عطاالله فخاری]]
* [[ فاطمه سادات کریمی ]]
* [[ مبین رنجبر ]]

== فعالیت ها ==
* مقاله [[کلان داده]]
* مقاله [[مجازی سازی داده]]
* مقاله [[Smart Data]]
* [[برنامه ریزی در حوزه کلان داده]]
* [[فرم های نظرسنجی مرتبط با کلان داده]]
* بررسی [[چالش واقعی سازمانها در رابطه با کلان داده ها و بررسی دقیقتر مدلهای کلان داده]]
* [[پیاده سازی سیستم های اطلاعاتی با حجم دیتای بالا و پراکندگی جغرافیایی بر بستر ابر]]
* [[ارائه_راهکارهایی_جهت_رفع_مشکل_پراکندگی_جغرافیایی|ارائه راهکارهایی جهت رفع مشکل پراکندگی جغرافیایی]]
* [[مستند سازی همایش کلان داده دی ۱۳۹۳]]

== جلسات کارگروه ==
'''شرکت در جلسات و مشارکت در کارگروه برای عمومی آزاد است.'''
صورتجلسات این کارگروه در این بخش مستند میشود.

* [[کارگروه کلان داده:جلسه هفتم]] − 29 اردیبهشت 94
* [[کارگروه کلان داده:جلسه ششم]] − 9 آذر 93
* [[کارگروه کلان داده:جلسه پنجم]] - 28 مهر 93
* [[کارگروه کلان داده: جلسه چهارم]] - 18 شهریور 93
* [[جلسه_شانزدهم_جامعه_آزاد_رایانش_ابری_ایران| کارگروه کلان داده:جلسه سوم]] - 21 مرداد 93
* [[کارگروه کلان داده:جلسه دوم]] - 24 تیر 93
* [[کارگروه کلان داده:جلسه اول]] - 3 تیر 93
* [[الگو:کارگروه کلان داده:قالب صفحه جلسات]]

== لینک های مرتبط ==

* [https://trello.com/b/FCAfB1Qc/occc-bigdata بورد مربوط به کارگروه کلان داده]
* [https://trello.com/occc_board بورد اطلاع رسانی و هماهنگی جامعه آزاد رایانش ابری ایران]
* [http://occc.ir/index.php/2014-04-27-19-44-41/meetingsarchive آرشیو جلسات عمومی جامعه آزاد رایانش ابری ایران]
* [http://occc.ir/index.php/2014-04-27-19-44-41/location زمان و مکان جلسات عمومی جامعه آزاد رایانش ابری ایران]
* [[کارگروه ها| کارگروه های جامعه آزاد رایانش ابری ایران]]
* [http://www.bigdata.ir/ پردازش و مهندسی داده]