ইয়াহু আইআইটি বোম্বাইকে হডোপ ক্লাস্টার ল্যাব সেট আপ করতে সাহায্য করে

ওপেন সোর্স হডোপ সফটওয়্যার চালানোর সার্ভারগুলির একটি ক্লাস্টার দান করে মুম্বাইয়ের একটি হডোপ ক্লাস্টার ল্যাব স্থাপনের জন্য ইয়াহু ইন্ডিয়ান ইনস্টিটিউট অব টেকনোলজি বোম্বিকে সাহায্য করেছে।

আপাচি হডোপ একটি মুক্ত-উৎস বিতরণ-কম্পিউটিং প্রকল্প। আপাচি সফটওয়্যার ফাউন্ডেশন যে ইয়াহু সমর্থন করে।

ইয়াহু হুডুপ ব্যবহার করে তার বেশ কয়েকটি জটিল অপারেশন পরিচালনা করে এবং ইয়াহু ল্যাব্সের সিনিয়র ভাইস প্রেসিডেন্ট ও প্রধান প্রফাকর রাঘবানের সাথে হাইডোপের সাথে জড়িত সব গবেষণা করতে পারে না। বৃহস্পতিবার একটি টেলিফোন সাক্ষাত্কার।

ইয়াহু গত বছরের জুন মাসে হ্যাপিপের নিজস্ব বন্টন প্রকাশ করে, যা আপাচি হডোপ সম্প্রদায়ের স্বার্থের উদ্ধৃতি দিয়ে প্রকাশ করে যে এটি হডোপের সংস্করণটি প্রকাশ করে তার নিজের বড় ক্লাস্টারগুলি পরীক্ষা করে এবং সেগুলি স্থাপন করে।

ক্লাস্টার এম এ ল্যাব মুম্বই ইনস্টিটিউটের গবেষণাগারে অনুসন্ধান ও র্যাংকিং কৌশল, তথ্য নিষ্কাশন এবং প্রাকৃতিক ভাষা প্রক্রিয়াজাতকরণের ক্ষেত্রে সাহায্য করবে।

ওয়েব-সম্পর্কিত বিষয়গুলি গবেষণা করতে চাইলে একাডেমিক গবেষকগণ সাধারণত গণনীয় সম্পদ এবং টেরাবাইটে প্রবেশ করতে পারবেন না "ওয়েব-স্কেল সমস্যা" -এ গবেষণা করার জন্য প্রয়োজনীয় তথ্যগুলি "রায়হান" বলেন।

কার্নেগী মেলন বিশ্ববিদ্যালয়ে হাদ্দোপ গবেষকগণের সাথে 2007 সালে একটি 4,000-প্রসেসর সুপারকম্পিউটার দিয়ে শুরু করার মাধ্যমে ইয়াহু মার্কিন যুক্তরাষ্ট্রের অন্যান্য বিশ্ববিদ্যালয়ের হডোপ তিনি বলেন, "

" রাঘবান আইআইটিতে ইনস্টল করা ক্লাস্টারের বিষয়ে আরো বিস্তারিত জানতেন না, কেবল বলে যে শত শত CPU এবং সার্ভারে ডেটা পরিচালনার জন্য সামর্থ্য রয়েছে।

আইআইটি বোম্বে, ইয়াহুর পাশাপাশি জার্মানিতে এবং সিঙ্গাপুরে একাডেমিক প্রতিষ্ঠানের অনুরূপ ক্লাস্টার স্থাপনের সাহায্য করছে, রাঘবন বলেন। এই মার্কিন যুক্তরাষ্ট্রের বাইরের প্রথম তিনটি একাডেমিক প্রতিষ্ঠান যেখানে ইয়াহু এই ধরনের ক্লাস্টারগুলি স্থাপন করতে সাহায্য করছে। তিনি বলেন।

ইয়াহু পরবর্তীতে "বড় ইউটিলিটি" তৈরির জন্য বিশ্বের কয়েকটি ক্লাস্টারকে নেটওয়ার্ক করার পরিকল্পনা করে। এর আগে, হুডোফের ব্যবস্থাপনার দক্ষতা অন্য প্রতিষ্ঠানের কাজকে বিপর্যস্ত করে একটি প্রতিষ্ঠানকে প্রতিরোধ করার জন্য শক্তিশালী হয়ে উঠেছে, রাঘবন বলেন।

ইয়াহু ২008 সালে কম্পিউটেশনাল রিসার্চ ল্যাবরেটরিজ (সিআরএল) সহ ভারতবর্ষের একটি ল্যাব পরিচালিত করেছিল। টাটা গ্রুপ, ভারতে একাডেমিক প্রতিষ্ঠানগুলিকে বিনামূল্যে সুপারকম্পিউটিং সুবিধা প্রদানের জন্য, যা বড় স্কেল কম্পিউটিং গবেষণা করছে, বিশেষ করে হডোপের কাছাকাছি। যে সহযোগিতা চলছে, কিন্তু উচ্চ কর্মক্ষমতা সুপারকম্পিউটিং উপর নিবদ্ধ হয়, রাঘবান বলেন।

Hadoop উপর একাডেমিক প্রতিষ্ঠানের সাথে অংশীদারিত্ব ইয়াহু Hadoop প্ল্যাটফর্মের সাথে পরিচিত ইঞ্জিনিয়ারদের একটি পুল নির্মাণ, রাঘবন অনুযায়ী। তাদের কেউ কেউও ইয়াহু দ্বারা ভাড়া করা হয়েছে। তিনি বলেন।

হিউডপপের সাহায্যে গবেষণা করে আসা শিক্ষা প্রতিষ্ঠানগুলি থেকে ইয়াহুও উপকার লাভ করেছে, রাঘবন বলেন। তবে তিনি একাডেমিক প্রতিষ্ঠানের সঙ্গে এই সহযোগিতার থেকে নেওয়া হয়েছে যে ধারনা নির্দিষ্ট উদাহরণ দিতে না।