হাদুপ, যেমনটি আমরা সবাই জানি বড় ডেটার পোস্টার বয়। একটি সফ্টওয়্যার ফ্রেমওয়ার্ক হিসাবে ডেটার হাতি অনুপাত প্রক্রিয়াকরণ করতে সক্ষম হ্যাডোপ সিআইও বুজওয়ার্ড তালিকার শীর্ষে পৌঁছেছে।
যাইহোক, ইন-মেমরি স্ট্যাকের অভূতপূর্ব উত্থান বিশ্লেষণের জন্য একটি নতুন বিকল্পের সাথে বড় ডেটা ইকোসিস্টেমকে প্রবর্তন করেছে। বিশ্লেষণের মানচিত্রের উপায়টিকে নতুন পদ্ধতির দ্বারা প্রতিস্থাপন করা হচ্ছে যা হ্যাডোপ ফ্রেমওয়ার্ক এবং এর বাইরে উভয় ক্ষেত্রেই বিশ্লেষণকে মঞ্জুরি দেয়। অ্যাপাচি স্পার্ক হ'ল বিগ ডেটা অ্যানালিটিকাগুলির তাজা নতুন মুখ।
বড় ডেটা উত্সাহীরা অ্যাপাচি স্পার্ককে বিশ্বের বড় ডেটাগুলির জন্য হটেস্ট ডেটা গণনা ইঞ্জিন হিসাবে প্রত্যয়িত করেছে। এটি তাদের অবস্থানগুলি থেকে ম্যাপ্রেডিউস এবং জাভা দ্রুত বের করে দিচ্ছে এবং কাজের প্রবণতাগুলি এই পরিবর্তনটি প্রতিফলিত করছে। টাইপসেফের সমীক্ষা অনুসারে, গ্লোবাল জাভা বিকাশকারীদের %১% বর্তমানে স্পার্কের চারপাশে মূল্যায়ন বা গবেষণা করছেন এবং তাদের মধ্যে ৩৫% ইতিমধ্যে এটি ব্যবহার শুরু করেছেন। স্পার্ক বিশেষজ্ঞদের বর্তমানে চাহিদা রয়েছে, এবং অনুসরণের সপ্তাহগুলিতে স্পার্ক সম্পর্কিত কাজের সুযোগ কেবল ছাদের মধ্য দিয়ে যাওয়ার আশা করা হচ্ছে।
সুতরাং, এটি অ্যাপাচি স্পার্ক সম্পর্কে কী তা এটি প্রতিটি সিআইও-র করণীয় তালিকার শীর্ষে উপস্থিত হয়?
অ্যাপাচি স্পার্কের আকর্ষণীয় বৈশিষ্ট্যগুলির কয়েকটি এখানে:
- হাদুপ ইন্টিগ্রেশন - এইচডিএফএসে সঞ্চিত ফাইলগুলির সাথে স্পার্ক কাজ করতে পারে।
- স্পার্কের ইন্টারেক্টিভ শেল - স্পার্ক স্কালায় রচিত এবং স্কালার দোভাষীর নিজস্ব সংস্করণ রয়েছে।
- স্পার্কের অ্যানালিটিক স্যুট - স্পার্ক ইন্টারেক্টিভ ক্যোয়ারী বিশ্লেষণ, বৃহত আকারের গ্রাফ প্রসেসিং এবং বিশ্লেষণ এবং রিয়েল-টাইম বিশ্লেষণের সরঞ্জামগুলির সাথে আসে।
- স্থিতিস্থাপক বিতরণ ডেটাসেটস (আরডিডি) - আরডিডিগুলি বিতরণ করা হয় এমন বস্তুগুলি যা মেমোরির মধ্যে ক্যাশে করা যায়, কম্পিউট নোডের একটি ক্লাস্টার জুড়ে। এগুলি স্পার্কে ব্যবহৃত প্রাথমিক ডেটা অবজেক্ট।
- বিতরণ অপারেটর - ম্যাপ্রেডুস ছাড়াও আরও অনেক অপারেটর রয়েছে যাকে কেউ আরডিডি-তে ব্যবহার করতে পারেন।
নাসা, ইয়াহু, এবং অ্যাডোব এর মতো সংস্থাগুলি স্পার্কে প্রতিশ্রুতিবদ্ধ। ডেটাব্রিক্সের জন ট্রিপিয়র, জোট ও ইকোসিস্টেম লিডের কথাই এই কথাটি বলেছে, “বড় ও ছোট ব্যবসায়ের দ্বারা অ্যাপাচি স্পার্ককে গ্রহণ করা বিস্তৃত শিল্পগুলিতে অবিশ্বাস্য হারে বৃদ্ধি পাচ্ছে, এবং প্রত্যয়িত দক্ষতার বিকাশকারীদের চাহিদা দ্রুত হয় নিম্নলিখিত মামলা '। হ্যাডুপে যদি আপনার পটভূমি থাকে তবে স্পার্ক শিখার জন্য এর চেয়ে ভাল সময় আর কখনও হয়নি।
সাজানো অ্যালগরিদম সি ++
এডুরেকা অ্যাপাচি স্পার্ক এবং স্কালায় একটি বিশেষ কোর্স বিশেষভাবে সজ্জিত করেছেন, যা বাস্তবজীবনের শিল্পের অনুশীলনকারীদের দ্বারা নির্মিত co শিল্প-সম্পর্কিত প্রকল্পগুলির সাথে একটি স্বতন্ত্র লাইভ ই-লার্নিং অভিজ্ঞতার জন্য, আমাদের কোর্সটি পরীক্ষা করে দেখুন। নতুন ব্যাচ শীঘ্রই শুরু হচ্ছে, সুতরাং এখানে কোর্সটি দেখুন: ।
আমাদের জন্য একটি প্রশ্ন আছে? দয়া করে মন্তব্য বিভাগে এটি উল্লেখ করুন এবং আমরা আপনার কাছে ফিরে আসব।
সম্পর্কিত পোস্ট: