Apache Hadoop

এ এ্যাপাচি Hadoop এ প্রাথমিকভাবে ইয়াহু দ্বারা উন্নত ছিল এবং প্রকল্পের পূর্ববর্তী এ্যাপাচি Hadoop এর কোর এবং Apache Hadoop এর কমন Repos মধ্যে একটি সমন্বয়. '

ঢাকা Hadoop এর প্রকল্প তথ্য বিপুল পরিমাণে পরিচালনা করার জন্য একটি মাল্টি সার্ভার ডিস্ট্রিবিউটেড কম্পিউটিং সিস্টেম বাস্তবায়নে তার ভালো ফলাফল করার জন্য কুখ্যাতি ধন্যবাদ অনেক অর্জন করেছে. '

ঢাকা প্রকল্প নিজেই আসলে চার অংশ তৈরি করা হয়. এক Hadoop এর প্রচলিত তথাকথিত কোর সব অন্যান্য মডিউল কাজ করতে সক্ষম হবেন যে, দ্বিতীয় তার খুব নিজের ফাইলসিস্টেম হয় - HDFS (Hadoop ডিসট্রিবিউটেড ফাইল সিস্টেম), তৃতীয় Hadoop এর সুতো সিডিউলিং কাঠামো, এবং শেষপর্যন্ত Hadoop MapReduce সিস্টেম সমান্তরাল কম্পিউটিং সমর্থনের জন্য. '

ঢাকা এই স্থল ভঙ্গ সিস্টেম ব্যবহার করা, এ্যাপাচি অনেক ওপারে প্রকল্পের মত মানুষও পুনরায় সৃষ্টি করতে সক্ষম হয়েছে

- এ্যাপাচি Ambari?

ঢাকা - এ্যাপাচি অভ্র?

ঢাকা - এ্যাপাচি কাসান্দ্রা?

ঢাকা - এ্যাপাচি HBase?

ঢাকা - এ্যাপাচি মধুচক্র?

ঢাকা - এ্যাপাচি মাহুত?

ঢাকা - এ্যাপাচি পিগ?

ঢাকা - এ্যাপাচি স্পার্ক '

ঢাকা - এ্যাপাচি Tez?

ঢাকা - এ্যাপাচি ZooKeeper করুন

ঢাকা এই সমস্ত Hadoop এর শক্তিশালী ডাটা প্রসেসিং ইঞ্জিন বা তার ডিস্ট্রিবিউটেড কম্পিউটিং বৈশিষ্ট্য উপর নির্ভর করে, তাদের কোর এর একটি উপায় বা অন্য মধ্যে তার মডিউল এক একীভূত. '

নতুন এই রিলিজে:

• সংগ্রহশালার সংগ্রহস্থল জন্য সমর্থন করুন

<লি> বাকি এনক্রিপশন এ স্বচ্ছ তথ্য (বিটা) করুন
<লি> root- র অধিকারপ্রাপ্ত প্রয়োজন ছাড়া অপারেটিং নিরাপদ DataNode করুন
<লি> গরম ও swap 'র ড্রাইভ: সমর্থন / সংযোজন করুন নোড (বিটা) পুনরায় ডাটা নোড ভলিউম অপসারণ করুন
<লি> দ্রুত টেলিগ্রাম এনক্রিপশনের AES অপশনটি সমর্থন করে
<লি> সুতা দীর্ঘ চলমান সেবা জন্য সমর্থন করুন
<লি> সময় নির্ধারণের করুন সময় সমর্থন নোড লেবেল
<লি> ক্যাপাসিটি পরিকল্পনাকারী সময় ভিত্তিক রিসোর্স জন্য সাপোর্ট (বিটা) করুন
<লি> গ্লোবাল, আবেদন হস্তনির্মিত জন্য ভাগ ক্যাশে (বিটা) করুন
<লি> Docker মধ্যে নেটিভ অ্যাপ্লিকেশন সাপোর্ট চলমান পাত্রে (আলফা) করুন


নতুন সংস্করণ 2.7.1

• সংগ্রহশালার সংগ্রহস্থল জন্য সমর্থন করুন

<লি> বাকি এনক্রিপশন এ স্বচ্ছ তথ্য (বিটা) করুন
<লি> root- র অধিকারপ্রাপ্ত প্রয়োজন ছাড়া অপারেটিং নিরাপদ DataNode করুন
<লি> গরম ও swap 'র ড্রাইভ: সমর্থন / সংযোজন করুন নোড (বিটা) পুনরায় ডাটা নোড ভলিউম অপসারণ করুন
<লি> দ্রুত টেলিগ্রাম এনক্রিপশনের AES অপশনটি সমর্থন করে
<লি> সুতা দীর্ঘ চলমান সেবা জন্য সমর্থন করুন
<লি> সময় নির্ধারণের করুন সময় সমর্থন নোড লেবেল
<লি> ক্যাপাসিটি পরিকল্পনাকারী সময় ভিত্তিক রিসোর্স জন্য সাপোর্ট (বিটা) করুন
<লি> গ্লোবাল, আবেদন হস্তনির্মিত জন্য ভাগ ক্যাশে (বিটা) করুন
<লি> Docker মধ্যে নেটিভ অ্যাপ্লিকেশন সাপোর্ট চলমান পাত্রে (আলফা) করুন


নতুন সংস্করণ 2.7.0

• সংগ্রহশালার সংগ্রহস্থল জন্য সমর্থন করুন

<লি> বাকি এনক্রিপশন এ স্বচ্ছ তথ্য (বিটা) করুন
<লি> root- র অধিকারপ্রাপ্ত প্রয়োজন ছাড়া অপারেটিং নিরাপদ DataNode করুন
<লি> গরম ও swap 'র ড্রাইভ: সমর্থন / সংযোজন করুন নোড (বিটা) পুনরায় ডাটা নোড ভলিউম অপসারণ করুন
<লি> দ্রুত টেলিগ্রাম এনক্রিপশনের AES অপশনটি সমর্থন করে
<লি> সুতা দীর্ঘ চলমান সেবা জন্য সমর্থন করুন
<লি> সময় নির্ধারণের করুন সময় সমর্থন নোড লেবেল
<লি> ক্যাপাসিটি পরিকল্পনাকারী সময় ভিত্তিক রিসোর্স জন্য সাপোর্ট (বিটা) করুন
<লি> গ্লোবাল, আবেদন হস্তনির্মিত জন্য ভাগ ক্যাশে (বিটা) করুন
<লি> Docker মধ্যে নেটিভ অ্যাপ্লিকেশন সাপোর্ট চলমান পাত্রে (আলফা) করুন


নতুন সংস্করণ 2.6.0

• সংগ্রহশালার সংগ্রহস্থল জন্য সমর্থন করুন

<লি> বাকি এনক্রিপশন এ স্বচ্ছ তথ্য (বিটা) করুন
<লি> root- র অধিকারপ্রাপ্ত প্রয়োজন ছাড়া অপারেটিং নিরাপদ DataNode করুন
<লি> গরম ও swap 'র ড্রাইভ: সমর্থন / সংযোজন করুন নোড (বিটা) পুনরায় ডাটা নোড ভলিউম অপসারণ করুন
<লি> দ্রুত টেলিগ্রাম এনক্রিপশনের AES অপশনটি সমর্থন করে
<লি> সুতা দীর্ঘ চলমান সেবা জন্য সমর্থন করুন
<লি> সময় নির্ধারণের করুন সময় সমর্থন নোড লেবেল
<লি> ক্যাপাসিটি পরিকল্পনাকারী সময় ভিত্তিক রিসোর্স জন্য সাপোর্ট (বিটা) করুন
<লি> গ্লোবাল, আবেদন হস্তনির্মিত জন্য ভাগ ক্যাশে (বিটা) করুন
<লি> Docker মধ্যে নেটিভ অ্যাপ্লিকেশন সাপোর্ট চলমান পাত্রে (আলফা) করুন


সংস্করণ 2.5.0 নতুন .

• প্রমাণীকরণ উন্নতি যখন একটি HTTP প্রক্সি সার্ভার ব্যবহার
• নতুন Hadoop এর মেট্রিক্স বেসিনে যে সরাসরি গ্রাফাইট লিখিতভাবে পারবেন.

<লি> Hadoop সমঞ্জসে ফাইলসিস্টেম প্রচেষ্টার জন্য স্পেসিফিকেশন.
<লি> POSIX স্টাইলের ফাইলসিস্টেম এক্সটেন্ডেড বৈশিষ্ট্যের জন্য সমর্থন.
<লি> OfflineImageViewer WebHDFS API- এর মাধ্যমে একটি fsimage ব্রাউজ করুন.
<লি> সমর্থনব্যবস্থা উন্নতি এবং NFS গেটওয়েতে বাগ সংশোধন করা হয়েছে.
<লি> আধুনিক ওয়েব UI গুলির (HTML5 এর জাভাস্ক্রিপ্ট) HDFS ডেমনের জন্য.
<লি> সুতো বিশ্রাম এপিআই সমর্থন জমা এবং অ্যাপ্লিকেশন প্রাণনাশ.
<লি> সুতো এর টাইমলাইন দোকান জন্য কার্বারোস ইন্টিগ্রেশন.


সংস্করণ 2.4.0 নতুন

• অ্যাক্সেস কন্ট্রোল জন্য সমর্থন HDFS মধ্যে তালিকাসমূহ করুন

<লি> HDFS মধ্যে ঘূর্ণায়মান আপগ্রেড জন্য দেশীয় সমর্থন করুন
<লি> মসৃণ কর্মক্ষম আপগ্রেডের HDFS FSImage জন্য প্রোটোকল-বাফার ব্যবহার করুন
<লি> HDFS সম্পূর্ণ HTTPS দ্বারা সমর্থন করুন
<লি> সুতো ResourceManager স্বয়ংক্রিয় ফেইলওভার জন্য সমর্থন করুন
<লি> অ্যাপ্লিকেশন ইতিহাস সার্ভার এবং অ্যাপ্লিকেশন সময়রেখা সার্ভার সুতা নতুন অ্যাপ্লিকেশনের জন্য উন্নত সমর্থন
<লি> সংশোধিত মাধ্যমে সুতো CapacityScheduler শক্তিশালী SLAs জন্য সমর্থন করুন


সংস্করণ 2.3.0 নতুন .

• HDFS মধ্যে ভিন্নধর্মী সংগ্রহস্থল অনুক্রমের জন্য সাপোর্ট
  <লি> কেন্দ্রীভূত প্রশাসন এবং পরিচালনার সঙ্গে HDFS ডেটা জন্য ইন-মেমোরি ক্যাশে.

<লি> সুতো ডিসট্রিবিউটেড ক্যাশে মধ্যে HDFS মাধ্যমে MapReduce বাইনারি ফাইলগুলির সরলীকৃত বন্টন.


আপনি কি নতুন সংস্করণ 2.2.0

• সুতো - একটি সাধারণ উদ্দেশ্য সম্পদ ব্যবস্থাপনা Hadoop এর জন্য সিস্টেম MapReduce এবং অন্যান্য অন্যান্য ডাটা প্রসেসিং অবকাঠামো ও সেবা করার জন্য করুন

<লি> HDFS জন্য উচ্চ উপলব্ধতা করুন
<লি> HDFS ফেডারেশন করুন
<লি> HDFS স্ন্যাপশট করুন
<লি> HDFS ডেটা NFSv3 এক্সেস করুন


সংস্করণ 2.1.0-বিটা নতুন

• HDFS স্ন্যাপশট করুন

<লি> মাইক্রোসফট উইন্ডোজে Hadoop এর চলমান জন্য সমর্থন করুন
<লি> সুতো এপিআই স্থিতিশীল করুন


সংস্করণ 2.0.3-আলফা নতুন

• NameNode জন্য HDFS HA ​​<জন্য QJM / লি>
  <লি> মাল্টি-রিসোর্স পূর্বপরিকল্পনা সুতো জন্য (CPU ও মেমরি) করুন

<লি> সুতো ResourceManager পুনরারম্ভ করুন
<লি> সুতো জন্য মাত্রায় উল্লেখযোগ্য স্থায়িত্ব (30,000 নোড এবং 14 মিলিয়ন অ্যাপ্লিকেশন এতদূর, মুক্তির সময়) করুন


সংস্করণ 1.0.0 নতুন .

• উন্নত নিরাপত্তা করুন

<লি> HBase (লিখবেন / hsynch / hflush, এবং নিরাপত্তা).
<লি> webhdfs (নিরাপত্তার জন্য পূর্ণ সমর্থন দিয়ে).
<লি> HBase জন্য স্থানীয় ফাইলগুলিতে পারফরমেন্স উন্নত এক্সেস.
• অন্য পারফরমেন্স উন্নতি, বাগ সংশোধন করা হয়েছে, এবং বৈশিষ্ট্য.



নতুন সংস্করণ 0.20.2

• আরপিসি সার্ভার সেন্ড বাফার অপরিবর্তিত বৃহত্তম প্রতিক্রিয়া আকার কি প্রেরিত.

<লি> সি ++ লাইব্রেরি ডেবিয়ান লেনি উপর নির্মাণ না.
<লি> কিছু C ++ স্ক্রিপ্ট পিপীলিকা সঞ্চালনের পূর্বে chmodded নেই.
<লি> স্ট্রীমিং:. প্রক্রিয়া উপলব্ধ অবস্থা বার্তা প্রতি 10 seoncds ওভাররাইট হয়
<লি> IllegalArgumentException যখন CombineFileInputFormat কাজ InputFormat হিসাবে ব্যবহার করা হয়.
<লি> একাধিক বাগ W / Hadoop এর আর্কাইভ.
<লি> ফাইলসিস্টেম ইনস্ট্যান্সের ক্যাশে প্রতি উদাহরণস্বরূপ ভিত্তিতে এটি নিষ্ক্রিয় করা যেতে করার অনুমতি দিন.
<লি> Configuration.addResource মধ্যে defaultResources জন্য সুসংগতি নিখোঁজ.
<লি> GzipCodec decompressorType যেমন BuiltInZlibInflater প্রতিনিধিত্ব করা উচিত নয়.
<লি> NameNode এর HttpServer InetSocketAddress instantiate করতে পারবেন না: IllegalArgumentException নিক্ষিপ্ত হয় .
<লি> HttpServer নেতিবাচক মূল্যবোধের সাথে ঘুমায়.
<লি> Namenode IPC সার্ভার মেমরি লিক হওয়ার কারণে মেমরি আউট সঞ্চালিত হয়.
<লি> আইপিসি ক্লায়েন্ট বাগ RPC কল স্তব্ধ হতে পারে.
<লি> ব্যর্থ পরীক্ষা মৃত্যুদন্ড থেকে পরীক্ষা লক্ষ্যমাত্রা বাকি প্রতিরোধ.
<লি> contrib পরীক্ষার Clover'ed নির্মাণের ব্যর্থ হয়.
<লি> টেস্ট 0.20 শাখা চালানো না.
<লি> TestStreamingStatus 0.20 ডালে ব্যর্থ হয়.

10 Feb 16 মধ্যে উন্নয়ন সরঞ্জাম স্ক্রিপ্ট