Apache Hadoop v3.0.0 is beschikbaar

De Apache Software Foundation (ASF) meldt dat Apach Hadoop v3.0.0 beschikbaar is. Dit betreft de nieuwste versie van het Open Source-softwareframework voor betrouwbare, schaalbare, gedistribueerde computing.

In het afgelopen decennium is Apache Hadoop alomtegenwoordig binnen het grotere Big Data-ecosysteem door bedrijven in staat te stellen om datatoepassingen op grote hardwareclusters in een gedistribueerde computeromgeving uit te voeren en te beheren.

Hoogtepunten van Apache Hadoop 3.0.0 zijn onder meer:

Codering van HDFS-wissen-halveert de opslagkosten van HDFS terwijl ook de duurzaamheid van gegevens wordt verbeterd;

YARN Tijdlijnservice v.2 (voorbeeld) -verbetert de schaalbaarheid, betrouwbaarheid en bruikbaarheid van de tijdlijnservice;

YARN-resourcetypes: maakt planning van extra bronnen mogelijk, zoals schijven en GPU's, voor betere integratie met machine learning en containerworkloads;

Federatie van YARN- en HDFS-subclusters schalen op transparante wijze Hadoop tot tienduizenden machines;

Opportunistische uitvoering van containers verbetert het gebruik van resources en verhoogt de taakdoorvoer voor containers met een korte levensduur. Naast de traditionele, centrale planner, ondersteunt YARN ook gedistribueerde planning van opportunistische containers; en

Verbeterde mogelijkheden en prestatieverbeteringen voor cloudopslagsystemen zoals Amazon S3 (S3Guard), Microsoft Azure Data Lake en Aliyun Object Storage System.

Hadoop 3.0.0 is al uitgebreid getest en geïntegreerd met het bredere open source-ecosysteem van The Apache Software Foundation. Met deze release promoot de community van ontwikkelaars en gebruikers deze release-reeks uit bèta.
Apache Hadoop wordt veel gebruikt bij tal van bedrijven en instellingen over de hele wereld, zoals Adobe, Alibaba, Amazon Web Services, AOL, Apple, Capital One, Cloudera, Cornell University, eBay, ESA Calvalus satellietmissie, Facebook, foursquare, Google, Hortonworks, HP , Hulu, IBM, Intel, LinkedIn, Microsoft, Netflix, The New York Times, Rackspace, Rakuten, SAP, Tencent, Teradata, Tesla Motors, Twitter, Uber en Yahoo. Het project onderhoudt een lijst met bekende gebruikers op https://wiki.apache.org/hadoop/PoweredBy

Beschikbaarheid en toezicht

Apache Hadoop-software is vrijgegeven onder de Apache-licentie v2.0 en wordt beheerd door een zelfgekozen team van actieve bijdragers aan het project. Een Project Management Committee (PMC) begeleidt de dagelijkse activiteiten van het project, inclusief community-ontwikkeling en productreleases. Voor downloads, documentatie en manieren om betrokken te raken bij Apache Hadoop, bezoek http://hadoop.apache.org/