Apache Bigtop和Hadoop

时间:2020-02-23 14:33:25  来源:igfitidea点击:

为开始Hadoop,这里有关于如何在我们自己的笔记本电脑上快速下载和设置Hadoop的说明。
群集将在虚拟机上以伪分布式模式运行,因此我们不需要特殊的硬件。

虚拟机(VM)是一个模拟计算机,我们可以在真实计算机上运行。
例如,我们可以在笔记本电脑上运行一个程序,该程序"播放"VM,它打开一个看起来像运行另一台计算机的窗口。
实际上,假装计算机正在真实计算机内运行。

我们将正在下载VM,在运行它时,我们将安装Hadoop。

Apache Bigtop如果我们想组装自己的Hadoop组件,这是一个很棒的替代方案。
BIGTOP为我们提供核心Hadoop组件,并确保配置工作。
Apache Bigtop是100%的开源分发。

Bigtop的主要目标 - 本身就像Hadoop一样,是Apache项目,就像Hadoop一样,是在Apache Hadoop生态系统中构建一个围绕包装,部署和项目集成的社区。
重点是整个系统而不是单个项目。

使用BIGTOP,我们可以轻松安装和部署Hadoop组件,而无需在特定的分发中跟踪它们,并将其与特定Hadoop版本匹配。
随着新版本的Hadoop组件被释放,它们有时不适用于其他项目的最新版本。
如果我们自己自己,则需要进行重大测试。

使用BIGTOP(或者商业Hadoop发布),我们可以信赖Hadoop专家对我们进行了此测试。
要为我们了解广泛的Bigtop,请参阅Bigtop中包含的所有组件的以下列表:

  • Apache Crunch

  • Apache Flume

  • Apache Giraph

  • Apache HBase

  • Apache HCatalog

  • Apache Hive

  • Apache Mahout

  • Apache Oozie

  • Apache Pig

  • Apache Solr

  • Apache Sqoop

  • Apache Whirr

  • Apache Zookeeper

  • Cloudera Hue

  • LinkedIn DataFu

这种Hadoop生态系统项目的集合如此广泛,因为包括两个主要和次要项目。
Apache Bigtop正在不断发展。