Hadoop 初学者指南 - 如何设置开发环境

引言

开发者可以使用不同的编程语言来编写 Hadoop 程序。由于 Hadoop 本身是用 Java 开发的，我更喜欢 Java 作为 Hadoop 编程语言，并使用 NetBeans 作为 IDE。在本文中，我将向您展示如何在 Ubuntu 16.04 操作系统上安装 NetBeans，并配置它以用 Java 编写 Hadoop 程序。

背景

我希望您已经阅读了我的相关文章

• 初学者指南 - 大数据和 Hadoop 简介
• Hadoop 初学者指南 - 如何安装

安装 NetBeans IDE 8.2

以下是步骤：

• 在此处下载 NetBeans IDE 8.2 here

https://netbeans.org/downloads/

您可以选择仅 Java SE 或选择“全部”，然后稍后自定义安装程序。我下载了所有组件。

• 默认情况下，安装程序将被下载到您的下载文件夹。
• 按 Ctrl+Alt+T 打开终端。
• 执行以下命令转到下载文件夹

  cd Downloads/

• 运行以下命令使安装程序可执行

  chmod +x <DOWNLOADED FILE NAME>

  以我为例

  chmod +x netbeans-8.2-linux.sh

• 运行以下命令启动安装程序

  ./<DOWNLOADED FILE NAME>

  以我为例

  ./netbeans-8.2-linux.sh

• 这是上面所有命令的截图

  

• 这将启动安装程序。

  

• 点击“自定义”以选择您要安装的组件。

  

• 选择组件并点击 OK 按钮。

  

• 点击 下一步。接受条款并点击 下一步 按钮。
• 找到 JDK 路径。以我为例，它是“/usr/lib/jvm/java-8-openjdk-amd64”。如果您没有安装 JDK，可以按照我的前一篇文章来安装它。这是如何检查 JDK 是否已安装
  • 运行以下命令

    java -version
    javac -version

  • 这将显示 JDK 的版本。类似于此

    

  • 如果您已安装 JDK 并想知道它位于何处，请运行以下命令

    update-alternatives --config java

  • 这将显示 JDK 的路径。
• 复制路径并在下面的屏幕上设置它

  

• 点击“下一步”按钮。选择“检查更新”并点击“安装”按钮。

  

• 这将开始安装 NetBeans IDE 8.2。

准备好 NetBeans 用于 Hadoop 编程

• 启动 NetBeans IDE。
• 从 文件-->新建项目 菜单或按 Alt+F+W 创建一个新项目。
• 从以下屏幕中选择“Java 应用程序”作为项目类型，然后单击 下一步 按钮

  

• 输入项目名称并点击 完成。

  

• 在左侧的项目资源管理器中，右键单击 库 并单击“添加 JAR/文件夹”
• 从这个位置添加“hadoop-common-2.7.3.jar”文件。该位置在您的安装中可能有所不同。您必须浏览 Hadoop 的安装位置，然后进入“share/hadoop/common”目录。以我为例

• /home/fazlur/hadoop-2.7.3/share/hadoop/common/hadoop-common-2.7.3.jar

  

• 从“share/hadoop/mapreduce/”目录中添加“hadoop-mapreduce-client-app-2.7.3.jar”、“hadoop-mapreduce-client-common-2.7.3.jar”和“hadoop-mapreduce-client-core-2.7.3.jar”文件。按 Ctrl 并单击文件以选择多个文件。

  

• 它最后看起来像这样

  

结论

希望您喜欢阅读我的文章，并为 Hadoop 编程获得一个成功的环境。在我的后续文章中，我将解释 Hadoop 的不同组件以及如何编程。

感谢您阅读我的文章，并保持联系。

历史

• 2017 年 2 月 14 日：初始版本