1. 安裝Java環境
首先，確保你的linux系統上已經安裝了Java Development Kit (JDK)。可以通過以下命令檢查Java是否已經安裝：
java -version
如果Java未安裝，根據你的Linux發行版進行安裝。例如，在基于debian的系統上，可以使用以下命令安裝OpenJDK：
sudo apt-get update sudo apt-get install openjdk-8-jdk
2. 下載并解壓Hadoop
從apache Hadoop官方網站下載你需要的Hadoop版本的安裝包，然后將其解壓到一個目錄中。例如：
wget https://downloads.apache.org/hadoop/common/hadoop-3.3.0/hadoop-3.3.0.tar.gz tar -xzvf hadoop-3.3.0.tar.gz
3. 配置Hadoop環境變量
編輯用戶的.bashrc文件，添加以下內容：
export HADOOP_HOME=/path/to/hadoop-3.3.0 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
將 /path/to/hadoop-3.3.0 替換為實際的Hadoop解壓路徑。然后運行以下命令使配置生效：
source ~/.bashrc
4. 配置Hadoop集群
編輯Hadoop配置文件，主要位于 HADOOP_HOME/etc/hadoop 目錄下。需要配置以下配置文件：
- core-site.xml：配置Hadoop的核心參數，如文件系統和數據節點等。
- hdfs-site.xml：配置HDFS相關的參數，如副本數量和數據塊大小等。
- mapred-site.xml：配置mapreduce相關的參數，如任務調度器和任務最大嘗試次數等。
示例配置如下：
core-site.xml:
<configuration><property><name>fs.defaultFS</name><value>hdfs://localhost:9000</value></property></configuration>
hdfs-site.xml:
<configuration><property><name>dfs.replication</name><value>3</value></property><property><name>dfs.blocksize</name><value>128m</value></property></configuration>
mapred-site.xml:
<configuration><property><name>mapreduce.framework.name</name><value>yarn</value></property><property><name>mapreduce.map.memory.mb</name><value>1024</value></property><property><name>mapreduce.reduce.memory.mb</name><value>2048</value></property></configuration>
5. 格式化HDFS
在終端中運行以下命令初始化HDFS文件系統：
hdfs namenode -format
6. 啟動Hadoop集群
使用以下命令啟動Hadoop集群：
start-dfs.sh start-yarn.sh
7. 驗證Hadoop集群狀態
使用以下命令檢查Hadoop集群的運行狀態：
jps
如果成功啟動，應該可以看到NameNode、DataNode、ResourceManager和NodeManager等進程。
8. 運行MapReduce作業
編寫一個MapReduce程序，然后使用以下命令提交作業：
hadoop jar /path/to/your/mapreduce-job.jar YourMainClass input_path output_path
將 /path/to/your/mapreduce-job.jar 替換為實際的MapReduce程序JAR文件路徑，YourMainClass 替換為主類名，input_path 和 output_path 分別替換為輸入和輸出路徑。
9. 監控任務運行
使用Hadoop自帶的Web界面或命令行工具來監控任務的運行情況，可以查看任務的進度、日志等信息。
10. 停止Hadoop集群
要停止Hadoop并關閉所有組件，請執行以下命令：
stop-dfs.sh stop-yarn.sh
或者，根據需要單獨停止每個組件。
以上步驟是在Linux命令行下啟動和停止Hadoop的基本方法。根據你的具體需求，可能還需要進行其他的配置和操作。請查閱Hadoop官方文檔以了解更多詳細信息。
