怎麼在ubantu裏面安裝偽分佈式Hadoop?
工具/材料
64位Ubuntu LTS 14.04
VMware 最新版本
操作方法
第一步創建Hadoop用户。
第二步,註銷並使用 Hadoop 用户登錄,接下來更新 apt 並且安裝 vim。
安裝上ssh,配置為無密碼登錄
安裝java的環境。
sudo apt-get install openjdk-7-jre openjdk-7-jdk
vim ~/rc # 設置JAVA_HOME
在配資文件中添加。
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
JAVA_HOME 變量生效:
source ~/rc
安裝 Hadoop :
cd ~/下載
sudo tar -zxvf ./ -C /usr/local # 解壓到/usr/local中
cd /usr/local/
sudo mv ./hadoop-2.6.0/ ./hadoop # 將文件夾名改為hadoop
sudo chown -R hadoop ./hadoop
修改配置文件 :
vim /usr/local/hadoop/etc/hadoop/
<configuration>
<property>
<name></name>
<value>file:/usr/local/hadoop/tmp</value>
<description>Abase for other temporary directories.</description>
</property>
<property>
<name>ultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
修改配置文件
<configuration>
<property>
<name>ication</name>
<value>1</value>
</property>
<property>
<name></name>
<value>file:/usr/local/hadoop/tmp/dfs/name</value>
</property>
<property>
<name></name>
<value>file:/usr/local/hadoop/tmp/dfs/data</value>
</property>
</configuration>
啟動好Hadoop。
cd /usr/local/hadoop
bin/hdfs namenode -format # namenode 格式化
sbin/ # 開啟守護進程
jps
若成功啟動則會列出如下進程: NameNode、DataNode和SecondaryNameNode。
運行 WordCount 實例。測試一下。
bin/hdfs dfs -mkdir -p /user/hadoop # 創建HDFS目錄
bin/hdfs dfs -mkdir input
bin/hdfs dfs -put etc/hadoop/* input # 將配置文件作為輸入
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-* grep input output 'dfs[a-z.]+'
bin/hdfs dfs -cat output/* # 查看輸出
特別提示
此處安裝之前,一定是先安裝好安裝好java環境,否則hadoop將會測試不成功。覺得行的同志打賞下哦,謝謝。
-
微博與博客到底是什麼?幹什麼用的
微博與博客到底是什麼,它們主要是用來做什麼,讓小編來給你普及指南。操作方法(01)微博和博客都是用户用來發表文章的一個平台系統,通過自我內容的發佈與其他網絡用户形成互動交流。(02)微博可以看做是小型的博客,文字輸入量被限制在140字。這是微博最大的特點。另外微...
-
蘋果電腦怎麼切換windows系統
相信很多使用蘋果電腦的用户都安裝了MacOSX與Windows雙系統,雖然MacOSX系統非常好用,但有時候某些特定軟件需要Windows系統來運行,現在就來教教大家蘋果電腦怎麼切換windows系統。操作方法(01)開機選擇默認啟動系統。①開機後按住【Option】直到出現系統選擇界面時...
-
webstorm有什麼吸引開發者的特性功能?
webstorm是一個前端開發工具,相對眾多的開發工具,webstorm有什麼吸引開發者的特性功能?下面一起來看下。操作方法(01)相對於其它開發工具,webstorm是專為前端而生的。對HTML元素,在代碼上有屬性提示,如圖,我們在寫一個P元素後,打上一個空格後,就會彈出P所有支持的HTML屬性...
-
佳能單反鏡頭如何清潔
很多人都擁有自己的單反相機,經常帶着它出門各種拍攝,可用一陣後發現鏡頭變的有些髒,這個時候要怎麼清潔?這裏介紹用清潔套裝清潔,可以去攝影器材店或者網上購買一套,有專業的清潔工具才能事半功倍,這裏簡單介紹清潔過程,有興趣的可以看看。操作方法(01)準備主要的清潔工...