怎麼在ubantu裏面安裝僞分佈式Hadoop?
工具/材料
64位Ubuntu LTS 14.04
VMware 最新版本
操作方法
第一步創建Hadoop用戶。
第二步,註銷並使用 Hadoop 用戶登入,接下來更新 apt 並且安裝 vim。
安裝上ssh,配置爲無密碼登入
安裝java的環境。
sudo apt-get install openjdk-7-jre openjdk-7-jdk
vim ~/rc # 設定JAVA_HOME
在配資檔案中添加。
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
JAVA_HOME 變量生效:
source ~/rc
安裝 Hadoop :
cd ~/下載
sudo tar -zxvf ./ -C /usr/local # 解壓到/usr/local中
cd /usr/local/
sudo mv ./hadoop-2.6.0/ ./hadoop # 將檔案夾名改爲hadoop
sudo chown -R hadoop ./hadoop
修改配置檔案 :
vim /usr/local/hadoop/etc/hadoop/
<configuration>
<property>
<name></name>
<value>file:/usr/local/hadoop/tmp</value>
<description>Abase for other temporary directories.</description>
</property>
<property>
<name>ultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
修改配置檔案
<configuration>
<property>
<name>ication</name>
<value>1</value>
</property>
<property>
<name></name>
<value>file:/usr/local/hadoop/tmp/dfs/name</value>
</property>
<property>
<name></name>
<value>file:/usr/local/hadoop/tmp/dfs/data</value>
</property>
</configuration>
啓動好Hadoop。
cd /usr/local/hadoop
bin/hdfs namenode -format # namenode 格式化
sbin/ # 開啓守護進程
jps
若成功啓動則會列出如下進程: NameNode、DataNode和SecondaryNameNode。
執行 WordCount 實例。測試一下。
bin/hdfs dfs -mkdir -p /user/hadoop # 創建HDFS目錄
bin/hdfs dfs -mkdir input
bin/hdfs dfs -put etc/hadoop/* input # 將配置檔案作爲輸入
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-* grep input output 'dfs[a-z.]+'
bin/hdfs dfs -cat output/* # 檢視輸出
特別提示
此處安裝之前,一定是先安裝好安裝好java環境,否則hadoop將會測試不成功。覺得行的同志打賞下哦,謝謝。
-
頭像製作之可愛的猴子
萌萌噠的猴子頭像是我們都喜歡的,也有很多人喜歡拿到它來做我們一些運用的頭像,小編對於萌萌噠的猴子頭像也是很喜愛的,那麼,我們該如何製作可愛的猴子頭像呢?小編爲你詳細介紹下:頭像製作之可愛的猴子。工具/材料ai軟件電腦猴子操作方法01首先,我們開啟我們的電腦,接...
-
qq好友查找搜尋qq號碼找不到
如果QQ好友用QQ號碼查找我,找不到怎麼辦?操作方法(01)在電腦上登陸QQ,然後在登陸介面左上角點擊進入自己的頭像,在修改資料的介面中,QQ號碼的旁邊有一個小的標誌,點擊進入。(02)進入到的是一個網頁--我的QQ中心,它自動跳轉到賬號的介面,點擊中央介面右上角的“設定”,將顯示...
-
MySql如何對字元串模糊查詢?
mysql在網站開發中,越來越多人使用了,因爲方便部署,方便使用。我們在平時使用中,會對錶的某個字段進行模糊查詢,比如我要查詢學生表裏,姓王的學生有哪些,就需要模糊查詢。下面一起看下。操作方法(01)首先,看下我們數據庫學生表的數據,(02)如果要查詢所有姓王的學生,這個sql怎...
-
谷歌商店打不開怎麼辦
由於天朝的特殊國情導致Chrome(谷歌瀏覽器)應用商店有很多非常好的插件以及Chrome應用商店也一同被無辜地封殺了,也就導致了現在Chrome應用商店打不開、進不去的情況。藉助最新的GoogleHosts列表即可正常開啟谷歌應用商店,但是有效可用的GoogleHosts要怎麼找呢?別急...