This shows you the differences between two versions of the page.
|
dwsc:hdfs:install [2013/04/08 22:01] ivan |
dwsc:hdfs:install [2013/04/10 23:46] (current) ivan |
||
|---|---|---|---|
| Line 31: | Line 31: | ||
| chown -R zookeeper:zookeeper /var/lib/zookeeper/ | chown -R zookeeper:zookeeper /var/lib/zookeeper/ | ||
| </code> | </code> | ||
| + | |||
| A /etc/zookeeper/conf/zoo.cfg fájlban állítsuk be a szolgáltatásban résztvevő szervereket: | A /etc/zookeeper/conf/zoo.cfg fájlban állítsuk be a szolgáltatásban résztvevő szervereket: | ||
| Line 265: | Line 266: | ||
| apt-get install hadoop-hdfs-fuse hadoop-client hadoop-mapreduce hadoop-0.20-mapreduce libssl0.9.8 | apt-get install hadoop-hdfs-fuse hadoop-client hadoop-mapreduce hadoop-0.20-mapreduce libssl0.9.8 | ||
| - | libssl0.9.8 csak squeeze-ben van, wheezy-re kell készíteni buildet. | + | TODO: libssl0.9.8 csak squeeze-ben van, wheezy-re kell készíteni buildet. |
| + | |||
| + | /etc/default/hadoop-ba érdemes felvenni: \\ | ||
| + | export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 | ||
| FUSE mount: \\ | FUSE mount: \\ | ||
| <code> | <code> | ||
| hadoop-fuse-dfs dfs://<namenode> <mount point> | hadoop-fuse-dfs dfs://<namenode> <mount point> | ||
| - | hadoop-fuse-dfs dfs://vodstorage01 /srv/users/default/content | + | hadoop-fuse-dfs dfs://vodstorage01 /srv/dwsc/users |
| </code> | </code> | ||
| + | |||
| + | fstab beállítás: | ||
| + | <code> | ||
| + | hadoop-fuse-dfs#dfs://vodstorage01 /srv/dwsc/users fuse notrash 0 0 | ||
| + | </code> | ||
| + | |||
| + | NFS root-ban chrootolva érdemes szerkeszteni, mert egy-két mappa symlinkelve van! | ||
| ===== HDFS státusz ellenőrzés ===== | ===== HDFS státusz ellenőrzés ===== | ||
| http://172.28.28.1:50070/dfshealth.jsp vagy http://172.28.28.2:50070/dfshealth.jsp | http://172.28.28.1:50070/dfshealth.jsp vagy http://172.28.28.2:50070/dfshealth.jsp | ||