Hadoop安装可用的形式有三中,这里便背大年夜家引见一下问漫衍形式安装Hadoop,盼看感乐趣的伴侣们一同来存眷,相信本文的引见一定会让你有所播种的。AD:本节战大年夜家一同进修一下Hadoop真漫衍安装形式,上节我们引见了Hadoop本天形式的安装,经过本节引见大年夜家可以做一下比照,看一下那种形式安装适开你,悲迎大年夜家一同来进修Hadoop真漫衍安装。为了便于大年夜家理解,先看一下Hadoop的概念。Hadoop真漫衍安装形式Hadoop概念 一个漫衍式系统根柢架构,由Apache基金会开拓。用户可以正在没有相识漫衍式底层细节的状态下,开拓漫衍式法式。充真操做散群的才具下速运算战存储。简单天说来,Hadoop是一个可以更简单开拓战运转处置大年夜范围数据的硬件仄台。Hadoop真现了一个漫衍式文件系统(HadoopDistributedFileSystem),简称HDFS。HDFS有着下容错性(fault-tolerent)的特点,而且规划用来放置正在昂贵的(low-cost)硬件上。而且它供给下传输率(highthroughput)来拜候利用法式的数据,适开那些有着超大年夜数据散(largedataset)的利用法式。HDFS放宽了(relax)POSIX的要求(requirements)如许可以流的形式拜候(streamingaccess)文件系统中的数据。上面便hadoop0.20.1为底本,引见正在UbuntuLinux9.10下hadoop真漫衍安装的方法。撑持的仄台:Linux,可做为开拓战产品放置的仄台;Windows,可做为开拓仄台。事先需求的硬件:1.JavaTM1.6.x,必须安装,倡议挑选Sun公司发止的Java版本;2.ssh必须安装,并包管sshd运转,hadoop将以ssh进止通信;3.假设是windows,则需求装Cygwin,用以撑持shell饬令。安装可用的形式:1.本天形式;2.真漫衍形式;3.齐漫衍形式。Hadoop真漫衍形式安装步伐:1.将hadoop安装包解紧缩到某目录下;2.点窜conf/hadoop-env.sh文件,exportJAVA_HOME=那止设置正确的JAVA_HOME位置3.点窜conf/core-site.xml,改成:viewplaincopytoclipboardprint? configuration property name fs.default.name /name value hdfs://localhost:9000 /value /property /configuration configuration property name fs.default.name /name value hdfs://localhost:9000 /value /property /configuration 4.点窜conf/hdfs-site.xml,改成:viewplaincopytoclipboardprint? configuration property name dfs6ary.com.replication /name value 1 /value /property /configuration configuration property name dfs.replication /name value 1 /value /property /configuration 5.点窜conf/mapred-site.xml,改成:viewplaincopytoclipboardprint? configuration propermusiquah.comty name mapred.job.tracker /name value localhost:9001 /value /property /configuration configuration property name mapred.job.tracker /name value localhost:9001 /value /property /configuration 6.设置本机ssh本机无稀码 先测试一下,输进饬令sshlocalhost,假设提醒稀码,则需求进止以下操做: $ssh-keygen-tdsa-P""-f~/.ssh/id_dsa $cat~/.ssh/id_dsa.pub ~/.ssh/authorized_keys7.格式化namenode: $bin/hadoopnamenode-format8.启动Hadoop: $bin/start-all.sh至此,hadoop真漫衍形式安装终了!
09-25 20:11