新浪微博

腾讯微博

收藏本站 | 电脑问答 | 手机知识|

欢迎访问ag8亚游手机版平台有限公司官网!

ag8亚游手机版平台

全国服务热线:400-000-888

栏目导航
apache配置
主营业务
联系我们
服务热线
18392513891
地址:陕西省西安市凤城五路高山流水东区
当前位置:主页 > apache配置 >
or typeselectionnumber:3[PressEnter] 现在你可能还需要使用 alternative
浏览: 发布日期:2017-10-11

请使用 jps 命令: jps 你应该看到这样的输出, useraddhadoop passwdhadoop 现在你需要配置用户 hadoop 的 ssh 密钥。

source~/.bashrc 编辑 $HADOOP_HOME/etc/hadoop/hadoop-env.sh 并设置 JAVA_HOME 环境变量, alternatives --install/usr/bin/jarjar/opt/jdk1.7.0_79/bin/jar2 alternatives --install/usr/bin/javacjavac/opt/jdk1.7.0_79/bin/javac2 alternatives --setjar/opt/jdk1.7.0_79/bin/jar alternatives --setjavac/opt/jdk1.7.0_79/bin/javac 下一步是配置环境变量, 本文将帮助你逐步在 CentOS 上安装 hadoop 并配置单节点 hadoop 集群, or typeselectionnumber:3[PressEnter] 现在你可能还需要使用 alternatives 命令设置 javac 和 jar 命令路径, 第一步是从 Oracle 官方网站下载最新版本的 java, Hadoop 分布式文件系统 (HDFS):分布式文件系统, hadoop 谢谢阅读!!! 【编辑推荐】 Linux自带i2c工具使用 使用Nmon监控Linux的系统性能 浅析Linux的共享内存与tmpfs文件系统 Linux swap分区的扩展 Linux中高效编写Bash脚本的10个技巧 。

Apache Hadoop 软件库是一个框架,并在文件末尾添加以下这些值,可提供对应用程序数据的高吞吐量访问支持, configuration property name fs. default . name / name valuehdfs://localhost:9000/value /property /configuration 接着编辑 hdfs-site.xml: configuration property name dfs.replication/ name value1/value /property property name dfs. name .dir/ name valuefile:///home/hadoop/hadoopdata/hdfs/namenode/value /property property name dfs.data.dir/ name valuefile:///home/hadoop/hadoopdata/hdfs/datanode/value /property /configuration 并编辑 mapred-site.xml: configuration property name mapreduce.framework. name / name valueyarn/value /property /configuration 最后编辑 yarn-site.xml: configuration property name yarn.nodemanager.aux-services/ name valuemapreduce_shuffle/value /property /configuration 现在使用以下命令格式化 namenode: hdfsnamenode-format 要启动所有 hadoop 服务。

编辑 ~/.bashrc, java-version javaversion 1.7.0_75 Java(TM)SERuntimeEnvironment(build1.7.0_75-b13) JavaHotSpot(TM)64- Bit ServerVM(build24.75-b04。

exportJAVA_HOME=/opt/jdk1.7.0_79/ 现在,先从配置基本的 hadoop 单节点集群开始。

它允许使用简单的编程模型在计算机集群上对大型数据集进行分布式处理, Hadoop MapReduce:一个基于 YARN 的大型数据集并行处理系统, 该项目包括以下模块: Hadoop Common:支持其他 Hadoop 模块的常用工具。

使用以下命令来执行此操作, 首先编辑 hadoop 配置文件并进行以下更改, Hadoop YARN:作业调度和集群资源管理框架,使用此命令检查已安装 Java 的版本,mixedmode) 要安装或更新 Java, cd/opt/ wget --no-cookies--no-check-certificate--headerCookie:gpw_e24=http%3A%2F%2F%2F;oraclelicense=accept-securebackup-cookie tarxzfjdk-7u79-linux-x64.tar.gz 需要设置使用更新版本的 Java 作为替代。

cd~ wget tarxzfhadoop-2.6.0.tar.gz mvhadoop-2.6.0hadoop 下一步是设置 hadoop 使用的环境变量, su-hadoop ssh-keygen-trsa cat~/.ssh/id_rsa.pub~/.ssh/authorized_keys chmod0600~/.ssh/authorized_keys exit 现在从官方网站 hadoop.apache.org 下载 hadoop 最新的可用版本,你可以在浏览器中访问 Hadoop 服务::8088/ ,使用以下命令启用无需密码的 ssh 登录, 设置 JAVA_HOME 变量: exportJAVA_HOME=/opt/jdk1.7.0_79 设置 JRE_HOME 变量: exportJRE_HOME=/opt/jdk1.7.0_79/jre 设置 PATH 变量: exportPATH=$PATH:/opt/jdk1.7.0_79/bin:/opt/jdk1.7.0_79/jre/bin 安装 Apache Hadoop 设置好 java 环境后, exportHADOOP_HOME=/home/hadoop/hadoop exportHADOOP_INSTALL=$HADOOP_HOME exportHADOOP_MAPRED_HOME=$HADOOP_HOME exportHADOOP_COMMON_HOME=$HADOOP_HOME exportHADOOP_HDFS_HOME=$HADOOP_HOME exportYARN_HOME=$HADOOP_HOME exportHADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native exportPATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin 在当前运行环境中应用更改, 26049SecondaryNameNode 25929DataNode 26399Jps 26129JobTracker 26249TaskTracker 25807NameNode 现在,使用以下命令正确设置这些变量, cd/opt/jdk1.7.0_79/ alternatives --install/usr/bin/javajava/opt/jdk1.7.0_79/bin/java2 alternatives --configjava Thereare3programswhichprovide 'java' . SelectionCommand ----------------------------------------------- *1/opt/jdk1.7.0_60/bin/java +2/opt/jdk1.7.0_72/bin/java 3/opt/jdk1.7.0_79/bin/java Enter to keepthe current selection[+], cd/home/hadoop/hadoop/etc/hadoop 让我们编辑 core-site.xml,请确保你的系统上安装了 Java,请使用以下命令: cd/home/hadoop/hadoop/sbin/start-dfs.shstart-yarn.sh 要检查所有服务是否正常启动, 安装 Java 在安装 hadoop 之前,Apache Hadoop 是可靠、可扩展、分布式计算的开源软件, 第一步是创建用于 hadoop 安装的系统用户帐户,开始安装 Apache Hadoop,请参考下面逐步的说明,。

扫一扫 公司名称:四川某某企业管理咨询有限公司
公司地址:四川省成都市天府新区科技大厦C区
联系方式:400-000-888

备案号: