Mac下搭建Hadoop环境

发表于:2017-5-31 09:57

字体: | 上一篇 | 下一篇 | 我要投稿

 作者:Arccode    来源:Arccode's blog

  安装JDK
  安装JDK,安装成功后在终端中输入 java -version ,显示如下
  java version "1.7.0_51"
  Java(TM) SE Runtime Environment (build 1.7.0_51-b13)
  Java HotSpot(TM) 64-Bit Server VM (build 24.51-b03, mixed mode)
  安装Hadoop
  下载 Hadoop ,将该文件解压至 /usr/local 目录下
  配置系统环境变量
  export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.7.0_51.jdk/Contents/Home
  export HADOOP_HOME=/usr/local/hadoop-2.4.1
  export HADOOP_PREFIX=${HADOOP_HOME}
  export HADOOP_COMMON_HOME=${HADOOP_PREFIX}
  export HADOOP_HDFS_HOME=${HADOOP_PREFIX}
  export HADOOP_MAPRED_HOME=${HADOOP_PREFIX}
  export HADOOP_YARN_HOME=${HADOOP_PREFIX}
  export HADOOP_CONF_DIR="$HADOOP_HOME/etc/hadoop/"
  export YARN_CONF_DIR=${HADOOP_CONF_DIR}
  export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_PREFIX/bin:$HADOOP_PREFIX/sbin
  配置ssh
  测试ssh是否可以登录
  输入 ssh localhost 显示
  ssh: connect to host localhost port 22: Connection refused
  表示ssh未配置,需要进行配置;
  “系统偏好设置”–>”共享”–>”远程登录”;
  再次输入 ssh localhost ,输入密码后可以看到连接成功的信息
  Last login: Mon Jul 14 23:41:32 2014 from localhost
  设置ssh免登录
  构造秘钥
  ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
  -t: 秘钥类型
  -P: 提供密语
  -f: 生成的秘钥文件
  执行指令后,.ssh目录中将出现id_dsa私钥和id_dsa公钥
  将公钥追加到授权key中
  cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
  配置Hadoop环境
  ###
《2023软件测试行业现状调查报告》独家发布~

关注51Testing

联系我们

快捷面板 站点地图 联系我们 广告服务 关于我们 站长统计 发展历程

法律顾问:上海兰迪律师事务所 项棋律师
版权所有 上海博为峰软件技术股份有限公司 Copyright©51testing.com 2003-2024
投诉及意见反馈:webmaster@51testing.com; 业务联系:service@51testing.com 021-64471599-8017

沪ICP备05003035号

沪公网安备 31010102002173号