资料介绍
如何快速搭建Hadoop运行环境
Hadoop 是一个分布式系统基础架构,在大数据领域被广泛的使用,它将大数据处理引擎尽可能的靠近存储,Hadoop 最核心的设计就是 HDFS 和 MapReduce,HDFS 为海量的数据提供了存储,MapReduce 为海量的数据提供了计算。这篇文章主要就是介绍一下如何搭建一个 Hadoop 运行环境。
我们使用 Linux 操作系统来搭建环境,下面的信息是用来准备搭建 Hadoop 环境的电脑环境信息。
1. hadoop@ubuntu:~$ cat /etc/os-release
2. NAME=“Ubuntu”
3. VERSION=“14.04.5 LTS, Trusty Tahr”
4. ID=ubuntu
5. ID_LIKE=debian
6. PRETTY_NAME=“Ubuntu 14.04.5 LTS”
7. VERSION_ID=“14.04”
8. HOME_URL=“http://www.ubuntu.com/”
9. SUPPORT_URL=“http://help.ubuntu.com/”
10. BUG_REPORT_URL=“http://bugs.launchpad.net/ubuntu/”
紧接着来新建一个用户,这一步其实也可以省略的,可以根据实际情况来决定,这里是新建了一个叫 hadoop 的新用户。
1. #创建新用户
2. sudo useradd -m hadoop -s /bin/bash
3. #设置密码
4. sudo passwd hadoop
5. #为hadoop用户增加管理员权限
6. sudo adduser hadoop sudo
7. #切换到hadoop用户
8. su hadoop
我们首先来设置一下 SSH 无密码登录,这一步建议都设置一下,因为分布式系统环境都是由多台浪潮服务器构成的,设置免密码登录会方便使用。
1. #先检查下是否可以在没有密码的情况下ssh到localhost
2. ssh localhost
3. #如果在没有密码的情况下无法ssh到localhost,请执行以下命令
4. ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
5. cat ~/.ssh/id_rsa.pub 》》 ~/.ssh/authorized_keys
6. chmod 0600 ~/.ssh/authorized_keys
- 3568编译环境搭建
- Apache2.2.x+PHP5.3.x+MySQL5.1.x-搭建WMAP运行环境
- 基于BGP MPLS的以太网VPN环境搭建源码 16次下载
- 如何搭建移动物联网Android的开发环境 1次下载
- 如何在Linux环境下实现Python环境的搭建 14次下载
- 如何才能在Linux系统下搭建51单片机的开发烧写环境
- 在Proteus环境下搭建生产运行参数的多路信号监测系统的详细资料说明 4次下载
- 怎么样才能使用proteus进行仿真?
- 如何在Linux环境下搭建51单片机的开发烧写环境
- 如何在Mac下搭建PHP开发环境 14次下载
- redhat搭建PHP运行环境LAMP的详细资料说明 6次下载
- 如何使用PHPStudy和APMServ快速搭建PHP 7次下载
- 基于Hadoop与聚类分析的网络日志分析模型 0次下载
- hadoop大数据windows搭建环境 4次下载
- Hadoop环境的搭建与管理--谢志明 0次下载
- 如何搭建Python编程环境 4945次阅读
- 为MindSDK搭建armgcc编译环境(Windows版) 1104次阅读
- HPM6750开发环境搭建及快速上手 3487次阅读
- OpenHarmony开发环境搭建方法 2262次阅读
- 如何搭建鸿蒙开发环境 3545次阅读
- 虚拟机:Hadoop集群的搭建 3097次阅读
- 什么是Hadoop? Spark和Hadoop对比 6751次阅读
- php开发环境的搭建和使用 3330次阅读
- 搭建测试环境常用linux命令_linux下web测试环境的搭建 1.1w次阅读
- 测试环境的搭建和维护_软硬件测试环境 6661次阅读
- 如何搭建hadoop平台_hadoop平台搭建步骤 9042次阅读
- hadoop基础知识介绍_hadoop是什么语言开发的_hadoop能做什么 3.9w次阅读
- hadoop技术原理总结 4140次阅读
- hadoop开发环境搭建 2806次阅读
- 浅析Hadoop集群硬件选择 1648次阅读
下载排行
本周
- 1TC358743XBG评估板参考手册
- 1.36 MB | 330次下载 | 免费
- 2开关电源基础知识
- 5.73 MB | 6次下载 | 免费
- 3100W短波放大电路图
- 0.05 MB | 4次下载 | 3 积分
- 4嵌入式linux-聊天程序设计
- 0.60 MB | 3次下载 | 免费
- 5基于FPGA的光纤通信系统的设计与实现
- 0.61 MB | 2次下载 | 免费
- 6基于FPGA的C8051F单片机开发板设计
- 0.70 MB | 2次下载 | 免费
- 751单片机窗帘控制器仿真程序
- 1.93 MB | 2次下载 | 免费
- 8基于51单片机的RGB调色灯程序仿真
- 0.86 MB | 2次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 2555集成电路应用800例(新编版)
- 0.00 MB | 33564次下载 | 免费
- 3接口电路图大全
- 未知 | 30323次下载 | 免费
- 4开关电源设计实例指南
- 未知 | 21548次下载 | 免费
- 5电气工程师手册免费下载(新编第二版pdf电子书)
- 0.00 MB | 15349次下载 | 免费
- 6数字电路基础pdf(下载)
- 未知 | 13750次下载 | 免费
- 7电子制作实例集锦 下载
- 未知 | 8113次下载 | 免费
- 8《LED驱动电路设计》 温德尔著
- 0.00 MB | 6653次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935054次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537796次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191185次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183278次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138040次下载 | 免费
评论
查看更多