在ubuntu上单机配置部署Hadoop
环境
在Ubuntu14.04上安装,在Hadoop 2.8.2版本安装通过。
准备工作
创建用户
终端下输入:
sudo useradd -m hadoop -s /bin/bash
设置密码:
sudo passwd hadoop
增加sudo管理员权限:
sudo adduser hadoop sudo
切换至刚刚创建好的hadoop用户:
sudo su hadoop
更新系统
我们需要更新下系统,这样可以保证安装软件尽量是最新版本的:
sudo apt-get update
sudo apt-get upgrade -y
安装ssh,配置无密码登录
集群、单节点模式都需要用到 SSH 登陆(类似于远程登陆,你可以登录某台 Linux 主机,并且在上面运行命令),Ubuntu 默认已安装了 SSH client,此外还需要安装 SSH server:
sudo apt-get install openssh-server
接下来使用如下命令来生成密钥,然后将密钥加入授权中:
ssh-keygen -t rsa # 会有提示,都按回车就可以
cat ./id_rsa.pub >> ./authorized_keys
接下来使用ssh localhost命令,应该会无需密码直接登录成功。
安装Java环境
sudo...
下面介绍下如何在Linode上开启Google BBR加速。
1、进入Linode管理后台,点击VPS操作系统的“Edit”链接进入编辑界面:
在编辑界面修改“Boot Settings”中的“Kernel”选项,只要是4.9.0及其以上的内核都是支持Google BRR的:
保存之后重启VPS。