[請益] docker cloudera 架設請教(贈1000p)
各位前輩好,真的卡了好久快不行了.......
爬了好幾天的文,還是差那麼一點
幫我解答的前輩,小弟以1000p幣回報...若有同時答的以推文先的為主,謝謝QAQ
小弟我想請教一下
目前我的目標是想利用docker 去架設cloudera 分散式系統
有三台主機,主節點那台是連的到外網的固定ip,從節點兩台是內網
彼此三台都可以ssh,目前我的操作流程是這樣的
使用的系統是centos7
master是直接灌在主機上的centos
剩下兩台slaver是用vm開的,用橋接介面卡去設定
1.修改主機名稱
hostnamectl set-hostname master
hostnamectl set-hostname slaver1
hostnamectl set-hostname slaver2
2.設定hosts檔案(三台都做)
vim /etc/hosts
10.***.**.*** master
10.***.**.*** slaver1
10.***.**.*** slaver2
(IP後面碼掉了)
3.配置ssh無密碼登入
ssh-keygen -t rsa #全部enter跳過產生密碼
ssh-copy-id master
ssh-copy-id slaver1
ssh-copy-id slaver2
4.關閉防火牆
systemctl mask firewalld.service
systemctl disable firewalld.service
5.關閉selinux
sed -i '/SELINUX=enforcing/d' /etc/selinux/config
sed -i '/SELINUX=disabled/d' /etc/selinux/config
echo "SELINUX=disabled" >> /etc/selinux/config
reboot #重開
vim /etc/selinux/config # 檢查檔案
#SELINUX=disabled
6.禁用IPv6
echo " " >> /etc/modprobe.d/dist.conf
echo "alias net-pf-10 off" >> /etc/modprobe.d/dist.conf
echo "alias ipv6 off" >> /etc/modprobe.d/dist.conf
7.ntp時間同步(沒有好像也可以,但較保險)
yum install ntp
ntpdate -u time.nuri.net
三台各自準備docker
yum install docker
systemctl enable docker
systemctl start docker
systemctl status docker #檢查狀態
docker version #查看doceker版本
docker run hello-world #試用
主節點準備docker cloudera
docker pull cloudera/quickstart:latest
docker images #確定目前有的映象 應該有hello跟cloudera
docker run --hostname=quickstart.cloudera --privileged=true
-t -i -p 7180:7180 -p 8888:8888 docker.io/cloudera/quickstart:latest
/usr/bin/docker-quickstart #運行cloudera 這一長串是一起的
hostname #檢查主機名稱
service cloudera-scm-server status #檢查cloudera運行狀態
yum install telnet
telnet localhost 8888 #連結port端口
telnet localhost 7180 #連結port端口
docker ps #檢查dokcer容器
/home/cloudera/cloudera-manager --express #檢查cloudera詳細
上網連線
localhost:7180
但是進去cloudera manager之後,add host會報錯 如下圖
https://i.imgur.com/QPwb8KH.jpg
![](https://i.imgur.com/QPwb8KH.jpg)
我是有參考這個影片去做的
https://www.youtube.com/watch?v=7K0ymx2gjGw
這影片是單節點,但是他在telnet localhost 8888這邊
我跟他的操作不一樣QQ
他的是這樣
https://i.imgur.com/eZPYkXk.jpg
![](https://i.imgur.com/eZPYkXk.jpg)
而我的會變成refuse之後改成127.0.0.1
這我真的不懂為什麼QQ
問了熟網路的老師,他是說我在linux裡面開一個docker之後
會變成一個虛擬IP
如果沒有用端口映射的話
這個虛擬IP就沒辦法和自己電腦的固定IP做連結
自然也就沒辦法讓外面的網路連進來,也不能連到我的從節點
但我爬文又重試幾次 在docker run的時候 -p後面的參數真的不太會設定....
救命......快死掉了QQ
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.115.236.39
※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1544085414.A.D36.html
※ 編輯: askdrlin (27.52.38.185), 12/06/2018 16:38:14
※ 編輯: askdrlin (27.52.38.185), 12/06/2018 16:40:29
※ 編輯: askdrlin (27.52.38.185), 12/06/2018 16:42:35
→
12/06 16:47,
5年前
, 1F
12/06 16:47, 1F
→
12/06 16:48,
5年前
, 2F
12/06 16:48, 2F
→
12/06 16:50,
5年前
, 3F
12/06 16:50, 3F
→
12/06 16:50,
5年前
, 4F
12/06 16:50, 4F
→
12/06 16:51,
5年前
, 5F
12/06 16:51, 5F
→
12/06 16:53,
5年前
, 6F
12/06 16:53, 6F
→
12/06 16:53,
5年前
, 7F
12/06 16:53, 7F
→
12/06 16:55,
5年前
, 8F
12/06 16:55, 8F
→
12/06 16:55,
5年前
, 9F
12/06 16:55, 9F
噓
12/06 16:55,
5年前
, 10F
12/06 16:55, 10F
→
12/06 16:57,
5年前
, 11F
12/06 16:57, 11F
→
12/06 16:59,
5年前
, 12F
12/06 16:59, 12F
→
12/06 17:00,
5年前
, 13F
12/06 17:00, 13F
→
12/06 17:01,
5年前
, 14F
12/06 17:01, 14F
→
12/06 17:17,
5年前
, 15F
12/06 17:17, 15F
我嘗試看看 謝謝你
→
12/06 17:37,
5年前
, 16F
12/06 17:37, 16F
→
12/06 17:38,
5年前
, 17F
12/06 17:38, 17F
這兩台都有在網路設定那邊設好了,就是hosts文件的ip
※ 編輯: askdrlin (27.52.38.185), 12/06/2018 17:40:38
推
12/06 20:22,
5年前
, 18F
12/06 20:22, 18F
→
12/06 20:38,
5年前
, 19F
12/06 20:38, 19F
→
12/06 20:39,
5年前
, 20F
12/06 20:39, 20F
→
12/06 20:39,
5年前
, 21F
12/06 20:39, 21F
好像還是不行QQ
→
12/07 15:45,
5年前
, 22F
12/07 15:45, 22F
→
12/07 15:45,
5年前
, 23F
12/07 15:45, 23F
不好意思打開cloudera的時候 用這個方法他會有些failed產生...
※ 編輯: askdrlin (39.9.100.233), 12/07/2018 23:16:45
※ 編輯: askdrlin (39.9.100.233), 12/08/2018 10:29:52
推
12/08 12:34,
5年前
, 24F
12/08 12:34, 24F
→
12/08 12:35,
5年前
, 25F
12/08 12:35, 25F
重新設定一下後,的結果是s大的--net=host可以連 謝謝各位前輩指教
※ 編輯: askdrlin (39.9.100.233), 12/08/2018 12:51:26