Где мне разместить Cloudera Manager Server

У меня есть кластер из 4 Ubuntu 12.04 LTS, который готовится к установке Hadoop с использованием Cloudera Manager (с CDH5).

Но я не понимаю, куда поставить Cloudera Manager Server.

Должен ли я добавить новый компьютер с Ubuntu для размещения сервера Cloudera Manager, а затем позволить ему управлять кластером Hadoop, состоящим из 1 главного и 3 подчиненных?

Или мне поставить Cloudera Manager Server вместе с мастером Hadoop? Таким образом, главный сервер Hadoop и Cloudera Manager Server находятся на одной (виртуальной) машине.

Этот вопрос может быть продублирован здесь. Но после просмотра я все еще в замешательстве.

Ждем любой экспертизы.


ubuntu hadoop cloudera cloudera-manager
person Spectral    schedule 28.05.2014    source источник

Ответы (1)


arrow_upward
1
arrow_downward

На самом деле это зависит от ваших требований. Вы должны знать, что Cloudera Manager потребляет некоторые ресурсы на машине. Поэтому, если вы хотите посвятить всю свою мощность виртуальной машине Hadoop, вам следует использовать другую машину только для размещения Cloudera Manager.
Но вы можете разместить Cloudera Manager на машине, на которой размещены другие службы. Никаких проблем это не вызовет.

Лично я установил службы Cloudera Manager на вторичном NameNode. И, конечно же, для доступа к консоли Cloudera Manager вы будете использовать: hostip:7180, где hostip — это IP-адрес машины, на которой установлен Cloudera Manager.

person Junayy    schedule 28.05.2014
comment
Спасибо за быстрый ответ! Что касается SecondaryNameNode, нужно ли запускать его на отдельной машине? Кажется, вы знаете секрет этого. - person Spectral; 28.05.2014
comment
Вы можете поместить SecondaryNameNode на тот же компьютер, что и NameNode, но в этом нет никакого интереса. SecondaryNameNode является резервной копией Namenode на случай последнего сбоя. Но вы также можете настроить свой кластер без SecondaryNameNode. Моя установка очень близка к вашей. На самом деле у меня есть 5 машин: 1 с ролью NameNode + master для HDFS / Hive / Hbase + Cloudera Manager, 1 SecondaryNamenode для резервного копирования и последние три — DataNode. - person Junayy; 28.05.2014