Cloudera - Запустить службы - NameNode не отформатирован

У меня есть кластер Cloudera на Microsoft Azure. Я закрываю кластер каждые выходные, выполнив следующие действия:

1) Включение службы управления Cloudera из Cloudera Manager

2) Остановить все службы из Cloudera Manager

3) Перейдите в узел Имя и выполните команду:

service cloudera-scm-server stop

4) Выключите виртуальные машины в кластере.

Когда я пытаюсь запустить этот кластер, я выполняю следующие шаги:

1) Запустите виртуальные машины в кластере

2) служба "cloudera-scm-server" уже запущена при запуске.

3) Включите службу управления Cloudera из CM

4) Включите все службы.

Вот где он терпит неудачу и дает мне ошибки, что он не смог запустить узел имени, потому что он не был отформатирован.

Если я пойду и отформатирую узел имени из CM, все службы запустятся, но он стирает все содержимое HDFS (по крайней мере, записи узла имени, не уверен насчет данных).

Что я здесь делаю неправильно и как лучше всего включить/выключить кластер Cloudera?


person vineet sinha    schedule 21.03.2016    source источник


Ответы (1)


Если вы развернули кластер Cloudera EDH с помощью предложения Azure Marketplace или шаблона в GitHub (https://github.com/Azure/azure-quickstart-templates/tree/master/cloudera-on-centos), следующая процедура доказала свою эффективность для завершения работы кластера:

  1. В Cloudera Manager остановите кластерные службы.
  2. В Cloudera Manager остановите службу управления Cloudera.
  3. На портале Azure остановите виртуальные машины.

Обратный порядок для перезапуска кластера.

person Paige Liu    schedule 03.04.2016