Вопросы по теме 'cloudera-manager'

настройка нескольких узлов hadoop с помощью бесплатной версии cloudera manager
Может ли кто-нибудь помочь мне настроить несколько узлов hadoop с помощью бесплатной версии cloudera manager? У меня 8 систем, подключенных к сети, Мое требование: один должен быть узлом имени, один трекер заданий должен быть вторичным узлом...
620 просмотров
schedule 05.02.2023

При установке Cloudera Manager не удалось получить пульс от агента — добавить новые хосты в кластер
Я пытаюсь установить на Ubuntu 12.04.1 LTS диспетчер cloudera, используя стандартную версию, и когда я хочу добавить новый хост, я получаю следующую ошибку: Installation failed.Failed to receive heartbeat from agent. Ensure that the host's...
16662 просмотров
schedule 06.07.2023

Не удалось подключиться к базе данных на хосте «http://namenode.tarun.com:7432» с хоста «namenode.tarun.com».
я установил сервер менеджера cloudera, выполняя настройку базы данных встроенной базы данных. Ошибка приведена ниже: Не удалось подключиться к базе данных на хосте ' http://namenode.tarun.com:7432 ' с хоста ' namenode.tarun.com», используя...
978 просмотров
schedule 07.05.2023

Где мне разместить Cloudera Manager Server
У меня есть кластер из 4 Ubuntu 12.04 LTS, который готовится к установке Hadoop с использованием Cloudera Manager (с CDH5). Но я не понимаю, куда поставить Cloudera Manager Server. Должен ли я добавить новый компьютер с Ubuntu для размещения...
129 просмотров
schedule 21.09.2023

Данные в Hbase не структурированы должным образом — Twitter Flume
Пользователи, привет! Я установил Flume на свой cloudera 4.6 и пытаюсь получать твиты из твиттера. Итак, я создал приемник HDFS и приемник HBase, и они собирают твиты... Но данные в HBase плохо структурированы. Поскольку данные не...
284 просмотров
schedule 14.04.2023

Запросы Hive не работают при передаче файла .hql с использованием параметра -f hive
У меня проблема с проводкой, я искал везде и не нашел ответа. Я запускаю cloudera 4.6 на одном узле и использую локальную базу данных mysql для базы данных метахранилища hive. У меня есть много таблиц кустов с данными внутри, которые я могу...
1593 просмотров
schedule 01.07.2022

перезапустить кластер CDH5 на EC2, сохраненный как AMI
Я установил простой двухузловой кластер с помощью установщика cloudera manager (cdh 5.3). Кажется, все работает нормально. Затем я сохранил каждый узел как AMI. Затем я снова запустил экземпляр каждого образа, убедившись, что сетевая карта...
164 просмотров

Spark: как запустить Spark File из Spark Shell
Я использую CDH 5.2. Я могу использовать spark-shell для выполнения команд. Как запустить файл (file.spark), содержащий искровые команды. Есть ли способ запускать / компилировать программы scala в CDH 5.2 без sbt? заранее спасибо
114368 просмотров

Cloudera cdh5.1.3 добавляет SPARK 0.9 с помощью сервисного мастера. Ошибка SCALA_HOME не установлена
Я получаю следующую ошибку при добавлении Spark в CDH для конфигурации главного и рабочего узла. Я выполнил инструкции по этой ссылке: https://docs.sigmoidanalytics.com/index.php/Installing_Spark_and_Setting_Up_Your_Cluster Чтобы установить...
449 просмотров

В доступе отказано: u'/opt/cloudera/parcel-cache/CDH-5.3.3-1.cdh5.3.3.p0.5-precise.parcel.part'
Я пытаюсь установить кластер hadoop cloudera с 3 узлами, все это машины с Ubuntu 12.04. Для этого я сделал следующие вещи. Я создал hduser на всей машине и даю ему права root с помощью следующей команды. sudo addgroup hadoop sudo adduser...
752 просмотров

Impala - Пусть Impala выбирает свой собственный лимит памяти
У меня на кластере установлена ​​Cloudera Express 5.3.2. Я хотел бы использовать его для запросов Impala. Я хочу, чтобы Impala устанавливала ограничение в зависимости от емкости кластера. В конфигурации Impala в диспетчере cloudera написано...
1040 просмотров
schedule 13.04.2022

Как отладить неисправный процесс cloudera-scm-server?
Я пытаюсь установить Cloudera Manager 5 на centOS6, но процесс cloudera-scm-server продолжает давать сбой без явной ошибки в журналах. service --status-all cloudera-scm-agent (pid 7058) is running... cloudera-scm-server dead but pid file...
1650 просмотров
schedule 01.09.2022

dfs_hosts_allow в Cloudera Manager
Я пытаюсь настроить HDFS и Cloudera Manager через API Cloudera Manager. Однако я застрял в определенном месте: Я настраиваю все роли HDFS, но NameNode отказывается взаимодействовать с узлами данных. Соответствующая ошибка из журнала DataNode:...
887 просмотров
schedule 16.04.2023

Что такое REST API для запуска службы управления Cloudera?
Я могу запустить кластер с помощью REST API Cloudera Manager ниже: curl -X POST -u "admin:admin" "http://""n0001:7180""/api/v6/clusters/Cluster_1/commands/start" И это цифра из Cloudera Manager после того, как я запустил REST API. введите...
663 просмотров

Неправильные зависимости Oozie при попытке установить Cloudera Manager 5
Я пытаюсь установить новейшую версию диспетчера Cloudera в своем кластере Hadoop (Ubuntu 14.04), purge 6#concept_p5r_lsx_34_unique_1" rel="nofollow">выполните следующие действия . Я переместил файл списка Ubuntu Trusty Cloudera Manager в каталог...
76 просмотров

Ошибка Oozie — сбой Oozie Launcher со скриптом Pig
Я пытаюсь запустить простой скрипт Pig и запланировал его через Oozie , однако после запуска скрипта я получаю следующую ошибку Oozie. Я использую Cloudera Enterprise Data Hub Edition Trial 5.6.0 (# 54, созданный jenkins на 20160211-1910 git:...
284 просмотров

Удалить мертвый хост из Cloudera
Я пытаюсь удалить хост из кластера в Cloudera Manager. Хост мертв и недоступен. Когда я нажимаю «Удалить» для выбранного хоста, я получаю сообщение: BlockquoteСледующие 1 хосты не могут быть удалены, поскольку они не полностью выведены из...
638 просмотров
schedule 08.04.2022

Не удается получить доступ к диспетчеру Cloudera через порт 7180
Установка Cloudera Manager на экземпляр AWS EC2 в соответствии с официальной инструкцией: http://www.cloudera.com/documentation/archive/manager/4-x/4-6-0/Cloudera-Manager-Installation-Guide/cmig_install_on_EC2.html Я успешно запускаю...
757 просмотров

Создание динамического пула ресурсов для пряжи через Cloudera Manager REST API
В настоящее время я создаю пулы ресурсов через веб-интерфейс в соответствии с https://www.cloudera.com/documentation/enterprise/5-6-x/topics/cm_mc_resource_pools.html#concept_xkk_l1d_wr__section_utc_gbl_vl Поскольку мне нужно создать большое...
1103 просмотров

Выполнение команд в интерфейсе командной строки ZooKeeper с использованием Python
Пробую API-интерфейсы Cloudera Manager с помощью Python в AWS. Я пытался выполнить некоторые команды в интерфейсе командной строки Zookeeper после выполнения сценария «zkCli.sh». Я попытался использовать приведенную ниже команду, используя...
845 просмотров