Я установил Hcatalog с CDH4 (в 64-разрядной версии Ubuntu 12.04) и сейчас пытаюсь Доступ к информации таблицы с помощью REST Я перезапустил webhcat-сервер service webhcat-server restart . Затем я выполнил это на терминале, curl...

Я получаю следующую ошибку, когда запускаю "pig -useHCatalog". Exception inthread"main"java.lang.NoClassDefFoundError:/usr/lib/hive/lib/libthrift- 0/9/1/jar:/usr/lib/hive/lib/hive-exec-0/12/0/2/0/6/0-76/jar:/usr/lib/hive/lib/libfb303-...

Я пытаюсь написать задание по уменьшению карты, которое вычисляет распределение значений полей в таблице Hive (Hadoop 2.2.0.2.0.6.0-101). Например: Входная таблица Hive "ATable": +------+--------+ ! name | rating | | +------+--------+ | Bond...

Я работаю над проектом для класса больших данных и установил виртуальную машину Cloudera Quickstart локально, чтобы выполнять некоторые основные задачи в моем наборе данных и знакомиться с некоторыми инструментами. Я следовал руководству, которое...

Я использую hive-0.12.0,pig-0.12.0,mysql-5.6 и hadoop-1.2.1 в режиме псевдораспределения. Я настроил PIG_CLASSPATH и т.д.. подробности по ссылке, https://cwiki.apache.org/confluence/display/Hive/HCatalog+LoadStore Когда я пытаюсь...

Я использую песочницу HortonWorks, чтобы опробовать несколько образцов. На следующей странице отображается «Ошибка» в пользовательском интерфейсе (время ожидания) http://:8000/hcatalog/ Подробные журналы сервера: [25/Apr/2014 13:07:49...

Я пытался найти документацию о том, как мы можем экспортировать файл последовательности в Oracle с помощью Sqoop. Это возможно? В настоящее время у меня есть файлы (в HDFS) в текстовом формате, и я использую Sqoop для экспорта этих файлов в...

При использовании Pig для ETL я помещаю обработанные данные в Hive с помощью HCatStorer: STORE dataprocessed INTO 'database.table' USING org.apache.hcatalog.pig.HCatStorer(); Моя цель - сделать данные целевой таблицы пригодными для...

Я могу читать текстовые файлы в hdfs в конвейер apache crunch. Но теперь мне нужно прочитать разделы улья. Проблема в том, что в соответствии с нашим дизайном я не должен напрямую обращаться к файлу. Следовательно, теперь мне нужен какой-то способ,...

Ниже приведены мои конфигурации: **mapred-site.xml** map-mb : 4096 opts:-Xmx3072m reduce-mb : 8192 opts:-Xmx6144m **yarn-site.xml** resource memory-mb : 40GB min allocation-mb : 1GB Vcores в кластере hadoop отображало 8 ГБ, но я не знаю, как...

Я использую PIG для доступа к таблице batting_data, созданной через HCatalog. При этом я сталкиваюсь с ошибкой, говорящей, что указанная таблица не найдена. Однако эта таблица batting_data доступна в HIVE. Я также понимаю, что если имя базы данных...

Показанный ниже сценарий Pig (с механизмом выполнения Tez) выдает исключение Out Of Memory Exception с таблицей сотрудников размером 15 ГБ в кластере из 4 узлов. Он отлично работает, когда механизм выполнения изменен на MapReduce. pig -F -x tez...

Я хочу получить графическое представление (диаграмму) метаданных Hive (определение и свойства таблицы + отображение на HDFS) . Очевидным инструментом для просмотра этой информации является Hue . Существуют также альтернативы, подобные...

Я пытаюсь загрузить свою таблицу кустов, используя Hcatalog в свинье, для этого я написал код ниже, но получаю сообщение об ошибке. Я открываю свою свиную оболочку, используя pig -useHCatalog Код: A = LOAD 'patient_info' USING...

Я пытаюсь загрузить данные из улья в тераданные. Для этого я создал внешнюю таблицу в улье, вставил в нее значения и запустил команду экспорта sqoop. create external table Sample_load ( name varchar(32), addr varchar(50), ); insert into table...