Вопросы по теме 'oozie-coordinator'
Как запустить oozie для исторических дат?
Я пытаюсь запустить координатора oozie для исторических дат, таких как
start-date = 2013-02-01T00:00Z
end-date = 2013-03-15T00:00Z
frequency = 1 day
Узи должен был немедленно начать/материализовать все действия на эти дни....
369 просмотров
schedule
04.02.2023
Рабочие процессы Oozie с помощью sqoop
Я установил oozie 4.0.0 в своей системе с Hadoop 1.2.1.
Моя цель - написать задания sqoop в oozie. Когда я погуглил и получил следующие ссылки: -
http://rvs.github.io/oozie/installing.html...
333 просмотров
schedule
20.03.2022
FNF: невозможно выполнить ssh-base.sh
Пытаюсь запустить рабочий процесс Oozie, но продолжает получать следующее сообщение об ошибке:
org.apache.oozie.action.ActionExecutorException: FNF: невозможно выполнить ssh-base.sh на имени пользователя@имя_сервера | ErrorStream:...
1445 просмотров
schedule
20.12.2022
Как создать необязательные аргументы командной строки в рабочем процессе oozie xml
Пожалуйста, имейте в виду, что я полный новичок с oozie. Я знаю, что можно указать аргументы командной строки в xml рабочего процесса oozie с помощью тега arg. Мне было интересно, как можно указать необязательный аргумент командной строки, чтобы...
1880 просмотров
schedule
10.06.2023
Работа Oozie занимает больше времени, чем запланированный интервал
Я планирую выполнение задания Oozie MapReduce каждые 15 минут. Интересно, что произойдет, если каждая работа будет занимать больше установленного времени? Приведет ли это к отставанию в работе? Или Oozie создаст новую задачу/поток/форк для нового...
327 просмотров
schedule
08.06.2022
Передача файла свойств в Oozie Java Action
У меня настроен рабочий процесс действия Java Oozie, который я планирую использовать для планирования координатора Oozie. Действие java запускает задание Camus, чей файл конфигурации jar и свойств я поместил в каталог workflow/lib. Любые идеи о том,...
2747 просмотров
schedule
20.06.2022
Oozie — Захват выходных данных из Hive Action
Как в Oozie мы можем зафиксировать вывод первого действия Hive, который можно использовать в дальнейшем в последующих действиях Hive?
986 просмотров
schedule
14.11.2022
Рабочий процесс MapReduce oozie с использованием Hue
Я работаю над AWS и пытаюсь create oozie workflow for map only job использовать оттенок. Я взял mapreduce action за это. Попробовав много подходов, я не могу его завершить. Я выполнил свою работу из CLI, и она работает нормально.
Я создал...
1115 просмотров
schedule
01.03.2023
Как решить ошибку, когда файл не существует в настройках координатора ooziee
Как решить, если файл ошибки не существует в настройках координатора oozie:
У меня ошибка в координаторе журнала:
Дамп лог-файла свиньи:
Сообщение об ошибке серверной части Ошибка: java.io.FileNotFoundException: Файл не существует:...
139 просмотров
schedule
30.12.2023
oozie ошибка при запуске задания свиньи
Я пытаюсь запустить свинью из oozie, но у меня ничего не получается.
Oozie stacktrace:
java.lang.RuntimeException: java.lang.ClassNotFoundException: класс org.apache.oozie.action.hadoop.PigMain не найден в...
186 просмотров
schedule
28.02.2022
Сценарий запуска Oozie после запуска координатора
Я ищу способ запустить собственный скрипт при запуске координатора.
Поэтому, когда координатор запускает задание, мне нужно, например, сделать вызов API для сторонней службы.
Есть ли способ или обходной путь, чтобы сделать это возможным?...
42 просмотров
schedule
13.10.2022
Как запланировать задание OOZIE, если в данной папке произошли какие-либо изменения?
Я хочу запланировать задание oozie на основе папки, т.е.
У меня есть папка в папке HDFS, и каждый день в эту папку будет добавляться один файл в формате date.txt (exp: 20160802.txt).
Я хочу запланировать пакет OOZIE, если какой-либо новый файл...
551 просмотров
schedule
22.04.2022
глобальная переменная HADOOP_USER_NAME oozie?
есть ли способ объявить HADOOP_USER_NAME как глобальную переменную в рабочем процессе oozie? на самом деле я создаю несколько действий оболочки для своего проекта, но неэффективно объявлять HADOOP_USER_NAME для каждого действия оболочки, поэтому мне...
2128 просмотров
schedule
03.11.2022
Повтор действий координатора Узи
Я пытаюсь повторно запустить неудачные координаторы, используя приведенную ниже команду, но каждый раз он перезапускается с каким-то случайным действием координатора вместо самого старого действия координатора.
oozie job -rerun {идентификатор...
185 просмотров
schedule
15.10.2022
Как установить текущий месяц, день или год в качестве параметра рабочего процесса в координаторе (на Hue)
У меня есть рабочий процесс Oozie, который имеет три параметра, которые ожидают день, месяц и год соответственно. Этот рабочий процесс отлично работает с ручным вводом. Я сейчас ищу координатора, который ежедневно запускает этот рабочий процесс и...
1454 просмотров
schedule
10.02.2024
Создание каталога в hdfs с помощью oozie
В рабочем процессе oozie, как мы можем создать каталог в HDFS и скопировать файлы из Linux в HDFS
Я хочу сделать следующее в рабочем процессе
hdfs dfs -mkdir -p /user/$USER/logging/`date "+%Y-%m-%d"`/logs
hdfs dfs -put...
1594 просмотров
schedule
08.08.2022
