Вопросы по теме 'udf'
Скрипт Pig не может зарегистрировать UDF
У меня есть простой скрипт Pig, который использует созданную мной UDF Python. Сценарий завершится нормально, если я удалю часть UDF. Но когда я пытаюсь зарегистрировать свою UDF, я получаю следующую ошибку:
ERROR 2997: Encountered IOException....
696 просмотров
schedule
05.06.2022
Каков наилучший метод ведения журнала в классах Java Hadoop MapReduce?
Я написал классы, которые работают на Hadoop (2.1 или 2.2) как часть запроса Hive UDF/UDTF. В конце концов он запускается как задание Map/Reduce. Приложение выполняет различные задачи, и я хочу добавить ведение журнала на основе уровня журнала.
Я...
2463 просмотров
schedule
14.07.2023
определяемая пользователем функция (TSQL), недетерминированный и вычисляемый постоянный столбец
У меня есть таблица, в которой среди столбцов есть два столбца типа INT , и они называются:
ExpirationMonth
и
ExpirationYear
Я хочу добавить в эту таблицу новый столбец, значение которого будет рассчитываться на основе значений...
831 просмотров
schedule
23.07.2023
Есть ли какая-нибудь функция, такая как настройка в свинке udf
Я хочу добавить файл mapDB для использования всеми картографами в UDF свиньи. Как я могу выполнить однократную настройку этого объекта mapDB? Есть ли у нас функция, которая будет вызываться только один раз при создании экземпляра pig udf?
Спасибо.
77 просмотров
schedule
29.02.2024
Использование Hive UDF в Pig
Есть ли причина не использовать Hive UDF в Pig 0.15?
Я думаю в основном о производительности, но если есть какие-то другие причины, я был бы рад их услышать.
Например, у нас есть простая Java-реализация lpad, которую мы используем. Должны ли мы...
528 просмотров
schedule
26.06.2023
Простая проблема Python UDF для свиньи Hadoop
Я пишу очень простой Python, и вот мой код UDF, код свиньи и сообщение об ошибке, есть идеи, что не так? Спасибо.
UDF (test.py),
@outputSchema("cookie:chararray")
def getSimple():
return 'Hello'
Код свиньи,
register test.py using...
113 просмотров
schedule
18.01.2023
Есть ли тип данных для формата времени чч: мм: сс в Hive
Я обрабатываю файлы, содержащие информацию о звонках разных пользователей. В файле данных есть поле call_duration , которое содержит значение в формате hh:mm:ss . например: 00:49:39 , 00:20:00 и т. д.
Я хотел бы рассчитать общую...
4158 просмотров
schedule
28.09.2022
Улей str_to_map
У меня есть пример данных, как показано ниже Id (строка), delimProperties (строка) == ==============
1, foo.prop=foo value|bar.prop=значение bar 2, foo2.prop=значение foo2|bar2.prop=значение bar2
Вот мой dml 1)
CREATE TABLE IF NOT EXISTS...
5623 просмотров
schedule
22.03.2023
udf в Spark SQL
У меня есть два фрейма данных: dataDf и regexDf. dataDf имеет большое количество записей, а regexDf имеет два столбца регулярного выражения. Моя проблема в том, что мне нужно отфильтровать dataDf на основе двух его столбцов, соответствующих...
7601 просмотров
schedule
13.11.2022
Использование AliasableEvalFunc и чтение пакета кортежей в Java UDF
У меня есть сценарий свиньи, который отправляет кортеж, который, в свою очередь, содержит набор кортежей в UDF Java. В UDF я читаю кортеж по псевдониму, используя AliasableEvalFunc . Я могу прочитать сумку по ее псевдониму, но не кортежи внутри...
161 просмотров
schedule
05.12.2022
Переименовать функцию КУБЗНАЧЕНИЕ во что-то более короткое?
Я использовал довольно длинную встроенную функцию КУБЗНАЧЕНИЕ(), с которой очень сложно работать. Это выглядит примерно так:
=IFERROR(VALUE(CUBEVALUE(arg1;arg2;arg3));CUBEVALUE(arg1;arg2;arg3))
Из-за функции КУБЗНАЧЕНИЕ и ее аргументов она...
450 просмотров
schedule
24.07.2022
Есть ли способ распечатать или зарегистрировать значения переменных в функции udf в bigquery?
У меня есть функции sql и udf, которые отлично работают вместе.
Я хочу сравнить дату записи, которая является целым числом и имеет формат yyyymmdd, и сегодняшнюю дату в моей функции defineText().
Есть ли такой метод, как console.log() или...
1196 просмотров
schedule
29.10.2022
Excel VBA UDF выполняется в немедленном окне, сбой на рабочем листе
UDF "NAV()" предназначен для поиска правильного отчета на сетевом диске на основе первого аргумента (всегда дата), а затем перебирает все рабочие листы, чтобы найти фрагмент данных с той же строкой, что и второй аргумент, и тем же столбцом, что и...
241 просмотров
schedule
24.11.2022
Ошибка агрегирования UDF Aerospike NodeJS
Я создал агрегатную функцию, которая работает в aerospike, которая работает в AQL:
AGGREGATE filter2.check_teamId('123', 0, 1456499994597) ON analytics.tracking
WHERE teamId = '123'
Это возвращает результаты. Затем я пытаюсь использовать...
334 просмотров
schedule
18.12.2022
Как написать программу на Java для создания UDF HIVE, который выполняет операцию MINUS?
Может ли кто-нибудь дать мне больше информации о том, как написать JAVA-программу для создания UDF , которая выполняет операцию MINUS , поскольку MINUS не поддерживается в >УЛЕЙ . Этого можно добиться с помощью левого внешнего соединения....
125 просмотров
schedule
03.05.2023
Как мы можем передать постоянное значение в пользовательской функции Cassandra?
Как мы можем передать постоянное значение в Cassandra «Пользовательская функция»? Подпись моего UDF:
CREATE OR REPLACE FUNCTION spatial_keyspace.state_group_and_max( state map<text, int>, type text, pkey int, level int)
CQL-запрос:...
381 просмотров
schedule
16.01.2023
выполнение hive udf через сценарий оболочки
У меня есть Hive Udf, который хорошо работает в терминале улья. Что я хочу, я хочу выполнить его через сценарий оболочки. На терминале улья я могу выполнить следующие команды:
use mashery_db;
add jar...
710 просмотров
schedule
09.09.2022
Функция VBA UDF заставляет excel не отвечать
У меня есть очень простой код, который вызывает сбой Excel.
Я отладил переменные, как видно в коде, и они выглядят нормально, за исключением того, что всего через несколько секунд Now() не меняется, а waitTime не меняется, хотя время отличается...
148 просмотров
schedule
06.09.2023
Создание пользовательской функции для firebird 2.5 с помощью c++builder 2010
Я попытался создать простую определяемую пользователем функцию (UDF) для Firebird 2.5 с C++ Builder 2010, но мне не удалось заставить ее работать в Firebird.
Создание проекта DLL с настройкой по умолчанию в C++ Builder 2010.
Добавление модуля...
1292 просмотров
schedule
24.01.2023
Разница между картой и udf
Когда я работаю с DataFrames в Spark, мне иногда приходится редактировать только значения определенного столбца в этом DataFrame. Например. если у меня есть поле count в моем фрейме данных, и если я хочу добавить 1 к каждому значению count , то...
4516 просмотров
schedule
27.12.2022
