Вопросы по теме 'udf'
Собственная UDF Impala (Cpp) случайным образом дает результат NULL для одних и тех же входных данных в одной таблице для нескольких вызовов в одном запросе.
У меня есть Native Impala UDF (Cpp) с двумя функциями. Обе функции дополняют друг друга.
String myUDF(BigInt)
BigInt myUDFReverso(String)
myUDF("myInput") дает некоторый вывод, который, когда myUDFReverso(myUDF("myInput")) должен вернуть...
236 просмотров
schedule
29.02.2024
Ошибка PIG UDF. Можно решить с помощью импорта.
Здравствуйте, у меня возникла проблема с запуском скрипта свиньи.
Вот мой сценарий свиньи:
REGISTER 'python_udf.py' USING jython AS myfuncs;
dataframe = LOAD 'udftest.csv' using PigStorage(',') AS (x:int);
result1 = foreach dataframe generate...
641 просмотров
schedule
29.01.2024
Excel 2010 Пользовательская функция, которая возвращает результат, НО также устанавливает комментарии к ячейкам. Сбой Excel, когда пользователь нажимает Fx
У нас есть определяемая пользователем функция VBA. Эта функция возвращает результат, но также устанавливает комментарий к ячейке. Работает, получаем результат и комментарий ставится.
Мы включили справку пользователя по этой функции. Однако, если...
105 просмотров
schedule
17.10.2023
Hive UDTF не принимает вывод более двух столбцов
Улей UDTF, который я закодировал, работает нормально, поскольку количество указанных выходных столбцов равно двум. Но в тот момент, когда я меняю его на три и повторно развертываю, появляется следующее сообщение об ошибке.
FAILED:...
633 просмотров
schedule
31.05.2024
PIG суммирует соответствующие элементы в кортеже
У меня есть большая сумка кортежей, содержащих постоянное, но неизвестное количество целых чисел (более 200). Есть ли способ суммировать соответствующие элементы из этого кортежа?
Например, SUM_TUPLES({(1, 0, 1), (2, 1, 0)}) должно вернуть (3,...
491 просмотров
schedule
02.03.2022
Pig UDF, файл в Distributed Cache удален во время пакетной обработки
public class GetCountryFromIP extends EvalFunc<String> {
@Override
public List<String> getCacheFiles() {
List<String> list = new ArrayList<String>(1);...
152 просмотров
schedule
02.01.2023
Как добавить банку в улей
Я уже некоторое время бьюсь головой о стену о том, как получить улей, эквивалентный столбцу IDENTITY MS SQL, добавленному в таблицу и автоматически увеличенному. Я нашел много ссылок на org.apache.hadoop.hive.contrib.udf.UDFRowSequence , но я...
2549 просмотров
schedule
22.12.2023
Apache Pig — вызов Java UDF ToJSON несколько раз в скрипте
(Первый пост!)
Я играл с примером набора данных резюме. Объект резюме несколько сложен, с несколькими подобъектами. На текущем этапе моего плана я пытаюсь сгладить набор данных, сохраняя подобъекты в виде строк JSON. Я столкнулся с проблемой...
256 просмотров
schedule
07.02.2023
Агрегируйте UDF с помощью Python в Redshift
Мне удалось написать несколько скалярных функций на Python в AmazonRedshift, т.е. брать на вход один или несколько столбцов и возвращать одно значение на основе какой-то логики или преобразования.
Но есть ли способ передать все значения числового...
1559 просмотров
schedule
19.10.2023
Настройка Apache Pig UDF и outputSchema
Я пытаюсь реализовать функцию UDF для обработки различных исходных/входных файлов. Входные файлы отличаются количеством столбцов. Мое намерение состоит в том, чтобы иметь общую функцию UDF. Каждый запуск скрипта pig обрабатывает один тип входного...
460 просмотров
schedule
03.11.2022
Cassandra UDF и пользовательский ввод
Я использую Cassandra 2.2, и у меня проблема с пользовательскими функциями.
Я хочу создать функцию, которая принимает в качестве параметра целочисленный столбец таблицы и другое целое число в качестве пользовательского ввода и умножает два значения...
993 просмотров
schedule
26.04.2024
UDF в красном смещении: можно ссылаться на udf внутри другого
Можно ли вкладывать UDF друг в друга?
Ниже приведен код для вычисления доверительных интервалов в тестах A/B. Конечно, я мог бы написать огромную функцию, которая делает все в одном, но не знаете, как лучше достичь этой цели?
set search_path to...
1248 просмотров
schedule
22.12.2022
xlwings(0.7.0) ошибка импорта UDF
Привет,
Моя проблема в том, что когда я пытаюсь импортировать UDF в Ecxel 2013, я получаю сообщение об ошибке, которое можно увидеть на картинке. Я установил xlwings, и он работает, кроме импорта UDF. Обратите внимание, что я использовал...
219 просмотров
schedule
13.04.2024
Искра Скала ДФ. добавить новый столбец в DF на основе обработки некоторых строк одного и того же столбца
Уважаемые, я новичок в SparK Scala, и у меня есть DF из двух столбцов: «UG» и «Counts», и я хотел бы, чтобы третий способ был представлен в этом списке.
DF: UG, Counts, CUG (столбцы)
of 12 4
of 23 4
134 3...
456 просмотров
schedule
27.01.2023
Пользовательская функция Excel оценивается как ноль, если открыта другая книга
Я создал пользовательскую функцию (UDF) в Excel VBA, которая извлекает содержимое из двух столбцов и оценивает результат. Пользовательская функция вычисляется правильно, если другие рабочие книги не открыты, но изменяется на ноль, когда одновременно...
94 просмотров
schedule
11.04.2023
пользовательская функция не работает vba
у меня есть этот udf, и в основном я хочу получить последнюю дату из вектора (столбца), которая соответствует другим данным в другом столбце, вот код:
Option Explicit
Public Function GetLastDate(Carrier As String, CarrierVector As Range,...
114 просмотров
schedule
28.11.2023
Как заставить мой UDF Amazon Redshift получать строку вместо списка?
Я создал эту функцию, чтобы получить listagg() в качестве параметра и удалить дубликаты.
create or replace function reports.f_listagg_distinct (l varchar(20000))
returns varchar(20000)
immutable
as $$
aux_list = l.split(',')
nl = []
for i in...
744 просмотров
schedule
04.08.2023
Передайте несколько строк в UDF в TSQL, используя PHP PDO
В настоящее время у меня есть запрос в TSQL, который принимает набор идентификаторов продуктов и связанных с ними цен и вычисляет цены со скидкой. На данный момент идентификаторы продуктов и начальные цены находятся в базе данных, и написанный мной...
145 просмотров
schedule
27.02.2023
Hive Udf, тип Struct теряет информацию о типе. Есть ли способ восстановить информацию о типе
В моей таблице в основном столбцы двойного типа и несколько столбцов строк. Я создал таблицу, используя формат строки serde 'org.openx.data.jsonserde.JsonSerDe' из текстового файла. Сначала я объединяю эти столбцы с помощью функции named_struct и...
213 просмотров
schedule
17.03.2022
Spark UDF как параметр функции, UDF не входит в область действия функции
У меня есть несколько UDF, которые я хотел бы передать в качестве аргумента функции вместе с фреймами данных.
Одним из способов сделать это может быть создание пользовательской функции внутри функции, но это создаст и уничтожит несколько...
891 просмотров
schedule
19.06.2022
