Вопросы по теме 'mapper'
Как получить ссылку на объект Lift MetaMapper по имени?
При моделировании таблицы аудита я включил поля, необходимые для поиска исходной проверяемой записи (oid: String, className: String). Я хотел бы программно найти MetaMapper для имени класса Mapper.
Например, если у меня есть:
class Foo extends...
301 просмотров
schedule
03.12.2022
Разархивируйте файлы в каталог, в котором они находятся с Ant.
Это должно быть просто, но я не могу найти способ сделать это. Мне нужно извлечь любые zip-файлы из подкаталогов каталога в тот же подкаталог с помощью Ant. Файлы передаются задаче ant как набор файлов с подстановочными знаками, например. * /...
1089 просмотров
schedule
30.08.2022
Преобразователи GWT POJO-JSON?
Я искал картограф GWT POJO-JSON. В ответах на другой вопрос и поиске в Google я нашел следующие решения:
Типы наложений GWT
GWT AutoBean
пирити
gwtprojsonserializer
gwt-jsonizer
Мой вопрос заключается в том, имеет ли...
2517 просмотров
schedule
17.09.2023
проблема присоединения к доктрине 2 [с картографами xml]
Я пытаюсь объединить две таблицы, но застреваю в написании правильных преобразователей xml (настройка и доступ к объектам проверены и работают нормально)
На основе MySQL, Doctrine 2.0.4 и ZF-1.11.
Я использую XmlDriver('path\to\mappers);...
586 просмотров
schedule
17.03.2022
почему MappedStringIndex не включен в список полей в Mapper
Почему у Mapper String в качестве первичного ключа MappedStringIndex не отображается в списке всех полей, полученных с помощью метода Mapper's allFields ?
Мой Mapper работает так...
class DummyMapper extends KeyedMapper[String,DummyMapper]...
75 просмотров
schedule
13.08.2023
Отличается от QueryParam в Mapper ORM лифта
Как мы можем использовать Distinct QueryParam для поиска отдельных записей из таблицы БД. ?
207 просмотров
schedule
01.11.2023
В Hadoop как вы печатаете в методе configure ()?
В нижнем примере в этом руководстве по Hadoop есть метод «configure()». http://hadoop.apache.org/common/docs/r0.20.2/mapred_tutorial.html#Source+Code-N10FD0
Я хотел поместить в него оператор печати, чтобы знать, что он прибывает туда. Однако...
612 просмотров
schedule
29.07.2023
Как начать фазу карты, пока работает фаза уменьшения
У меня есть этот сценарий. Работа А и Работа Б. Есть ли возможность начать фазу сопоставления JobB с использованием данных, предоставленных фазой сокращения JobA, пока это все еще работает?
Спасибо!
95 просмотров
schedule
20.02.2023
Сжатие вывода картографа Hadoop не работает?
Я использую hadoop cdh4.1.2, и моя программа сопоставления — это почти эхо входных данных. Но на моей странице статуса работы я увидел
FILE: Number of bytes written 3,040,552,298,327
почти равно
FILE: Number of bytes read...
310 просмотров
schedule
12.05.2022
Hadoop: выходной файл имеет двойной вывод
Я запускаю программу Hadoop и имею следующий входной файл, input.txt :
1
2
mapper.py :
import sys
for line in sys.stdin:
print line,
print "Test"
reducer.py :
import sys
for line in sys.stdin:
print line,
Когда я...
352 просмотров
schedule
01.06.2023
Как я могу написать итерацию на Python с помощью редуктора mrjob mapper, для которого счетчик является частью вычисления в цикле?
У меня есть программа, которая итерирует маппер и редьюсер n раз подряд. Однако для каждой итерации сопоставитель каждой пары ключ-значение вычисляет значение, зависящее от n .
from mrjob.job import mrjob
class MRWord(mrjob):
def...
1414 просмотров
schedule
27.03.2022
Класс Mapper-Reducer по умолчанию
Предположим, у меня есть два набора данных:
hello world
bye world
и
hello earth
new earth
и я хочу запустить задачу уменьшения карты, которая не указывает класс картографа или класс редуктора, поэтому будут вызываться картограф и...
1933 просмотров
schedule
06.05.2024
Установите количество задач карты
При настройке задания Map Reduce я знаю, что можно задать количество задач уменьшения с помощью метода job.setNumReduceTasks(2); .
Можем ли мы установить количество задач карты?
Я не вижу никаких способов сделать это.
Если такой...
162 просмотров
schedule
04.10.2022
использование отложенного выполнения IQueryable
Я работаю над простым отображением EntityFramework ‹> DTO, оно отлично работает, за исключением отложенного выполнения, у меня есть следующий код:
public abstract class Assembler<TDto, TEntity> : IAssembler<TDto, TEntity>
where...
962 просмотров
schedule
26.08.2022
Работа картографа Tibco не дает выходных данных
Я использовал картографическую активность. Но когда я протестировал процесс, я не увидел никаких результатов действия, хотя он имеет действительный ввод. Может кто-нибудь пролить свет на этот вопрос, пожалуйста
966 просмотров
schedule
28.10.2022
Сопоставление двух одинаковых классов в java со сторонней библиотекой
Мне нужно преобразовать один объект в другой. Объект вложен во многие внутренние объекты. Но как исходный, так и конечный объекты идентичны по типу данных, имени переменной, имени класса и т. д. Есть ли какой-либо эффективный инструмент для этого с...
944 просмотров
schedule
01.09.2023
Запуск нескольких редукторов на одном выходе из mapper
Я реализую функцию левого соединения, используя уменьшение карты. Левая сторона содержит около 600 миллионов записей, а правая - около 23 миллионов записей. В картографе я делаю ключи, используя столбцы, используемые в условии левого соединения, и...
86 просмотров
schedule
10.12.2023
Как отладить, почему задание карты завершается сбоем после нескольких попыток
Я написал задание mapreduce для сканирования таблицы hbase за определенный период времени, чтобы подсчитать определенные элементы, необходимые для анализа.
Картографы в работе MR продолжают давать сбои, но я не знаю, почему. Кажется, что каждый...
729 просмотров
schedule
03.09.2023
Кто-нибудь переопределил метод Mapper run(Context) в ваших реализациях?
https://hadoop.apache.org/docs/current/api/org/apache/hadoop/mapreduce/Mapper.html#method.summary
запустить (контекстный) метод org.apache.hadoop.mapreduce.Mapper
a). Expert users can override this method for more complete control over...
320 просмотров
schedule
21.04.2024
Значение параметров Hadoop Mapper
Я новичок в Hadoop, и у меня есть вопрос о параметрах: пример подсчета слов см. ниже во фрагменте кода:
public static class TokenizerMapper
extends Mapper<LongWritable, Text, Text, IntWritable> {
.....
public void map(LongWritable...
364 просмотров
schedule
15.09.2022
