Вопросы по теме 'hortonworks-data-platform'
OOZIE — E0803: ошибка ввода-вывода
Я пытаюсь выполнить в дистрибутиве Hortonworks пример oozie с уменьшением карты... но он еще работает...
Во-первых, вот мои пользовательские конфигурации Hadoop (от Ambari). Мне пришлось изменить основной xml, чтобы исправить мою проблему...
2324 просмотров
schedule
08.02.2023
Как начать работу с Hadoop в Oracle Virtual box
Я настроил Hadoop с песочницей Hortonworks и смонтировал ее с помощью Oracle Virtual Box. Теперь, когда я запускаю виртуальную машину, система Linux для Hadoop загружается, и для запуска есть опция Alt + F5. Но когда я нажимаю Alt + F5, он...
889 просмотров
schedule
13.06.2023
Улей: СОЗДАЙТЕ ТАБЛИЦУ в файлах Unicode csv
В кластере HDInsight попытка создать таблицу Hive в CSV-файлах Юникода.
Invoke-Hive -Query @"
CREATE EXTERNAL TABLE TestUnicode(Numeric1 INT,Numeric2 INT,Numeric3 INT,Name String)ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE...
1407 просмотров
schedule
24.11.2023
Как разрешить Apache Spark в Windows получать доступ к Hadoop в Linux?
Во-первых, у меня почти нет опыта работы с Apache Hadoop и Apache Spark.
На данный момент я хочу следующее:
Hadoop работает в песочнице Hortonworks Sandbox 2.1, установленной на компьютере с Windows 7.
Оболочка Spark и программы Spark...
3164 просмотров
schedule
14.05.2024
Некоторая переадресация портов не работает на бродяге
Моя хост-ОС — Linux Mint17, а гостевая ОС — CentOS 6.5.
Я пытаюсь перенаправить 3 порта в vagrantfile, но на самом деле с хоста работает только 1 порт.
Содержимое бродячего файла:
node.vm.hostname = "node.xyz.com"
#namenode endpoint...
1119 просмотров
schedule
30.01.2023
Powershell Windows Server 2012. Ошибка пути при установке Hortonworks Data Platform (HDP)
Я пытаюсь установить Hadoop для Windows (Hortonworks Data Platform 2.0) в среде Windows Server 2012 и создать следующую команду powershell
$currentPath = (Get-ItemProperty -Path $key -name) .Path + ';'
я получаю эту ошибку
At line:1...
152 просмотров
schedule
04.08.2022
Hadoop на Google Compute Engine: как добавить внешнее ПО
Мне нужно настроить кластер Hadoop на Google Compute Engine. Хотя это кажется простым либо с помощью веб-консоли Click&Deploy , либо с помощью командной строки. инструмент bdutil , я обеспокоен тем, что для моих задач требуются дополнительные...
438 просмотров
schedule
04.09.2023
URL-адрес узла имени Hadoop для WebHDFS
У меня есть кластерная установка именованного узла. Именованные узлы настроены как активные и пассивные.
Когда я делаю вызов WEBHDFS, предоставляется URL-адрес
http://:/webhdfs/v1/
Поскольку у меня есть 2 именованных узла, у меня есть 2...
830 просмотров
schedule
05.04.2024
Соединение Hive jdbc выдает ошибку, если задействован MR
Я работаю над соединением Hive-jdbc в HDP 2.1.
Код отлично работает для запросов, в которых не используется mapreduce, например «выбрать * из имени таблицы». Тот же код показывает ошибку, когда запрос изменяется с помощью предложения «где» или...
4773 просмотров
schedule
08.12.2023
Свойство управления частотой обновления файла Flume-ng hdfs .tmp
Я пытаюсь обновить файл .tmp с дополнительными событиями каждые 5 минут, мой источник работает медленно, и для получения файла размером 128 МБ в моем приемнике hdfs требуется 30 минут.
Есть ли какое-либо свойство в приемнике hdfs flume, где я могу...
454 просмотров
schedule
26.05.2022
Обновление Hive для разрешения операций обновления/удаления в Ambari
Я создал кластер Hadoop с Ambari 2.1, включая Hive. Я хотел бы иметь возможность выполнять запросы на обновление и удаление в Hive, но похоже, что в настоящее время у меня есть версия 0.12.0.2.0 Hive. Я хотел бы перейти на версию 0.13 или 0.14,...
208 просмотров
schedule
28.02.2024
Правильные шаги по настройке Ambari на виртуальной машине Centos
Я использую: CentOS 7 с Ambari 2.1.1 , чтобы попытаться настроить настройку одного узла на виртуальной машине. Я хочу сделать это, чтобы установить vanilla hadoop и т. д. вместо установки предварительно упакованной виртуальной машины с какой-либо...
386 просмотров
schedule
04.12.2023
Как добавить банку в улей
Я уже некоторое время бьюсь головой о стену о том, как получить улей, эквивалентный столбцу IDENTITY MS SQL, добавленному в таблицу и автоматически увеличенному. Я нашел много ссылок на org.apache.hadoop.hive.contrib.udf.UDFRowSequence , но я...
2549 просмотров
schedule
22.12.2023
Hive: получить явную эксклюзивную блокировку
Конфигурация (hortonworks)
куст: ПОСТРОИТЬ куст-1.2.1.2.3.0.0
Хадуп 2.7.1.2.3.0.0-2557
я пытаюсь выполнить
lock table event_metadata EXCLUSIVE;
Ответ улья:
Ошибка при обработке оператора: FAILED: ошибка выполнения, код...
6403 просмотров
schedule
25.08.2022
Hive через Tez через Hive JDBC — ошибка
Я использую Hortonworks Hadoop HDP-2.3.2.0-2950 Hive поверх механизма Tez.
Ниже 2 запроса из кода Java.
select * from ascii -- работает хорошо
select count(*) from ascii or select count(1) from ascii -- завершается с ошибкой
Мой...
5644 просмотров
schedule
29.12.2023
Как добавить дополнительные хосты в кластер HDP
Я установил кластер HDP 2.2.4.2 с двумя узлами, на каждом из которых установлена ОС CentOS 6.6. Мне нужно добавить еще один хост в этот кластер, но я не нашел возможности сделать это на консоли ambari (версия ambari 2.0). Можно ли как-нибудь...
736 просмотров
schedule
23.03.2024
Запуск jar на hortonworks с HDP вызывает ClassNotFoundException
Я пытаюсь запустить простую программу уменьшения карты из курсары в песочнице hortonworks с HDP. Это программа (взято из https://github.com/jz33/Coursera-Cloud-Computing-Applications-Solution-Manual/blob/master/hw2/TitleCount.java ):
import...
580 просмотров
schedule
05.09.2023
Запрос все еще выполняется после завершения
При успешном выполнении запросов HiveQL (с механизмом выполнения TEZ) в Hue на Hortonworks процесс по-прежнему помечается как «Выполняется» в разделе «Браузер заданий Hue» и «пользовательский интерфейс Hadoop ResourceManager». Должен ли он делать это...
1890 просмотров
schedule
26.10.2022
Сердцебиение Ambari потеряно во время установки
Мы пытаемся установить HDP через Ambari 2.1. Регистрация прошла успешно, но в процессе установки сервер Ambari (ambari-server.log) сообщает, что он потерял сердечный ритм агента.
Сообщение об ошибке: Heartbeat потерян от хоста amabri.agent.com...
1942 просмотров
schedule
19.02.2022
Как увидеть материал, напечатанный во время выполнения задания Hadoop
Я запускаю задание mapreduce в виртуальном боксе HortonWorks. В методе Map() я использую System.out.println("xx") , но не могу найти печатные слова.
Из Как печатать на консоли во время выполнения задания MapReduce в hadoop Я знаю, что могу...
705 просмотров
schedule
08.12.2023
