Вопросы по теме 'hbase'
Расширенные запросы в HBase
Учитывая следующий сценарий схемы HBase ( из официального FAQ )...
Как бы вы спроектировали таблицу Hbase для связи «многие ко многим» между двумя объектами, например «Студент» и «Курс»?
Я бы определил две таблицы:
Студент:...
6525 просмотров
schedule
16.04.2022
Поиски (и общие запросы) с помощью HBase и/или Cassandra (лучшие практики?)
У меня есть объект модели User с несколькими полями (свойствами, если хотите). Произнесите «имя», «фамилию», «город» и «год рождения». Каждый пользователь также получает «уникальный идентификатор».
Я хочу иметь возможность искать по ним. Как мне...
1755 просмотров
schedule
10.06.2023
Структура списка смежности в HBase
Я пытаюсь реализовать следующий алгоритм сокращения графа в
Граф является неориентированным взвешенным графом
Я хочу удалить все узлы только с двумя соседями
и обновить вес
Взгляните на следующую иллюстрацию:...
859 просмотров
schedule
05.04.2023
Что происходит, когда узел HBase выходит из строя?
HBase замечателен , но...
Что произойдет с данными, когда узел (взорвется/сгорит/будет украден/разорван на куски сумасшедшим ИТ-специалистом на свободе)?
Данные потеряны?
Может ли кластер автоматически восстанавливаться?
Могу ли я...
324 просмотров
schedule
10.12.2023
Как вы используете собственный компаратор с SingleColumnValueFilter в HBase?
Я пытаюсь отфильтровать строки из таблицы HBase, используя два SingleColumnValueFilter , чтобы вернуть все записи, попадающие в диапазон длинных значений для столбца. Согласно документации для SingleColumnValueFilter, он выполняет лексикографическое...
4002 просмотров
schedule
08.04.2022
могут ли HBase, MapReduce и HDFS работать на одной машине, на которой установлен и запущен Hadoop?
Я работаю над дизайном поисковой системы, которая будет работать в облаке. Мы только начали и не очень хорошо разбираемся в Hdoop. Может ли кто-нибудь сказать, могут ли HBase, MapReduce и HDFS работать на одной машине, на которой установлен и...
825 просмотров
schedule
10.09.2023
HBase NoServerForRegionException?
Я получаю это исключение, когда какое-то время не общался с HBase:
org.apache.hadoop.hbase.client.NoServerForRegionException: истекло время ожидания при попытке найти корневой регион, потому что: в соединении отказано
связано ли это с...
1900 просмотров
schedule
17.02.2023
Проблема с расширением HBase Put
У меня возникла проблема при попытке расширить класс HBase Put.
у меня такой код
public class HBasePut extends Put {
//here i define my own adds because i have only string "keys"
//so i dont have to use Bytes.toBytes() every time...
773 просмотров
schedule
29.11.2022
Hbase-конфигурация базы данных
Я новичок в Hbase. Я создал таблицу с помощью оболочки hbase. По умолчанию она хранится в папке / tmp. Я хочу изменить место хранения. где я должен изменить конфигурацию. Заранее спасибо..
290 просмотров
schedule
23.05.2023
обновить однонаправленный один к одному проблема
У меня есть два класса домена:
class Domain1 {
String val11
String val12
Domain2 domain2
static constraints = {
}
}
class Domain1Controller{
/**
* Create new Domain1 entity instance
*/
def create = {
def domain1 = new...
447 просмотров
schedule
13.04.2022
Hbase API, запросы на Java, нужна помощь
Я использую HBase для хранения файлов.
Например: у меня есть 8 строк, следующие ключи в HBase. Расположение каждой папки является ключом.
/usr/
/usr/folder1/
/usr/folder1/folder1_1/
/usr2/
/usr2/folder2/
/usr2/folder2/folder2_1/
/usr3/...
268 просмотров
schedule
19.03.2024
Должно ли задание MapReduce, запущенное оболочкой HBase для подсчета строк таблицы, отображаться в JobTracker?
Справка оболочки HBase для команды count гласит:
Подсчитайте количество строк в таблице. Эта операция может занять ДОЛГОЕ время (запустите '$HADOOP_HOME/bin/hadoop jar hbase.jar rowcount', чтобы запустить подсчитывающее задание mapreduce)....
829 просмотров
schedule
06.11.2023
Масштабируемая распределенная файловая система для больших двоичных объектов, таких как изображения и другие документы
Cassandra и HBase не поддерживают эффективное хранение больших двоичных объектов, таких как изображения. Хранение непосредственно в HDFS подчеркивает Namenode. Haystack от Facebook не является открытым исходным кодом. Итак, является ли Lustre...
3987 просмотров
schedule
13.11.2023
Аналог транзакции в HBase
У меня есть небольшая проблема - я не могу понять, как создать транзакцию (или ее аналог) в HBase . Например, есть две таблицы, и я хочу вставить значение в первую и обновить значение во второй таблице. Я обнаружил, что HTable имеет метод:...
1712 просмотров
schedule
25.11.2022
HIVE/HDFS для хранения данных датчиков в реальном времени в больших масштабах?
Я оцениваю системы сбора данных датчиков со следующими требованиями:
1 миллион конечных точек отправляют 100 байт данных каждую минуту (в виде временных рядов).
В основном миллионы мелких операций записи в хранилище.
This data is...
2521 просмотров
schedule
23.06.2022
Можно ли создать кластер Hadoop, включающий Hbase, Hive и Pig, на EC2 с помощью Whirr
Можно ли создать кластер Hadoop с Hbase, Hive и Pig на Amazon EC2 с помощью Whirr??
294 просмотров
schedule
11.07.2023
Каков самый быстрый способ массовой загрузки данных в HBase программно?
У меня есть обычный текстовый файл, возможно, с миллионами строк, который требует пользовательского синтаксического анализа, и я хочу загрузить его в таблицу HBase как можно быстрее (используя клиент Hadoop или HBase Java).
Мое текущее решение...
24208 просмотров
schedule
20.04.2023
Hadoop MultipleOutputFormats в HFileOutputFormat и TextOutputFormat
Я запускаю задание ETL с Hadoop, где мне нужно вывести действительные, преобразованные данные в HBase и внешний индекс для этих данных в MySQL. Моя первоначальная мысль заключалась в том, что я мог бы использовать MultipleOutputFormats для экспорта...
698 просмотров
schedule
14.01.2023
Кластер Hbase Hadoop.. java.io.IOException: java.lang.NoSuchMethodExceptio
Я пытаюсь настроить кластер hbase, который работает поверх кластера hadoop. Оба кластера запущены и работают, но когда я пытаюсь создать таблицу в клиенте Hbase, я вижу следующую ошибку в журналах!
Compute-0-11 : это имя узла для кластера Hadoop....
726 просмотров
schedule
11.09.2023
Непрерывный перенос данных из mysql в Hbase
Я установил hadoop и hbase для аналитики в реальном времени. Проблема, с которой я сталкиваюсь, заключается в переносе данных в режиме онлайн из mysql в Hbase.
Инструмент sqoop полезен для массовой миграции данных, есть ли способ, которым данные...
2159 просмотров
schedule
13.06.2023
