Вопросы по теме 'amazon-redshift'
Разделение данных по файлам в Hive
Есть ли способ указать Hive разделить данные на несколько выходных файлов? Или, может быть, ограничьте размер выходных файлов.
Я планирую использовать Redshift, который рекомендует разбивать данные на несколько файлов для параллельной загрузки...
8029 просмотров
schedule
15.04.2023
при выгрузке таблицы из amazon redshift в s3, как мне заставить его генерировать только один файл
Когда я выгружаю таблицу из amazon redshift в S3, она всегда разбивает таблицу на две части, независимо от того, насколько она мала. Я прочитал документацию по красному смещению, касающуюся разгрузки, но никаких ответов нет, кроме того, что в нем...
5078 просмотров
schedule
04.03.2024
Как я могу скопировать поле IDENTITY?
Я хотел бы обновить некоторые параметры таблицы, такие как dist и ключ сортировки. Для этого я переименовал старую версию таблицы и воссоздал таблицу с новыми параметрами (их нельзя изменить после создания таблицы).
Мне нужно сохранить поле id из...
16800 просмотров
schedule
07.04.2024
В соединении отказано. Убедитесь, что имя хоста и порт указаны правильно, и что почтмейстер принимает соединения TCP / IP.
Я использую инструментальные средства SQL для подключения к данным красного смещения. Внезапно я получаю сообщение об ошибке: «В соединении отказано. Убедитесь, что имя хоста и порт указаны правильно и что почтмейстер принимает соединения TCP / IP...
1078 просмотров
schedule
31.12.2021
Подключиться к Redshift VPC C #
Не для того, чтобы здесь показаться полным идиотом. Я парень, занимающийся .NET SQL Server, впервые пытаюсь программно подключиться к AWS Redshift через C #, и у меня не получается установить соединение. Честно говоря, я мало знаю об AWS, поэтому,...
2453 просмотров
schedule
16.02.2022
Реализация NULLS FIRST в Amazon Redshift
Я использую функцию окна суммы для номера строки, аналогичную этому запросу -
SELECT field_a,
SUM(1) OVER (PARTITION BY field_b ORDER BY field_c ASC ROWS UNBOUNDED PRECEDING) AS row_number
FROM test_table
ORDER BY row_number;...
1981 просмотров
schedule
31.12.2022
функция generate_series в Amazon Redshift
Я попробовал следующее:
SELECT * FROM generate_series(2,4);
generate_series
-----------------
2
3
4
(3 rows)
SELECT * FROM generate_series(5,1,-2);...
7165 просмотров
schedule
19.01.2024
разделение строк в Redshift
В моей таблице данные следующие:
col1 col2 col3 col4
A1 A2 A3 4
B1 B2 B3 3
C1 C2 C3 1
Мне нужен вывод, как показано ниже:
col1 col2 col3 col4
A1 A2 A3 1
A1...
1446 просмотров
schedule
12.04.2024
Дважды скопируйте в один и тот же столбец в Amazon Redshift
Я пытаюсь скопировать данные из S3 в Redshift. Данные в S3 имеют следующий формат: -
23~2~wanted~210
и я хочу, чтобы он был обновлен до таблицы в Redshift с 3 столбцами.
COPY table1(col1, col2, col3, col2) from 's3://bucket'
CREDENTIALS...
214 просмотров
schedule
23.03.2022
Как GROUP BY и CONCATENATE поля в красном смещении
Как GROUP BY и CONCATENATE поля в красном смещении, например, если у меня есть таблица
ID COMPANY_ID EMPLOYEE
1 1 Anna
2 1 Bill
3 2 Carol
4 2 Dave
Как я могу получить такой результат...
15729 просмотров
schedule
05.12.2022
Amazon redshift: массовая вставка против копирования из s3
У меня есть кластер красного смещения, который я использую для некоторых аналитических приложений. У меня есть входящие данные, которые я хотел бы добавить в clicks таблицу. Допустим, у меня есть ~ 10 новых «кликов», которые я хочу сохранять...
24111 просмотров
schedule
27.02.2022
Скрипт Python зависает при выполнении длительного запроса даже после завершения запроса
У меня есть скрипт Python, который перебирает папки и в каждой папке выполняет файл sql для нашего кластера Redshift (используя psycopg2). Вот код, выполняющий цикл (примечание: он отлично работает для запросов, выполнение которых занимает всего...
823 просмотров
schedule
04.12.2022
Tablefunc в Redshift в сводную таблицу не поддерживается?
Я пытаюсь повернуть таблицу в Redshift. Этот ответ поучителен: https://stackoverflow.com/a/11751905/3063339 Однако, когда я запускаю
CREATE EXTENSION tablefunc;
команда я получаю сообщение об ошибке:
syntax error at or near...
3082 просмотров
schedule
14.02.2022
Как получить текущий месяц и последний месяц в Redshift
Мне интересно, могу ли я получить последний месяц и текущий месяц в Redshift? Я просмотрел функции на http://docs.aws.amazon.com/redshift/latest/dg/r_CURRENT_DATE_TIME_functions.html
В текущем месяце, я думаю, я могу сделать следующее:...
19088 просмотров
schedule
05.04.2024
Скопируйте данные из файла JSON в Redshift с помощью команды COPY
Я пытаюсь загрузить файл JSON в Redshift, используя команду COPY вместе с JSONPath . Насколько я понял, для каждой записи в файле JSON команда COPY генерирует одну запись в SQL.
Мне нужно сгенерировать несколько записей в SQL из одной...
1958 просмотров
schedule
16.11.2023
Как установить время ожидания для очереди в Amazon Redshift?
Я знаю, что существует тайм-аут wlm, который истекает, когда запрос «выполняется» дольше этого времени. Но могу ли я установить тайм-аут на время ожидания запроса в очереди?
3604 просмотров
schedule
07.08.2022
Из массива строк создайте таблицу
В принципе, когда дан список строк,
Я хочу создать таблицу с оператором select .
Например,
"A", "B", "C",
Я хочу создать таблицу в качестве подвыборки, например:
sub-select
+---------+
| "A" |
+---------+
| "B" |...
2577 просмотров
schedule
16.12.2023
копировать из s3 в красное смещение с нестандартным разделителем
Это вызвало у меня серьезную головную боль. У меня простая таблица в красном смещении
create table data.texttest(
col1 int null,
col2 int null,
col3 varchar(256) null,
col4 int null,
col5 int null
);
и следующие говорят...
2131 просмотров
schedule
05.05.2022
Аналитика больших данных с использованием Redshift vs Spark, Oozie Workflow Scheduler с Redshift Analytics
Мы хотим проводить аналитику больших данных для наших данных, хранящихся в Amazon Redshift (в настоящее время в терабайтах, но со временем они будут расти).
В настоящее время кажется, что вся наша аналитика может выполняться с помощью запросов...
1801 просмотров
schedule
22.02.2022
Поддерживает ли AWS Redshift реплику?
Мы работаем с базой данных AWS Redshift и хотели бы создать онлайн-репликацию (которая также полностью обновляется с учетом изменений)?
Причина в том, что мы хотим иметь отдельную среду для одного из наших отделов, чтобы он мог выполнять свои...
4560 просмотров
schedule
26.01.2023
