Вопросы по теме 'presto'
Может ли Presto подключаться к другим дистрибутивам Hadoop и выполнять запросы
Я вижу, что у Presto есть плагин только для CDH4. Могу ли я подключиться к другим дистрибутивам, таким как HortonWorks, из этого и что для этого нужно. Без специального плагина я сталкиваюсь с ошибками «пустой хост пути» при выполнении запросов от...
505 просмотров
schedule
30.03.2023
несоответствующий ввод 'ROW', ожидающий ошибки ‹EOF› при создании таблицы куста
Я пытаюсь создать таблицу кустов с помощью java.
Вот мой код:
import java.sql.ResultSet;
import java.sql.SQLException;
import java.sql.Connection;
import java.sql.Statement;
import java.sql.DriverManager;
public class HiveCreateTable {...
2520 просмотров
schedule
07.12.2023
Presto на Amazon S3
Я пытаюсь использовать Presto в корзине Amazon S3, но не нашел много соответствующей информации в Интернете.
Я установил Presto на микро-экземпляр, но не могу понять, как мне подключиться к S3. Есть ведро и в нем файлы. У меня есть работающий...
9008 просмотров
schedule
25.11.2023
Выбрать Top # в Presto SQL?
Действительно ли Presto SQL не хватает функциональности TOP X в операторах SELECT?
Если да, есть ли пока обходной путь?
https://prestodb.io/
21318 просмотров
schedule
14.01.2024
Presto не удалось создать инжектор с коннектором локального файла
Я использую presto-server-0.149 в macOS 10.11. Просто для тестирования я запускаю один узел, и все в порядке. Когда я добавляю etc/catalog/localfile.properties с:
connector.name=localfile...
2239 просмотров
schedule
19.02.2022
Показать таблицы из всех схем в Presto
В Престо
SHOW SCHEMAS; возвращает все схемы
SHOW TABLES FROM foo; возвращает все таблицы для схемы foo
Есть ли простой способ вернуть таблицы из всех схем в Presto?
15341 просмотров
schedule
27.09.2022
Presto не может распознать учетные данные AWS (как IAM, так и ключи)?
Я пытаюсь настроить Presto на экземпляре AWS EC2, чтобы я мог выполнять запросы к файлам, хранящимся в S3. Я знаю, что вы можете / должны использовать EMR, но я ограничен EC2. Я создал базу данных Derby для своего хранилища метаданных, настроил HDFS...
1820 просмотров
schedule
24.04.2024
Как Presto работает с реляционной базой данных
Я пытаюсь узнать о PrestoDB, и у меня есть база данных MySql. Эта база данных представляет собой относительно небольшую базу данных, и я использую, чтобы понять, как presto работает с соединениями JDBC.
Я уже использовал presto для подключения к...
768 просмотров
schedule
13.03.2022
Требуется ли presto хранилище метаданных улья для чтения файлов паркета из S3?
Я пытаюсь создать файлы паркета в файле S3, используя искру, с целью, чтобы presto можно было использовать позже для запроса с паркета. В основном это выглядит так,
Kafka-->Spark-->Parquet<--Presto
Я могу создать паркет в S3,...
4099 просмотров
schedule
31.03.2022
AWS Athena и date_format
У меня возникла проблема при форматировании метки времени с помощью сервиса Amazon Athena.
select date_format(current_timestamp, 'y')
Возвращает только y (строку).
Единственный способ форматирования дат в Amazon Athena, который я нашел, -...
39365 просмотров
schedule
20.05.2023
Извлечь все ключи JSON
У меня есть столбец JSON j , например:
{'a': 2, 'b': {'b1': 3, 'b2': 5}}
{'c': 3, 'a': 5}
{'d': 1, 'c': 7}
Как я могу получить от Presto все отдельные (высокоуровневые) имена ключей? Т.е. Мне что-то нравится
select distinct foo(j)...
5626 просмотров
schedule
06.01.2024
Как добавить поле из одной строки в совокупность строк presto sql
У меня есть предварительный запрос, чтобы вернуть общее количество фруктов, съеденных конкретным человеком. Я также хотел бы включить самый последний раз, когда фрукт был съеден.
Вот мой запрос:
SELECT
id,
fruittype,
count(*) as...
168 просмотров
schedule
09.04.2023
Маленькие полоски Spark ORC
Мы используем Spark для выравнивания данных потока посещений, а затем записываем то же самое в S3 в формате ORC+zlib. Я пытался изменить многие настройки в Spark, но все же результирующие размеры полос создаваемого файла ORC очень малы (‹2 МБ)....
894 просмотров
schedule
30.08.2022
ОШИБКА создания пула соединений Presto JDBC Отключение режима автоматической фиксации не поддерживается
Я пытаюсь использовать Spring-JDBC для подключения к Presto и использую Hikari CP для источника данных. Вот моя конфигурация:
@Bean
public DataSource myDataSource() {
HikariDataSource hikariDataSource = new HikariDataSource();...
1047 просмотров
schedule
07.03.2024
Настройка свойств конфигурации улья для Presto в EMR
Я пытаюсь обновить свойства коннектора улья внутри /etc/presto/conf/catalog/hive.properties . Я добавил следующее:
hive.s3.max-client-retries=50
hive.s3.max-error-retries=50
hive.s3.max-connections=500
hive.s3.connect-timeout=5m...
1893 просмотров
schedule
19.05.2022
Как увидеть каждую память подзапросов, используемую в Presto UI
На presto-ip:port/ui/ сайте.
Когда я перехожу к -> Обзор запроса -> Текущий план, я вижу, что на этапе 6 выводятся данные 371 МБ (что для меня много).
Как я мог узнать, к какой части запроса он принадлежит? Я нажимаю на этап 6 и не показываю...
277 просмотров
schedule
23.03.2022
Атрибуция транзакции SQL
Мне нужно извлечь общее количество пользователей, совершивших транзакции, на основе различных периодов ретроспективного анализа.
Для начала у меня есть такая таблица:
user_id date action
1 2018/01/01 click
3...
59 просмотров
schedule
28.06.2022
Amazon Athena: преобразование метки времени bigint в удобочитаемую метку времени
Я использую Афину для запроса даты, хранящейся в формате bigInt. Я хочу преобразовать его в удобную метку времени.
Я пытался:
from_unixtime(timestamp DIV 1000) AS readableDate
А также
to_timestamp((timestamp::bigInt)/1000,...
9484 просмотров
schedule
03.09.2022
Сумма по определенным сгруппированным строкам
У меня есть набор данных, который показывает количество гостей и доход для каждой категории потребителей (потребитель, который посетил один раз, дважды, 3 раза, 4 раза, 5 раз и т. д.).
Это выглядит так:
Мой запрос, чтобы получить эту таблицу...
30 просмотров
schedule
29.05.2022
Использование Python в Presto Query
Есть ли способ вставить код Python в SQL? Это можно сделать для Microsoft SQL Server, как показано в этом примере: https://www.tableau.com/about/blog/2017/12/how-use-tableau-sql-server-r-and-python-78882
Однако мне нужно сделать это для Presto...
604 просмотров
schedule
26.08.2022
