Вопросы по теме 'snowflake-cloud-data-platform'

Связь от Искры к Снежинке
Я пишу это не для того, чтобы задать вопрос, а чтобы поделиться знаниями. Я использовал Spark для подключения к Snowflake. Но я не мог получить доступ к снежинке. Похоже, что что-то не так с внутренним драйвером JDBC в блоках данных. Это была...
2686 просмотров

Что такое механизм выполнения Amazon Snowflake
Когда вы используете Hadoop, вы можете настроить YARN для управления заданиями, ресурсами и т. Д. Hadoop. Какая эквивалентная форма для Снежинки Амазонки? Hadoop (HDFS) должен ПРЯТЬ, как Snowflake - __________
243 просмотров
schedule 16.03.2024

Хранилище данных Snowflake - создание идентификатора измерения с буквенно-цифровым символом вместо целого числа
Является ли хорошей идеей генерировать идентификатор измерения с комбинацией буквенно-цифровых символов вместо целого числа в хранилище данных Snowflake? ( https://www.snowflake.com/ ) Например: Допустим, мне нужно построить измерение таблица из...
662 просмотров
schedule 23.01.2024

Таблица фактов не подключена к dim из-за разных источников данных
У меня есть таблица фактов, для которой я получаю данные из источника A . Затем у меня есть источник B , у которого есть одно общее поле с источником A . Итак, мне интересно, как мне заполнить таблицу фактов ключами из нечетких таблиц? Это...
46 просмотров

Отключение ведения журнала БД Snowflake при сохранении уровня журнала как DEBUG
Можно ли отключить ведение журнала Snowflake SQL, которое регистрирует начало и конец соединения с БД и все выполняемые запросы, сохраняя при этом logging.basicConfig(level=logging.INFO) для отладки моей разработки. Может быть, это не относится к...
1446 просмотров

Как использовать строку формата с TRY_TO_TIMESTAMP
Я хочу проверить, является ли строка допустимой меткой времени в соответствии с определенной строкой формата даты. Я использую TO_TIMESTAMP со строкой формата: TO_TIMESTAMP(time_string,'DD/MON/YYYY:HH24:MI:SS TZHTZM') Однако...
182 просмотров
schedule 05.12.2023

Архитектура для Power BI
Я разрабатываю архитектуру для Power BI. Я думаю об этом в Azure Data Lake Store 1-го поколения: DSL => Databricks => Snowflakes => Службы Azure Analysis Services (табличные) => Power BI Актуальна ли эта архитектура? Есть ли подходящие...
131 просмотров

Невозможно подключиться к Snowflake через JAVA REST API
Я не могу подключиться к Snowflake через Java REST API. Следили за документацией Snowflake относительно подключения к Snowflake с драйвером JDBC, но получили следующую ошибку на консоли eclipse: Я выполнил шаги, указанные в документации...
619 просмотров

Может ли Snowflake Auto Purge записи старше X дней?
Для существующей таблицы в Snowflake есть ли способ установить TTL для каждой записи? Другими словами, могу ли я гарантировать, что записи, обновленные / созданные более 90 дней назад, периодически удаляются автоматически.
496 просмотров

Проблема с объединением строк в строку с несколькими соединениями
Я изо всех сил пытаюсь создать оператор в схеме снежинки. Мне нужно показать список всех продуктов и связанных треков, а также включить в каждую строку список имен авторов песен и проценты владения, например. добавьте один столбец, который выглядит...
234 просмотров

Устранение неполадок с ошибкой invalid_client при подключении пользовательского Oauth к Snowflake
OAuth для пользовательского клиента: Ошибка при создании токена доступа и токена обновления из конечной точки авторизации. При получении токена доступа и токена обновления из конечной точки авторизации я получаю ошибку invalid_client, хотя...
293 просмотров
schedule 31.01.2024

При подключении к внутреннему этапу Snowflake я вижу, что он подключается к другому db
Я подключаюсь через недавно выпущенный разъем Snowflake Kafka в автономном режиме. Коннектор может успешно подключиться к моей учетной записи снежинки, но когда он ищет создание внутренней стадии, он не использует правильную базу данных, как в...
143 просмотров

Использование Array_contruct для сортировки столбца массивов с хранимой процедурой после его создания
Я наткнулся на поток для сортировки, когда пытался найти решение для сортировки моего столбца массива. Я попробовал ответить, и у меня возникли проблемы с установкой переменной для хранения массива. Это не работает: SET b = ['asdfk',...
31 просмотров
schedule 21.09.2023

Не могу подключиться к Snowflake через unixODBC. Ошибка: [S1000] [unixODBC] [Snowflake] [ODBC] (11560) Невозможно найти функцию SQLGetPrivateProfileString.
Я установил / настроил драйверы в соответствии с инструкциями здесь: https://docs.snowflake.net/manuals/user-guide/odbc-linux.html#installing-and-configuring-the-odbc-driver-for-linux Получение ошибки: [S1000] [unixODBC] [Snowflake] [ODBC]...
1191 просмотров

Агрегация для всех таблиц в БД
Все таблицы в моей базе данных содержат один и тот же столбец, назовите его date_marked_invalid . Я хотел бы найти MAX() над этими столбцами для всех таблиц. Есть ли способ получить их без запуска SELECT MAX(date_marked_invalid) FROM...
46 просмотров
schedule 02.03.2022

Во время действия DML обнаружена повторяющаяся строка - Снежинка - Таленд
Я хочу загрузить данные в Snowflake с помощью Talend. Я использовал tSnowflakeOutput с опцией Upsert, потому что я хочу вставить данные, если они не существуют в Snowflake, или обновить строки, если они существуют. Я использовал первичный ключ для...
2345 просмотров

Поэтапный внутренний файл csv.gz дает ошибку, что файл не соответствует размеру соответствующей таблицы?
Я пытаюсь скопировать файл csv.gz в таблицу, которую я создал, чтобы начать анализ данных о местоположении для карты. Я столкнулся с ошибкой, в которой говорится, что слишком много символов, и я должен добавить параметр on_error. Однако я не уверен,...
942 просмотров
schedule 22.04.2022

Расширение Liquibase-Snowflake (API) не может подключиться к Liquibase версий 3.7.0+, следовательно, не может использовать env var в наборе изменений
В настоящее время я использую liquibase maven версии: 3.5.3 ( https://mvnrepository.com/artifact/org.liquibase/liquibase-core ), которая является единственной версией, которая работает со снежинкой с помощью Liquibase. Нормальные изменения, связанные...
98 просмотров

Снежинка - Задача не выполняется
Я создал простую задачу с помощью приведенного ниже сценария, и по какой-то причине она никогда не запускалась. CREATE OR REPLACE TASK dbo.tab_update WAREHOUSE = COMPUTE_WH SCHEDULE = 'USING CRON * * * * * UTC' AS CALL dbo.my_procedure(); Я...
1136 просмотров

Как программно создать запрос SnowSQL
Я новичок в SnowFlake и каждый день изучаю что-то новое. Я придерживаюсь следующего сценария. SELECT '{COL}' AS field_name, a.{COL}AS old_value, b.{COL}AS new_value FROM A JOIN B ON(...) WHERE a.{COL} != b.{COL} Я хочу...
566 просмотров