Вопросы по теме 'azure-data-factory-2'
Невозможно опубликовать дополнительный пакет ADF
Как сообщалось ранее, поток для синхронизации данных из внутреннего Mysql в Azure SQL через здесь со ссылкой на это article , и обнаружил, что компонент поиска для обнаружения водяных знаков доступен только для SQL Server.
Итак, попробовал...
609 просмотров
schedule
11.02.2022
Добавочная загрузка файлов с локального файлового сервера в Azure Data Lake
Мы хотели бы выполнять инкрементную загрузку файлов с нашего локального файлового сервера в Azure Data Lake с помощью фабрики данных Azure v2.
Предполагается, что файлы хранятся на локальном файловом сервере ежедневно, и нам придется запускать...
231 просмотров
schedule
01.04.2022
Получить активность метаданных ADF V2
Может ли кто-нибудь объяснить мне, какова польза от Get Metadata Activity, недавно введенного в ADF V2?
На самом деле информации, представленной на docs.microsoft.com, недостаточно для понимания использования этого Activity.
4385 просмотров
schedule
15.02.2022
Приложения логики Azure - динамическое получение RefreshId для служб Analysis Services
Я пытаюсь обработать табличную модель AAS с помощью приложения логики Azure и пытаюсь прочитать статус. Я могу сделать это вручную с помощью refreshId.
https://docs.microsoft.com/en-us/azure/analysis-services/analysis-services-async-refresh...
839 просмотров
schedule
29.04.2023
Отключение триггеров фабрики данных Azure при выпуске
Я пытался заставить развертывания фабрики данных работать через VSTS, и в основном я там, но у меня возникает сбой из-за того, что триггеры должны быть отключены для перезаписи. Сообщение об ошибке ниже:
Remove-AzureRmDataFactoryV2Trigger : HTTP...
5159 просмотров
schedule
28.04.2022
Фабрика данных Azure: событие не запускает конвейер
Я настроил конвейер фабрики данных Azure, содержащий действие копирования. Для целей тестирования и источник, и приемник являются хранилищами BLOB-объектов Azure.
Я не хочу выполнять конвейер, как только новый файл будет создан в исходном...
4093 просмотров
schedule
23.03.2023
Фабрика данных Azure v2: не удалось создать действие копирования с помощью кода c #
Проблема в том, что мое внутреннее копирование из активности foreach не публикуется в ADF. Я не вижу этой активности в пользовательском интерфейсе ADF, и даже после добавления ее вручную я не могу отлаживать, публиковать и даже просматривать код...
318 просмотров
schedule
24.07.2023
Копирование данных из динамического URL-адреса в SQL DW
Я копирую данные из сценария JSON в свой SQLDW. Я использую операцию копирования из DF2, где мои наборы данных - это HTTP-Source и SQLDW-Target.
Все работает нормально, пока я не настрою параметр URL-адреса для своего HTTP-соединения...
43 просмотров
schedule
02.04.2022
Фабрика данных Azure сопоставление двух столбцов в один столбец
Может ли кто-нибудь помочь мне решить ошибку, возникающую при объединении двух столбцов, то есть first name и last name из моего текстового файла, и объединении двух столбцов в один столбец имени в моей базе данных SQL Azure как sink в...
2904 просмотров
schedule
22.03.2022
ADF v2 Отмена InProgress Pipeline
Я могу получить список конвейеров, используя следующее, но не могу найти вариант для отмены конвейера InProgress. Как я могу отменить текущий конвейер?
var pf = new PipelineRunFilterParameters();
pf.LastUpdatedAfter =...
738 просмотров
schedule
11.02.2022
Фабрика данных Azure сопоставление части значения
Я копирую данные из CSV-файла в хранилище BLOB-объектов Azure в хранилище таблиц Azure с помощью фабрики данных Azure v2. Один из столбцов в источниках содержит почтовые индексы Великобритании, например RM1 1AA. Я хотел бы использовать первую часть...
270 просмотров
schedule
02.06.2024
Azure Databricks с Github
Я работаю с записной книжкой Databricks и синхронизировал ее с GitHub. Мы два члена, работающие над двумя разными ветками в репозитории Github. Когда мы запускали действие фабрики данных Azure на этой записной книжке, она запускала последнюю версию...
497 просмотров
schedule
02.04.2024
Передача параметров из одного блокнота в другой
У меня есть две тетради на питоне.
Первый проверяет, выходит ли файл из озера данных. Я хочу вернуть логическое значение отсюда и путь к файлу, если он выйдет.
Следующая записная книжка будет использовать эти параметры как входные данные. Как...
744 просмотров
schedule
23.12.2022
Фабрика данных Azure версии 2: как передать имя файла в переменную хранимой процедуры
У меня есть большая таблица Azure SQL со следующей структурой:
Company Revenue
-------------------
A 100
B 200
C 100
. .
. .
. .
Сейчас я создаю хранимую...
2072 просмотров
schedule
20.06.2022
С чего начать с фабрики данных Azure
Я новичок в фабрике данных Azure, и я работаю над доказательством концепции для своей организации, мне трудно получить хорошую информацию по довольно простым вещам, и я надеюсь, что кто-то может указать мне на хорошие ресурсы для мой вариант...
368 просмотров
schedule
07.02.2022
Запретить создание пустых файлов с помощью действия копирования фабрики данных Azure
Я использую фабрику данных Azure для копирования данных из Azure Cosmos DB в озеро данных Azure. Мой конвейер состоит из операции копирования, которая копирует данные в приемник озера данных.
Это мой запрос по исходному набору данных:
select *...
2596 просмотров
schedule
30.04.2024
Действие копирования фабрики данных Azure с источником в качестве хранимой процедуры
Не могли понять, как мы можем использовать хранимую процедуру в качестве исходного набора данных в действии копирования фабрики данных Azure? Есть ли способ использовать хранимую процедуру в качестве исходных данных в задаче копирования данных?
509 просмотров
schedule
26.12.2023
проблема сопоставления столбцов в ADFv2
У меня есть исходный .csv с 21 столбцом и целевая таблица с 25 столбцами.
Не ВСЕ столбцы в исходной таблице имеют дом в целевой таблице, и не все столбцы в целевой таблице берутся из источника.
Я не могу заставить мою задачу CopyData позволить...
1424 просмотров
schedule
01.02.2022
Фабрика данных Azure версии 2: ошибка при использовании соединителя REST - не удалось получить схему из
Я делаю POC для вызова restFul API с помощью ADF CopyData.
Остальные подробности API доступны по этой ссылке.
http://www.groupkt.com/post/f2129b88/free-restful-web-services-to-consume-and-test.htm
с этой страницы я хочу отдохнуть ниже...
318 просмотров
schedule
26.02.2023
Месяц форматирования в Фабрике данных Azure версии 2
Как вы форматируете выражение даты в ADFv2, чтобы вы могли получить «1» для января и «10» для октября?
Я пробовал использовать formatDateTime(dataset().date, '%M') , но не уверен, что это правильно. Я пытаюсь установить пути к папкам, например,...
852 просмотров
schedule
22.12.2022
