Вопросы по теме 'azure-data-factory-2'

Программное удаление наборов данных по имени из фабрики данных с помощью .NET SDK
3 вопроса о фабрике данных и .NET SDK: 1) Можно ли программно удалить наборы данных из фабрики данных через .NET SDK? В идеале я хотел бы иметь возможность передать имя набора данных для удаления и обработать его. Я просмотрел документы и,...
231 просмотров

Подстрока имени столбца в операции копирования в ADF v2
Есть ли способ в действии копирования V2 работать с одним из входных столбцов (строкового типа) с выражением? Прежде чем загружать строки в место назначения, мне нужно ограничить количество символов в столбце. Я надеялся просто переключиться с...
4400 просмотров

Фабрика данных Azure версии 2, как обрабатывать куб службы анализа Azure
Как в фабрике данных Azure версии 2 обрабатывать куб службы анализа Azure? Я могу использовать учетную запись службы автоматизации Azure для запуска сценария PowerShell Runbook для автоматической обработки куба. Однако я хочу добавить обработку...
4049 просмотров

Поддерживает ли добавочная синхронизация с фабрикой данных Azure версии 2 только Sql Server для Azure SQL
Я пробовал инкрементную синхронизацию для разработки инкрементальной синхронизации данных между MySQL и Azure Sql, ссылаясь на статья и при разработке конвейера для новый водяной знак обнаружил, что компонент поиска поддерживает только SQL SERVER....
323 просмотров

Поиск действий в фабрике данных Azure V2
Как использовать Oracle в качестве исходного набора данных при поиске в фабрике данных Azure V2? У меня есть набор данных Oracle DS_ORAC. Я хотел бы использовать этот набор данных в качестве исходного набора данных при поиске.
800 просмотров

Преобразование значений в строку в выражении пути Json в действии копирования фабрики данных Azure
У меня есть входной файл JSON, в котором фактическое значение свойства может быть числовым или строкой. Я извлекаю значение, указав выражение пути json, например "fieldValue": "values[*].value" в действии копирования фабрики данных Azure,...
3819 просмотров

Ошибка при копировании данных из хранилища BLOB-объектов Azure в SQL Server с помощью фабрики данных Azure V2
При запуске конвейера фабрики данных Azure V2 я получаю следующее сообщение об ошибке: { "errorCode": "2109", "message": "Region detection for linked services with type 'SqlServer' is not supported, please specify location instead.",...
406 просмотров

Фабрика данных Azure: набор данных файла Http для вызова конечной точки REST
Я установил набор данных типа http-файл, в котором я установил свою конечную точку или относительный URL-адрес. Проблема в том, что этот URl меняется каждый день. Есть идеи, как автоматизировать это изменение, не заходя на завод каждый день?
267 просмотров

Фабрика данных Azure - среда выполнения интеграции для Linux
Я хотел скопировать файлы данных с компьютера Linux в хранилище BLOB-объектов Azure. Для этого я использую фабрику данных Azure (согласно требованиям). Может ли кто-нибудь, пожалуйста, помочь мне, как установить / откуда получить среду выполнения...
3314 просмотров

передача параметров между действиями ADF
У меня следующий сценарий. Мне нужно проверить, существует ли определенный файл в ADLS. Если это не так, я должен отправить электронное письмо с уведомлением о таком отсутствии. Если он там, продолжайте с его копией. Все это через трубу в АДФ....
127 просмотров
schedule 27.02.2023

Преобразование данных с помощью хранимой процедуры в фабрике данных Azure
Я пытаюсь написать конвейер с использованием фабрики данных Azure v2. Данные поступают из хранилища таблиц Azure, которые затем мне нужно преобразовать, получив дополнительные данные из SQL Azure, а затем отправить их в другую базу данных SQL для...
131 просмотров
schedule 12.06.2023

Фильтры файлов действий копирования фабрики данных Azure версии 2
Я использую фабрику данных v2, и в настоящее время у меня есть простая операция копирования, которая копирует файлы с FTP-сервера в хранилище BLOB-объектов. Имена файлов на этом сервере имеют следующую форму: File_{Year}{Month}{Day}.zip...
1628 просмотров

Запрос из базы данных Azure Comos и сохранение в хранилище таблиц Azure с помощью фабрики данных
Я хочу сохранить C._ts + C.ttl как один объект в моем хранилище таблиц Azure. Я делаю следующий запрос в своей операции копирования: "typeProperties": { "source": { "type": "DocumentDbCollectionSource", "query":...
72 просмотров

Обработка ошибок в фабрике данных Azure V2
Команда. У меня есть ситуация для обработки ошибок в ADF2 с помощью веб-активности. В конвейере любая активность завершается ошибкой, она должна запускать веб-активность. Я прикрепил веб-активность после failed статуса каждой активности....
3735 просмотров
schedule 13.11.2022

Копирование действия завершается ошибкой со следующей ошибкой
{"errorCode": "2200", "message": "ErrorCode = FailedDbOperation, 'Type = Microsoft.DataTransfer.Common.Shared.HybridDeliveryException, Message = Операция с базой данных завершилась неудачно со следующей ошибкой:' PdwManagedToNativeInteropException...
7123 просмотров

Журналы конвейера фабрики данных Azure
Где хранятся журналы данных Azure Pipeline v2, я хотел бы получить данные о неисправных конвейерах за определенную дату (не хочу использовать портал Azure для просмотра этих данных). Есть ли какая-либо таблица / представление, содержащее такие...
1873 просмотров

Шаблон ARM фабрики данных Azure
Я создаю шаблон ARM для развертывания фабрики данных. Все работает нормально, кроме автономной среды выполнения интеграции. У меня есть один локальный SQL Server и еще одна локальная база данных Oracle. Оба подключены с помощью автономной среды...
1144 просмотров

Фабрика данных Azure версии 2 не может отправить данные в Поиск Azure
Я пытаюсь передать некоторые данные в Поиск Azure, но по какой-то причине не удается Invalid linked service reference. Name: AzureSearch1 Я настроил связанную службу поиска Azure следующим образом: { "name": "AzureSearch1", "properties": {...
368 просмотров

Ошибка при связывании учетной записи хранилища BLOB-объектов Azure с фабрикой данных Azure
Я создал фабрику данных Azure и пытаюсь создать новую связанную службу для использования учетной записи хранилища BLOB-объектов Azure. Тест подключения проходит успешно, но каждый раз, когда я пытаюсь связать сервис, я получаю следующую ошибку:...
586 просмотров
schedule 03.06.2022

Количество обработанных строк фабрикой данных Azure
У нас есть итерация ForEach, а внутри нее - действие Execute Pipeline. Это действие вызывает дочерний конвейер, у которого есть действие копирования. У нас есть идентификатор, связанный с каждой итерацией, и уникальный запрос SELECT для...
1689 просмотров