Вопросы по теме 'azure-data-factory-2'
Программное удаление наборов данных по имени из фабрики данных с помощью .NET SDK
3 вопроса о фабрике данных и .NET SDK:
1) Можно ли программно удалить наборы данных из фабрики данных через .NET SDK? В идеале я хотел бы иметь возможность передать имя набора данных для удаления и обработать его. Я просмотрел документы и,...
231 просмотров
schedule
17.01.2022
Подстрока имени столбца в операции копирования в ADF v2
Есть ли способ в действии копирования V2 работать с одним из входных столбцов (строкового типа) с выражением? Прежде чем загружать строки в место назначения, мне нужно ограничить количество символов в столбце.
Я надеялся просто переключиться с...
4400 просмотров
schedule
19.01.2024
Фабрика данных Azure версии 2, как обрабатывать куб службы анализа Azure
Как в фабрике данных Azure версии 2 обрабатывать куб службы анализа Azure?
Я могу использовать учетную запись службы автоматизации Azure для запуска сценария PowerShell Runbook для автоматической обработки куба. Однако я хочу добавить обработку...
4049 просмотров
schedule
28.07.2023
Поддерживает ли добавочная синхронизация с фабрикой данных Azure версии 2 только Sql Server для Azure SQL
Я пробовал инкрементную синхронизацию для разработки инкрементальной синхронизации данных между MySQL и Azure Sql, ссылаясь на статья и при разработке конвейера для новый водяной знак обнаружил, что компонент поиска поддерживает только SQL SERVER....
323 просмотров
schedule
02.06.2023
Поиск действий в фабрике данных Azure V2
Как использовать Oracle в качестве исходного набора данных при поиске в фабрике данных Azure V2? У меня есть набор данных Oracle DS_ORAC. Я хотел бы использовать этот набор данных в качестве исходного набора данных при поиске.
800 просмотров
schedule
29.08.2022
Преобразование значений в строку в выражении пути Json в действии копирования фабрики данных Azure
У меня есть входной файл JSON, в котором фактическое значение свойства может быть числовым или строкой. Я извлекаю значение, указав выражение пути json, например
"fieldValue": "values[*].value"
в действии копирования фабрики данных Azure,...
3819 просмотров
schedule
30.03.2022
Ошибка при копировании данных из хранилища BLOB-объектов Azure в SQL Server с помощью фабрики данных Azure V2
При запуске конвейера фабрики данных Azure V2 я получаю следующее сообщение об ошибке:
{
"errorCode": "2109",
"message": "Region detection for linked services with type 'SqlServer' is not supported, please specify location instead.",...
406 просмотров
schedule
22.09.2023
Фабрика данных Azure: набор данных файла Http для вызова конечной точки REST
Я установил набор данных типа http-файл, в котором я установил свою конечную точку или относительный URL-адрес. Проблема в том, что этот URl меняется каждый день.
Есть идеи, как автоматизировать это изменение, не заходя на завод каждый день?
267 просмотров
schedule
23.04.2022
Фабрика данных Azure - среда выполнения интеграции для Linux
Я хотел скопировать файлы данных с компьютера Linux в хранилище BLOB-объектов Azure. Для этого я использую фабрику данных Azure (согласно требованиям). Может ли кто-нибудь, пожалуйста, помочь мне, как установить / откуда получить среду выполнения...
3314 просмотров
schedule
08.08.2022
передача параметров между действиями ADF
У меня следующий сценарий. Мне нужно проверить, существует ли определенный файл в ADLS. Если это не так, я должен отправить электронное письмо с уведомлением о таком отсутствии. Если он там, продолжайте с его копией. Все это через трубу в АДФ....
127 просмотров
schedule
27.02.2023
Преобразование данных с помощью хранимой процедуры в фабрике данных Azure
Я пытаюсь написать конвейер с использованием фабрики данных Azure v2. Данные поступают из хранилища таблиц Azure, которые затем мне нужно преобразовать, получив дополнительные данные из SQL Azure, а затем отправить их в другую базу данных SQL для...
131 просмотров
schedule
12.06.2023
Фильтры файлов действий копирования фабрики данных Azure версии 2
Я использую фабрику данных v2, и в настоящее время у меня есть простая операция копирования, которая копирует файлы с FTP-сервера в хранилище BLOB-объектов. Имена файлов на этом сервере имеют следующую форму:
File_{Year}{Month}{Day}.zip...
1628 просмотров
schedule
09.10.2022
Запрос из базы данных Azure Comos и сохранение в хранилище таблиц Azure с помощью фабрики данных
Я хочу сохранить C._ts + C.ttl как один объект в моем хранилище таблиц Azure. Я делаю следующий запрос в своей операции копирования:
"typeProperties": {
"source": {
"type": "DocumentDbCollectionSource",
"query":...
72 просмотров
schedule
28.03.2022
Обработка ошибок в фабрике данных Azure V2
Команда.
У меня есть ситуация для обработки ошибок в ADF2 с помощью веб-активности. В конвейере любая активность завершается ошибкой, она должна запускать веб-активность. Я прикрепил веб-активность после failed статуса каждой активности....
3735 просмотров
schedule
13.11.2022
Копирование действия завершается ошибкой со следующей ошибкой
{"errorCode": "2200", "message": "ErrorCode = FailedDbOperation, 'Type = Microsoft.DataTransfer.Common.Shared.HybridDeliveryException, Message = Операция с базой данных завершилась неудачно со следующей ошибкой:' PdwManagedToNativeInteropException...
7123 просмотров
schedule
03.12.2023
Журналы конвейера фабрики данных Azure
Где хранятся журналы данных Azure Pipeline v2, я хотел бы получить данные о неисправных конвейерах за определенную дату (не хочу использовать портал Azure для просмотра этих данных). Есть ли какая-либо таблица / представление, содержащее такие...
1873 просмотров
schedule
09.01.2023
Шаблон ARM фабрики данных Azure
Я создаю шаблон ARM для развертывания фабрики данных. Все работает нормально, кроме автономной среды выполнения интеграции. У меня есть один локальный SQL Server и еще одна локальная база данных Oracle. Оба подключены с помощью автономной среды...
1144 просмотров
schedule
14.05.2023
Фабрика данных Azure версии 2 не может отправить данные в Поиск Azure
Я пытаюсь передать некоторые данные в Поиск Azure, но по какой-то причине не удается Invalid linked service reference. Name: AzureSearch1
Я настроил связанную службу поиска Azure следующим образом:
{
"name": "AzureSearch1",
"properties": {...
368 просмотров
schedule
01.06.2022
Ошибка при связывании учетной записи хранилища BLOB-объектов Azure с фабрикой данных Azure
Я создал фабрику данных Azure и пытаюсь создать новую связанную службу для использования учетной записи хранилища BLOB-объектов Azure. Тест подключения проходит успешно, но каждый раз, когда я пытаюсь связать сервис, я получаю следующую ошибку:...
586 просмотров
schedule
03.06.2022
Количество обработанных строк фабрикой данных Azure
У нас есть итерация ForEach, а внутри нее - действие Execute Pipeline. Это действие вызывает дочерний конвейер, у которого есть действие копирования.
У нас есть идентификатор, связанный с каждой итерацией, и уникальный запрос SELECT для...
1689 просмотров
schedule
19.01.2023