Вопросы по теме 'change-data-capture'

захват изменений данных из многих таблиц с помощью одной хранимой процедуры?
Мне нужно получить строки захвата измененных данных для нескольких таблиц, и мне требуется (в соответствии с ИТ-политикой компании) доступ к базе данных через хранимые процедуры. Я бы предпочел создать одну хранимую процедуру с именем таблицы в...
1119 просмотров

Изменение захвата данных для нескольких таблиц
SQL Server 2008. Можно ли создать сбор данных об изменениях (или отслеживание изменений) для нескольких связанных таблиц в базе данных? Например, отношение «многие ко многим». Как это будет выглядеть?
694 просмотров

Сбор измененных данных и службы анализа SQL Server
Я разрабатываю приложение базы данных, в котором данные будут меняться с течением времени. Я хочу сохранить исторические данные и позволить своим пользователям анализировать их с помощью служб SQL Server Analysis Services, но я изо всех сил пытаюсь...
1234 просмотров

Задание очистки Change Data Capture (CDC) удаляет только несколько записей за раз
Я новичок в SQL Server. Для проекта мне нужно, чтобы CDC был включен. Копирую данные cdc в другую (архивную) базу и после этого таблицы CDC можно сразу чистить. Таким образом, время хранения не должно быть высоким, я просто поставил его на 1...
2272 просмотров

сбор данных с помощью CDC
Чтобы зафиксировать удаленное имя пользователя, я добавил новый столбец в свою таблицу CDC (например: - cdc.dbo_testCDC_CT), чтобы установить зарегистрированное имя пользователя SQL. т.е.; ИЗМЕНИТЬ ТАБЛИЦУ cdc.dbo_testCDC_CT ДОБАВИТЬ имя...
186 просмотров
schedule 09.01.2024

Является ли номер последовательности журнала (LSN) уникальным для базы данных или таблицы в SQL Server?
Я использую SQL CDC для отслеживания изменений для нескольких таблиц в SQL Server. Я хотел бы сообщить об этих изменениях в правильной последовательности для каждой из них. У меня есть программа, которая собирает данные из каждой таблицы CDC. Но я...
1949 просмотров
schedule 09.12.2022

Как удалить столбцы из CDC (в SQL Server)
Я включил CDC для таблицы, используя приведенный ниже код, и по умолчанию он включает все столбцы. Есть еще один способ включить CDC для таблицы при УКАЗАНИИ столбцов (код приведен ниже). Однако для меня это слишком поздно, учитывая, что мой CDC уже...
1649 просмотров
schedule 16.06.2022

Как изменить срок хранения CDC или поставить для него условие (SQL Server 2012)
Я нахожусь в среде SQL Server 2012, и у меня включен CDC для таблицы. Таким образом, таблица используется для заполнения хранилища данных (в основном, содержимое таблицы дублируется в другом месте). Однако я только что заметил, что мы теряем много...
1630 просмотров

Oracle change-data-capture с помощью лучших практик Kafka
Я работаю над проектом, в котором нам нужно передавать обновления в реальном времени из Oracle на множество систем (Cassandra, Hadoop, обработка в реальном времени и т. Д.). Мы планируем использовать Golden Gate для захвата изменений из Oracle,...
3682 просмотров

CDC множественная вставка/удаление одного и того же значения идентификатора
У меня есть таблица T, которая содержит идентификатор, установленный как идентификатор и первичный ключ. Я включил CDC в таблице, а затем добавил XML-поле, которое мне не нужно было захватывать, поэтому я больше ничего не делал (чтобы воссоздать...
1313 просмотров

Требуется ли для увеличения размера поля отключение и включение cdc для таблицы?
Мне нужно увеличить размер поля таблицы с 255 до 4000 символов. CDC включен для этой таблицы. Прежде чем изменить столбец, следует ли отключить cdc для таблицы, или изменение вступает в силу автоматически? Я прочитал эту ссылку:...
130 просмотров

Ошибка разрешений CDC служб SSIS
Я создаю пакет SSIS с помощью системы отслеживания измененных данных. Я создал пакет, но при его выполнении получаю следующую ошибку: [Задача управления CDC] Ошибка: «Эту операцию могут выполнять только члены фиксированной роли сервера...
790 просмотров

Postgres/JDBC/логическая репликация — проблемы с нехваткой памяти
Я разрабатываю приложение, которое подключается к слоту логической репликации для использования событий WAL. Затем эти события WAL пересылаются брокеру MQ. Это прекрасно работает, но я заметил, что через некоторое время мне не хватает памяти. Мне...
2488 просмотров

Как добавить дополнительные столбцы в существующую таблицу сбора измененных данных (CDC) без потери данных
У меня есть таблица в Microsoft SQL Server 2008, для которой я уже включил CDC с 5 столбцами. Он уже работает и живет в производстве и имеет тысячи записей. Теперь мне нужно добавить 4 новых столбца в ту же таблицу и включить захват данных для вновь...
926 просмотров

Поддерживает ли debezium захват события изменения схемы postgres?
Поддерживает ли debezium захват изменений схемы postgres, таких как «изменить таблицу xxx, добавить / удалить / изменить столбец xxx»?
135 просмотров

Сообщения Tombstone от Kafka Connect JDBC Source Connector
Я создаю конвейер для импорта данных таблицы из одной базы данных в другую, используя apache-kafka и apache-kafka-connect . Я не могу использовать log-based CDC (и такие замечательные функции, как debezium ), поэтому я должен использовать...
723 просмотров

Система отслеживания измененных данных SQL Server не фиксирует все события удаления.
У меня есть таблица, помеченная для сбора данных об изменении SQL. Однако я периодически (очень редко, одно событие в неделю) вижу, что события удаления не фиксируются в таблицах изменений. Я не смог найти причину, по которой это произошло. При...
173 просмотров
schedule 24.02.2024

Cassandra 3.7 CDC/добавочная загрузка данных
Я новичок в мире ETL и хочу реализовать добавочную загрузку данных с помощью Cassandra 3.7 и Spark. Я знаю, что более поздние версии Cassandra поддерживают CDC, но я могу использовать только Cassandra 3.7. Есть ли метод, с помощью которого я могу...
167 просмотров