Вопросы по теме 'spring-cloud-dataflow'

Как развернуть Spring Cloud Data Flow на Docker
Я использую https://github.com/spring-cloud/spring-cloud-dataflow/tree/master/spring-cloud-dataflow-app-launcher , ОС: ubuntu 15.10 тогда $ mvn package docker:build $ docker-compose up но встречаются ошибки: timesource_1 |...
726 просмотров

Spring Cloud Dataflow на другом брокере сообщений, чем Redis?
из того, что я вижу в документации, для работы Spring Cloud Dataflow всегда требуется экземпляр Redis. Можно ли также работать с другим брокером сообщений, например RabbitMQ? Как указать другого брокера сообщений при запуске?
152 просмотров
schedule 26.04.2022

Spring XD - http-клиент добавляет заголовок приложения/json
Я установил Spring XD в свою среду PaaS, и из-за устаревшей проблемы я застрял на версии 1.0.0.M1. (см. справочный документ ). Моя цель — вызвать http rest API с помощью модуля http-client . Мое определение потока: http | httpclient...
306 просмотров

как отправлять и получать из одной и той же темы в spring cloud stream и kafka
У меня есть приложение spring-cloud-stream с привязкой kafka. Я хотел бы отправить и получить сообщение из одной и той же темы из одного и того же исполняемого файла (jar). У меня есть определения каналов, как показано ниже: - public interface...
3576 просмотров

Источник Kafka в потоке данных Spring Cloud
Я перехожу с Spring XD на Spring Cloud Data Flow. Когда я искал список модулей, я понял, что некоторые из источников не указаны в Spring Cloud Flow - один из них - источник KAFKA. У меня вопрос: почему источник KAFKA удален из списка стандартных...
2511 просмотров

Как создать процессор с транзакцией и DLQ с привязкой Rabbit?
Я только начинаю изучать Spring Cloud Streams и Dataflow и хочу узнать об одном из важных для меня вариантов использования. Я создал пример процессора Multiplier, который принимает сообщение и повторно отправляет его 5 раз на вывод....
1332 просмотров

spring-cloud-deployer — указание URL-адресов удаленного репозитория maven
Spring Cloud Data Flow — сервер Cloudfoundry (v1.0.0.M4) Работая над попыткой внедрить информацию о конфигурации в файл свойств, а затем использовать Spring Cloud Config Server для предоставления этих параметров среды во время установки, у меня...
327 просмотров

Как узнать, что файл был загружен в HDFS с помощью Spring Cloud Dataflow
Я загружаю исходный файл, создаю его и транслирую для обработки построчно, чтобы окончательно погрузиться в HDFS. Для этого я использую Spring Cloud Dataflow + Kafka. Вопрос: есть ли способ узнать, когда весь файл был загружен в HDFS, чтобы...
62 просмотров

Команда оболочки Spring Cloud DataFlow в настоящее время недоступна
Я иногда получаю эту ошибку: 2016-10-20T15:38:24+0200 WARN main o.s.s.c.SimpleParser:131 - Command 'app register --name email --type source --uri <uriToMyDockerImage>' was found but is not currently available (type 'help' then ENTER to...
479 просмотров
schedule 10.07.2022

Путаница в компонентах Spring Cloud
Как эти компоненты Spring соотносятся / отличаются друг от друга? Что каждая из них представляет концептуально? Можно ли использовать их вместе или это конкурирующие проекты? Поток данных Spring Cloud Весенний поток облаков Весенняя...
330 просмотров

Отказоустойчивый сервер Spring Cloud Data Flow
Как лучше всего настроить сервер SCDF для аварийного переключения? Я говорю о самом сервере SCDF. Не поток и задачи, которые вы развертываете в SCDF. Я планирую использовать Kubernetes в качестве среды выполнения.
166 просмотров
schedule 15.07.2022

Можно ли выполнить секционированное задание Spring Cloud Task в потоке данных Spring Cloud?
Я пытаюсь настроить и выполнить пример Spring Cloud Tasks Sample секционированного пакетного задания ( https://github.com/spring-cloud/spring-cloud-task/tree/master/spring-cloud-task-samples/partitioned-batch-job ) в Spring Cloud Data Flow Server....
448 просмотров

Поток данных Spring Cloud и источник данных SCDF Kafka
Я следую руководству по началу работы на [1], но я удалил MySQL и аналитику из настроек конфигурации, так как я не собираюсь использовать какие-либо функции аналитики. Однако позже служба scdf аварийно завершает работу, сообщая, что источник данных...
141 просмотров

Spring Cloud DataFlow Rabbit Source: как перехватывать и обогащать сообщения в источнике
Я успешно оценивал Spring Cloud DataFlow с типично простым потоком: источник | процессор | раковина. Для развертывания в этот конвейер будет поступать несколько источников, что я могу сделать с помощью меток потока данных. Все хорошо. Каждый...
326 просмотров
schedule 05.05.2023

Развертывание в YARN с помощью Spring Cloud Dataflow
При развертывании потока в удаленном кластере YARN я получаю следующую ошибку в пользовательском интерфейсе YARN: Diagnostics: File file:///dataflow/apps/stream/app/application.properties does not exist Этот файл существует на стороне сервера...
193 просмотров
schedule 18.12.2022

Пример агрегатора Spring Cloud Data Flow
Может ли кто-нибудь указать на некоторые примеры, относящиеся к потоку данных String Cloud (не Stream XD), о том, как писать сплиттеры и агрегаторы? В частности нетривиальное разделение и объединение сообщений. Любой нетривиальный пример сложных...
1168 просмотров
schedule 21.10.2022

Активация конвертера сообщений Avro в Spring Cloud Dataflow
Я реализую потоковое приложение в Spring Cloud Dataflow. Я хотел бы использовать клиент реестра схемы на основе Avro для сериализации и управления схемой. Моя основная цель — передать исходному приложению некоторые внешние данные, преобразовать их в...
1405 просмотров

Программное получение имени потока
Системная информация Spring Cloud Data Flow Cloud Foundry: v1.1.0.RELEASE Pivotal Cloud Foundry: v1.7.12 Клиент CF (Windows): cf.exe версии 6.23.1+a70deb3.2017-01-13 cf-v3-plugin: 0.6.7 Я хотел бы ввести имя потока в bean-компонент, определенный...
137 просмотров
schedule 26.06.2022

Свойства приложения / потока Spring Cloud Dataflow по умолчанию
Я указал в application.properties : spring.cloud.config.uri=http://configserver:8888 но когда я развертываю поток с панели инструментов, я вижу в журналах Получение конфигурации с сервера по адресу: http://localhost:8888 это...
448 просмотров
schedule 21.05.2024

Отсутствует источник / приемник Kafka в springcloud
Я хотел бы использовать Kafka Source / Sink в SpringCloud Dataflow, но я не могу найти эти приложения-стартеры в spring-cloud-stream-app-starters. Они были доступны в Spring XD. Кто-нибудь знает, почему они исчезли? Спасибо
149 просмотров