Вопросы по теме 'spring-cloud-dataflow'

Аннотация Spring Cloud Data Flow @EnableBinding прерывает внедрение конструктора
Я пытаюсь создать bean-компонент с помощью инъекции конструктора и аннотировать его аннотацией Spring Cloud @EnableBinding . Я использую Spring Boot 1.3.3 и Spring Cloud Brixton.M5 . Я получаю следующее исключение во время запуска...
1207 просмотров

Ошибка установки Spring Cloud Data Flow на Cloud Foundry
Я выполнил инструкции здесь http://docs.spring.io/spring-cloud-dataflow/docs/1.0.0.M1/reference/html/getting-started-deploying-spring-cloud-dataflow.html (который в настоящее время кажется недоступным), но моя установка не выполняется при попытке...
153 просмотров
schedule 31.03.2022

В документации Spring Cloud DataFlow отсутствуют разделы
Я сейчас читаю документацию Spring Cloud DataFlow, но оказалось, что в разделах, содержащихся в ЧАСТИ IV (Модули), есть какая-то ошибка, потому что весь раздел заполнен таким текстом Неразрешенная директива в...
156 просмотров
schedule 02.06.2023

Как настроить локальный репозиторий Maven (Spring Cloudataflow Server) --›Pivotal CF DEV
Окружающая обстановка Pivotal Cloud Foundry DEV Сервер потока данных Spring Cloud Оболочка потока данных Spring Cloud Специфические переменные среды Maven (сервер Spring Cloud Data Flow) MAVEN_LOCALREPOSITORY...
1638 просмотров

Безопасно ли использовать локальный сервер Spring Cloud Dataflow в рабочей среде?
Мы изучаем возможность реализации весеннего облачного потока данных в локальной системной среде для обработки потоков и задач для повседневных транзакций. Не используя PCF, Kubernetes, YARN или Mesos, мы подумываем об использовании локального сервера...
689 просмотров

Настройка потока данных Spring Cloud в Kubernetes
Нужно ли мне самому устанавливать экземпляр Spring Cloud Data Flow на главный сервер, или он устанавливается «автоматически» как часть развертывания? Это не совсем ясно из описания на...
688 просмотров

Как развернуть автономное приложение с помощью Spring DataFlow?
Мое приложение настроено на чтение темы из настроенной Kafka, а затем запись преобразованного результата в Hadoop HDFS. Для этого его необходимо запустить на узле кластера Yarn. Для этого мы хотели бы использовать Spring DataFlow. Но поскольку...
61 просмотров
schedule 04.12.2023

Источник данных Redis для весеннего облачного сервера потока данных
Согласно документации, служба Spring Cloud Dataflow использовала СУБД для хранения определений потоков/задач, регистрации приложений и репозиториев заданий. Вместо использования RDBMS есть ли способ использовать Redis для хранения этой информации.
465 просмотров

Spring DataFlow Yarn — контейнер работает за пределами физической памяти
Я запускаю Spring Cloud Tasks на Yarn, простые задачи работают нормально, но при выполнении более крупных задач, требующих больше ресурсов, я получаю сообщение об ошибке «Контейнер работает за пределами физической памяти»:...
186 просмотров

Источник Kafka и приемник HDFS в Spring Cloud Data Flow
Я использую Kafka в качестве источника, и я хочу записывать сообщения на Kafka в HDFS с использованием приемника HDFS. Но я вижу, что файл создается в HDFS, но сообщение на Kafka не записывается в файл HDFS. Пожалуйста, найдите ниже Stream DSL....
380 просмотров
schedule 05.07.2022

Как отправлять сообщения на два разных канала вывода в SCDF?
У меня есть источник, который отправляет сообщения по каналу output по умолчанию процессору в потоке. Теперь я хочу также отправлять сообщения об ошибках по другому каналу. Я решил, что мне нужно создать привязываемый интерфейс, который...
1409 просмотров

NullPointerException при получении выполнения заданий из пользовательского интерфейса или API Spring Cloud Data Flow 1.1.2
У меня возникает проблема, когда я пытаюсь получить список выполнения заданий на вкладке «Задания» пользовательского интерфейса («Ошибка при получении данных. Работает ли сервер потока данных?») Или через REST API (500 NullPointerException). Ошибка...
515 просмотров

Обновите SCDF на YARN с помощью Ambari
Я начал использовать SCDF с spring-cloud-dataflow-server-yarn 1.0.2.RELEASE . Он был установлен через Ambari 2.4.2 и теперь работает вместе с HDP2.5 (Hortonworks Data Platform). Теперь в SCDF многое изменилось, поэтому я хочу обновить...
75 просмотров
schedule 15.04.2023

весенний поток данных в облаке обеспечивает безопасность в облачной фабрике
Я пытаюсь настроить безопасность для SCDF на PCF на основе документации можно ли включить безопасность для панели управления SCDF при запуске примеров, представленных на локально установленном сервере, даже самый простой пример java -jar...
121 просмотров

Внедрение Avro в Spring Cloud Dataflow
Я пытаюсь реализовать поток Spring Cloud Dataflow, который считывает записи из базы данных, передает их процессору, который преобразуется в схему Avro, а затем передает это для использования приложением-приемником. У меня есть данные, поступающие...
532 просмотров

Невозможно развернуть поток через Spring-Cloud-Dataflow-Server в SAP-Cloud-Foundry
Я развернул spring-cloud-dataflow-server-cloudfoundry в SAP Cloud Fondry со средами ниже: SPRING_CLOUD_DEPLOYER_CLOUDFOUNDRY_URL:https://api.cf.sap.hana.ondemand.com SPRING_CLOUD_DEPLOYER_CLOUDFOUNDRY_ORG:{org}...
225 просмотров
schedule 18.02.2022

Изменить тип содержимого для приложения RabbitMQ Spring Cloud Stream Starter
Документация для Spring Cloud Stream Starter Apps для приложения RabbitMQ Source перечисляет несколько возможных типов контента, каждый из которых имеет свой результирующий тип для выходных данных. Однако здесь не сказано, как выбрать, какой из них...
654 просмотров

Apache Beam: PTransform против PValue
Дан PTransform<PCollection<X>, PCollection<Y>> для произвольного типа X и Y. Что такое преобразование и что такое PValue для этого примера? Определяет ли PValue последнюю вершину в графе?
154 просмотров
schedule 28.04.2023

Поток данных Spring Cloud с пакетным заданием Spring - соображения масштабирования
В настоящее время мы находимся в процессе оценки перехода от Spring batch + Batch Admin к инфраструктуре на основе Spring Cloud. наши основные проблемы / вопросы: 1. В рамках монолитной разработки пакетных заданий Spring мы извлекаем...
665 просмотров

Цитирование свойств в Spring Cloud Dataflow
Это кажется такой глупой проблемой, но мы пытаемся определить поток потоков данных из приложения оболочки SCDF, но у нас возникают проблемы с цитированием. Допустим, мы хотим определить фильтр с выражением SpEL, чтобы просто отфильтровать все, где...
318 просмотров