Вопросы по теме 'task-queue'

API очереди задач: ETA и обратный отсчет
Мне нравится новый API TaskQueue. У меня вопрос по поводу ETA/обратного отсчета: если я установлю новую задачу на выполнение через 10 минут в будущем, и это будет единственный элемент в очереди, будет ли она выполняться примерно через 10 минут или...
1417 просмотров
schedule 09.07.2022

асинхронная обработка с PHP - один воркер на задание
Рассмотрим веб-приложение PHP, целью которого является прием пользовательских запросов на запуск общих асинхронных заданий, а затем создание рабочего процесса / потока для выполнения задания. Задания не особенно интенсивны для ЦП или памяти, но...
6121 просмотров

образец очереди задач Google App Engine
В настоящее время я пытаюсь работать с очередью задач. Но я не вижу полного образца по этому вопросу. Поэтому, пожалуйста, дайте мне образец очереди задач в движке приложения Google, написанный на python.
7361 просмотров
schedule 13.06.2023

Параллельная обработка в PHP - как вы это делаете?
В настоящее время я пытаюсь реализовать очередь заданий на php. Затем очередь будет обработана как пакетное задание и должна иметь возможность обрабатывать некоторые задания параллельно. Я уже провел небольшое исследование и нашел несколько...
53429 просмотров

Как проще всего удалить все данные моего хранилища больших двоичных объектов?
Каков наилучший способ удалить все BLOB-объекты из blobstore? Я использую Python. У меня довольно много BLOB-объектов, и я хотел бы удалить их все. В настоящее время я делаю следующее: class deleteBlobs(webapp.RequestHandler): def...
2195 просмотров

Очереди задач или многопоточность в движке приложения Google
У меня есть сервер на Google App Engine. Одна из моих задач — сопоставлять огромный набор записей с другим. Это занимает очень много времени, если мне нужно сопоставить 10000 записей со 100. Каков наилучший способ реализовать это. Я использую стек...
952 просмотров

Что хранится в очереди готовности процесса?
Я пытаюсь использовать аппаратное обеспечение для ускорения планирования и диспетчеризации. Поэтому мне нужно знать, что именно находится в очереди готовности, чтобы выяснить, действительно ли использование оборудования может помочь и насколько....
3843 просмотров
schedule 18.06.2022

Google App Engine: задачи в очереди и задания Cron
Меня очень смущают концепции GAE о задачах, очередях задач (как push, так и pull), задания Cron и то, как каждый из них относится к экземплярам Frontend и Backend. Я пытаюсь добиться ситуации, когда некоторые HTTP-запросы могут быть обслужены...
965 просмотров
schedule 28.08.2023

Нехватка места PermGen при использовании DeferredTasks в GAE 1.7.3
Недавно я перешел на Google App Engine Java SDK 1.7.3 . С тех пор мне не хватает пространства PermGen каждый раз, когда я отправляю DeferredTasks в очередь задач. Этого не происходит, когда приложение развернуто в App Engine. Это...
1874 просмотров

MSMQ как очередь заданий
Я пытаюсь реализовать очередь заданий с помощью MSMQ, чтобы сэкономить время на ее реализации в SQL. Почитав все вокруг, я понял, что MSMQ может не предлагать то, что мне нужно. Не могли бы вы посоветовать мне, реалистичен ли мой план с...
408 просмотров
schedule 24.12.2022

NDB post_put_hook и очередь задач
У меня возникла небольшая проблема с использованием ndb post_put_hook для добавления чего-либо в очередь задач. Я создал хук в своей модели, и всякий раз, когда выполняется put(), хук выполняется бесконечно. Если я делаю что-то еще, но добавляю...
361 просмотров

TaskQueue: двойное выполнение условной последовательности (C ++)
Я пишу серверное приложение, ориентированное на задачу. Каждый сеанс (клиент) отправляет пакеты на сервер, сервер ставит их в очередь как Задачи, а рабочие (потоки) обрабатывают их. Ограничения: Задачи из одного и того же сеанса должны быть...
148 просмотров

Как контролировать, какие версии заданий в очередях задач выполняются в движке приложения?
Помещаются ли задания в очереди задач в Google App Engine автоматически в серверную часть по умолчанию или они планируются в серверной версии для вызывающего их кода? Допустим, у меня есть два бэкенда: один называется «тестовый», а другой —...
938 просмотров
schedule 15.01.2023

Решение для очереди задач?
Раньше я никогда не использовал очередь задач. У меня проблема с получением отчета обо всех моих контактах из хранилища данных. Код такой: allContactos=db.GqlQuery("select * from contactsDB").run(batch_size=1000) for contactN in allContactos:...
85 просмотров
schedule 02.10.2022

Можно ли перепланировать задачу очереди задач ядра приложения?
Во время вызова API я планирую выполнение задачи через n минут. Я называю задачу. Другой вызов API, если он будет выполнен, удалит задачу. Когда задача выполняется (где все операции с хранилищем данных выполняются в транзакции), она также...
258 просмотров
schedule 01.08.2022

Длительная программа в Google App Engine
Я написал код сервлета на Java для чтения строки из файла, который хранится в Google Cloud Storage. Как только я читаю каждую строку, я передаю ее API прогнозирования. Как только я получу предсказание переданного текста. Я добавляю его к исходной...
1278 просмотров

Превышен предел мягкой частной памяти 128 МБ с X МБ после обслуживания всего Y запросов
Я получаю ужасную ошибку Exceeded-memory-error в моем приложении App Engine, в котором задание Cron помещает несколько небольших задач в очередь. Я не думаю, что какая-то отдельная задача должна вызывать критическую ошибку, поэтому я предполагаю,...
1133 просмотров

Как получить данные из очередей задач?
Как получить данные из очередей задач?? Как тянуть очереди?? Мой проект работает с использованием Google App Engine. Я успешно вставляю или отправляю данные в очередь задач, теперь я хочу получить эти данные. Мне нужен PHP-код для этой работы.
111 просмотров
schedule 23.03.2024

Проблемы с очередями push-уведомлений на управляемой виртуальной машине Google App Engine / гибкой среде
У меня возникли проблемы с использованием очередей push-уведомлений в гибкой среде Google App Engine (официально называемой их управляемой средой виртуальных машин). Я получаю многочисленные 404 Instance Unavailable (см. рисунок ниже). После...
941 просмотров

Как я могу планировать или ставить в очередь вызовы API для поддержания ограничения скорости?
Я пытаюсь постоянно сканировать большой объем информации с сайта, используя REST API, который они предоставляют. У меня есть следующие ограничения: Не выходить за пределы API (5 вызовов/сек) Использование полного лимита (совершение ровно 5...
1464 просмотров