Публикации по теме 'gcp'
Автоматическая настройка гиперпараметров с помощью GCP ML-Engine
Вторая запись, поскольку я продолжаю свой класс TensorFlow по GCP, неделя №2 курса 5: Искусство и наука машинного обучения .
В классе мы сначала строим простую модель линейной регрессии, затем строим задачу для обучения модели с входными параметрами, такими как каталог для вывода и т. д.
Среди входных параметров некоторые считаются «гиперпараметрами», например, learning_rate и batch_size. По-видимому, эти гиперпараметры имеют решающее значение для производительности нашей модели...
Запуск кластера Stable Diffusion на GCP с обслуживанием tensorflow (часть 2)
Создание артефактов и развертывание модели в кластере
В Части 1 мы узнали, как использовать terraform для удобной настройки и управления нашей инфраструктурой. В этой части мы продолжим наше путешествие по развертыванию работающей модели Stable Diffusion в подготовленном кластере.
Примечание . Вы можете следовать этому руководству от начала до конца, даже если вы являетесь бесплатным пользователем (при условии, что у вас осталось немного кредитов уровня бесплатного пользования)...
Машинное обучение с использованием функций Persistor и Google Cloud
Введение
Машинное обучение — очень актуальная тема в современном мире. От классификации и регрессии до кластеризации, мы все сталкивались с этим в той или иной степени. Допустим, у вас нет достаточно мощной машины для обучения и тестирования вашей модели, что вы будете делать? Мы, конечно, надеемся, что вы не сказали, что ушли, потому что есть облачные решения, ожидающие обучения ваших моделей.
Google Cloud Platform предлагает специализированные продукты искусственного интеллекта,..
FeatureStore в VertexAI -Google Cloud Platform
Google Cloud недавно запустил VertexAI, и в рамках этого магазина был выпущен FeatureStore. Согласно официальному определению, Vertex Feature Store (Feature Store) предоставляет централизованное хранилище для организации, хранения и обслуживания функций машинного обучения . Вы можете прочитать больше здесь .
Хранилище функций использует модель данных временных рядов для хранения ряда значений функций, позволяя Хранилищу функций поддерживать значения функций по мере их изменения с..
Создание конвейера CI с помощью Jupyter Notebooks на GCP
На этой неделе мы со Славой выступали на Big Things Conference в Испании. Название доклада было таким же, как у сообщения в блоге, мы не хотели использовать термин MLOps с записными книжками или MLOps с ____, поскольку мы думаем, что термин MLOps в настоящее время является перегруженным термином. Да, говорю, перегружено и раскручено, объясню почему.
Работая в Google, у меня есть доступ к очень сложному программному обеспечению, инструментам и инфраструктуре, которые определенно..
Вопросы по теме 'gcp'
Дедупликация BigQuery для двух столбцов в качестве уникального ключа
Мы строго используем BigQuery и имеем две таблицы, которые, по сути, обновлялись параллельно разными процессами. У меня есть проблема: у нас нет уникального идентификатора для таблиц, и цель состоит в том, чтобы объединить две таблицы с нулевым...
2504 просмотров
schedule
09.04.2022
Обновите вложенную таблицу 3-го уровня, чтобы добавить запись
Следуя примерам, найденным здесь, на https://cloud.google.com/bigquery/sql-reference/dml-syntax , мы придумали способ обновить 3-й уровень таблицы (спецификации. размеры) как таковой:
UPDATE sd97dwo.DetailedInventory
SET specifications.dimensions...
297 просмотров
schedule
26.12.2023
Предлагает ли Google Cloud безсерверный поисковый API?
Google предлагает хранилище данных для GCP, что означает «C» в CQRS. Но где же «Q» (запрос)?
Хранилище данных имеет, возможно, вполне оправданно, два очень больших ограничения для того, чтобы сделать его жизнеспособной системой запросов:
Нет...
366 просмотров
schedule
23.07.2023
Добавление службы и версии в пользовательский api трассировки стекового драйвера
Я использую https://github.com/GoogleCloudPlatform/google-cloud-go/tree/master/trace для отправки пользовательских трассировок в Stackdriver Trace из GCP. Все эти следы останутся без сервиса или версии. Как добавить эту информацию с помощью API...
245 просмотров
schedule
16.07.2022
Делитесь сегментом Google Cloud Storage Bucket между проектами
Я хочу, чтобы сегмент хранилища принадлежал нескольким проектам без использования учетной записи службы. Как я могу это сделать?
2878 просмотров
schedule
04.05.2023
Как запросить таблицу BigQuery из блокнота DataLab с помощью google.datalab.bigquery?
У меня есть следующий код в блокноте DataLab:
import google.datalab.bigquery as bq
%bq query
SELECT count(id) FROM 'rtda.tweets'
Он возвращает ошибку:
invalidQuery: Syntax error: Unexpected string literal 'rtda.tweets' at [1:23]...
957 просмотров
schedule
31.07.2023
Как получать данные из корзины GCS через Dataflow, как только в нее помещается новый файл?
У меня есть вариант использования, когда мне нужно вводить данные из корзины облачного хранилища Google, как только они станут доступны в виде нового файла в корзине хранилища через поток данных.
Как запустить выполнение задания потока данных, как...
1041 просмотров
schedule
15.12.2022
Google Speech API из браузера
На странице документации https://cloud.google.com/speech/ есть демонстрационный пример, который слушает речь через браузер и использует API в фоновом режиме. Доступен ли исходный код этой демонстрации?
В противном случае голосовой API...
4916 просмотров
schedule
24.05.2023
Включение диспетчера компонентов в gcloud CLI
Я сделал новую установку gcloud для Ubuntu в соответствии с инструкциями здесь . Я хочу использовать дополнительные компоненты, предлагаемые gcloud, такие как kubectl и docker .
Итак, когда я попытался ввести gcloud components install kubectl...
3954 просмотров
schedule
21.09.2022
Остановка экземпляра gcp независимо от региона и зоны
Я попытался остановить экземпляры vm, используя
Вычислительные экземпляры gcloud останавливают экземпляр-2-1
Выдает следующую ошибку:
ОШИБКА: (gcloud.compute.instances.stop) Не удалось получить ресурс: - Ресурс "projects /...
308 просмотров
schedule
22.06.2022
Верхний предел в 6 минут на выполнение скрипта Google App Script
Я переключил свой сценарий приложения Google со стандартного (скрытого) экземпляра GCP на свой собственный экземпляр GCP. У меня сложилось впечатление, что после этого 6-минутного верхнего предела выполнения App Script больше не будет, но он...
84 просмотров
schedule
13.09.2022
Проблема GCP Dataproc spark.jar.packages при загрузке зависимостей
При создании нашего кластера Dataproc Spark мы передаем --properties spark:spark.jars.packages=mysql:mysql-connector-java:6.0.6 команде gcloud dataproc clusters create .
Это для того, чтобы наши сценарии PySpark сохранялись в CloudSQL....
1090 просмотров
schedule
28.08.2022
Отправка контейнера GCP не работает - отказано: включите Google Container Registry API в Cloud Console на странице
У меня проблемы с загрузкой образа докера в реестр контейнеров GCP. Я следовал инструкциям здесь .
Как вы можете видеть на скриншоте ниже, у меня:
Зашел в облачную оболочку Google и создал образ докера через файл докера.
Правильно пометил...
3346 просмотров
schedule
29.03.2022
GCP: назначить / удалить эфемерный IP существующему экземпляру
У меня есть несколько экземпляров в GCP, и для административных целей мне нужно ненадолго подключиться по SSH и запустить несколько команд. У этих экземпляров нет внешнего IP-адреса в «нормальном» режиме, но для этого краткого обслуживания я хотел бы...
5950 просмотров
schedule
22.09.2022
Google Cloud Storage — переименование/перемещение файлов/папок в графическом интерфейсе
Я не являюсь техническим специалистом и пытаюсь использовать Google Cloud Storage для статических веб-сайтов, а также в качестве чистого... хранилища (и GCP для некоторых простых DNS-сервисов).
Кто-нибудь знает, есть ли у GCP какие-либо планы по...
409 просмотров
schedule
16.07.2022
Я хочу связать несколько доменов с одним ведром с помощью gcs
Я хочу связать несколько доменов с одним ведром с помощью gcs
Однако в официальном документе именем корзины будет домен как таковой, поэтому кажется, что вы не можете связать несколько доменов.
Вы не знаете кого-то?
687 просмотров
schedule
18.08.2022
