Публикации по теме 'amazon-sagemaker'
Переход с локального Jupyter на Amazon SageMaker — Часть 2
Авторы : Викеш Пандей , Осман Хамзауи
В разделе Переход с локального jupyter на Amazon SageMaker — часть 1 мы рассказали, как взять готовый пример из руководств по PyTorch и запустить его с помощью обучающего API SageMaker. Мы рассмотрели, как мы можем запускать код на эфемерных управляемых обучающих кластерах и как сохранять ваши модели, сохраняя их в S3 после завершения обучения. В этой части мы объясним, как указать ваш сценарий обучения на ваши собственные данные и как добавить..
Разработчик заходит в Amazon SageMaker…
Построение моделей машинного обучения с использованием алгоритма K-средних и Amazon SageMaker
Если вы не живете в условиях пресловутой технической скалы, вы, вероятно, когда-то слышали фразу «машинное обучение». В последние годы машинное обучение вышло из академических кругов и науки о данных в область общей разработки программного обеспечения. Это привело к тому, что инженерные группы столкнулись с трудностями, пытаясь понять эту новую область и способы ее интеграции в традиционную..
Amazon Sagemaker: краткое руководство
Тратьте меньше времени на построение рабочих процессов и больше времени на разработку моделей
Как специалист по данным, одно из моих нелюбимых занятий - установка пакетов и построение рабочих процессов для поддержки моих моделей машинного обучения. Чем быстрее я смогу настроить свою инфраструктуру , тем больше у меня будет времени для исследования данных и разработки моделей. Кроме того, переход с моего Mac на HPC или облако означает больше времени, потраченного на настройку этих..
Прогнозирование оттока клиентов с помощью текста и интерпретируемости
Промышленные записки
Прогнозирование оттока клиентов с помощью текста и возможности интерпретации
Предсказание, если клиенты захотят уйти, и понимание того, почему.
Авторы Даниэль Херкерт , Тайлер Мюлленбах
Репозиторий кода, сопровождающий это сообщение в блоге, можно найти здесь .
Отток клиентов, потеря текущих клиентов - проблема, с которой сталкивается широкий круг компаний. При попытке удержать клиентов в интересах компании сосредоточить свои усилия на клиентах, которые..
Вопросы по теме 'amazon-sagemaker'
Как вызвать конечную точку Amazon SageMaker с помощью Python SDK
Я пытаюсь использовать эту очень простую команду:
import boto3
client = boto3.client('sagemaker-runtime')
перечислены в документации
но я получаю эту ошибку:
UnknownServiceError: Unknown service: 'sagemaker-runtime'. Valid service...
2699 просмотров
schedule
28.11.2022
Как я могу развернуть модель машинного обучения из ECS в Sagemaker?
У меня есть модель, которую обучили локально, а затем перенесли в AWS ECS. Я хочу развернуть его в Sagemaker.
В настоящее время занимаюсь:
from sagemaker.estimator import Estimator
model = Estimator(image,
role, 1,...
666 просмотров
schedule
12.07.2022
Как установить процент вызовов логического вывода при выполнении A/B-тестирования с помощью AWS sagemaker?
Я новичок в sagemaker. Я пытаюсь понять, как проводить A/B-тестирование с помощью AWS sagemaker. Я понимаю, что установка train_instance_count распределит обучение между двумя экземплярами. Но как указать процент вызовов логического вывода, который...
703 просмотров
schedule
28.06.2022
Sagemaker вызывает конечную точку, не возвращая прогноз
Я сделал модель по титанической задаче и развернул ее на sagemaker.
Я использую следующий код для отправки ввода:
import boto3
import pandas as pd
import io
import numpy as np
sm=boto3.client("runtime.sagemaker",region_name='us-east-1')
def...
899 просмотров
schedule
25.08.2022
Можем ли мы обучить модель обнаружения пользовательских объектов Tensorflow в SageMaker of AWS?
Не могли бы вы помочь мне со следующими пунктами:
Можем ли мы обучить модель обнаружения настраиваемых объектов tensorflow в SageMaker из AWS?
Я наткнулся на алгоритм классификации изображений SageMaker? Можем ли мы использовать его для...
1304 просмотров
schedule
15.09.2022
Sagemaker PySpark: ядро мертвое
Я выполнил инструкции здесь , чтобы настроить кластер EMR и записную книжку SageMaker. У меня не было ошибок до последнего шага.
Когда я открываю новый блокнот в Sagemaker, я получаю сообщение:
The kernel appears to have died. It will restart...
1393 просмотров
schedule
01.05.2022
AWS Sagemaker - в пути к данным обнаружен скрытый файл! Удалите это перед тренировкой.
Я пытаюсь обучить модель с помощью Amazon Sagemaker (xgboost: eu-west-1 ':' 685385470294.dkr.ecr.eu-west-1.amazonaws.com/xgboost:latest '). Но вскоре после начала обучения я всегда получаю одно и то же сообщение об ошибке:
«ClientError: в пути...
1418 просмотров
schedule
22.04.2022
Не удается начать обучение на Amazon SageMaker
def input_csv_fn():
#filenames = np.load(file_io.FileIO(npy_file, 'r'))
Dataset = tf.data.TextLineDataset(csv_file).skip(1).shuffle(buffer_size = 2000000).map(parser_csv, num_parallel_calls = cpu_count())
#Dataset =...
131 просмотров
schedule
05.01.2023
AWS SageMaker - в запросе указан недопустимый формат изображения
Я тестирую сервис Amazon SageMaker с помощью NodeJS + AWS SDK и после создания новой модели и конечной точки на основе этот пример (в записной книжке все работает хорошо, включая запрос к конечной точке), я пытаюсь создать запросы из моего...
628 просмотров
schedule
19.11.2022
Запуск файла .ipynb из функции Lambda или Sagemaker Lifecycle Config
ipynb при запуске экземпляра Sagemaker. текущий статус: Cloudwatch (успех) -> Lambda (успех) -> Экземпляр Sagemaker (успех) -> Запуск конкретного блокнота (не удалось)
1. Я пробовал использовать конфигурацию "Sagemaker Lifecycle" с кодом...
1194 просмотров
schedule
04.02.2023
AWS Sagemaker: Есть ли способ взглянуть на коэффициенты регрессоров модели «линейный ученик - бинарный классификатор»?
Мне интересно получить немного больше информации о строящейся модели. А именно, какие коэффициенты регрессоров он использует для прогноза?
Для функции потерь автоматически устанавливается значение «логистический». Я предполагаю, что это означает...
310 просмотров
schedule
19.03.2023
LightFM на AWS sagemaker | Можно ли тренировать модель
Я использую LightFM для рекомендательной системы https://github.com/lyst/lightfm
Теперь я хочу переместить свою модель в AWS Sagemaker, где это не является частью встроенного алгоритма, теперь я хочу обучить свою модель с помощью этого алгоритма,...
276 просмотров
schedule
21.02.2023
AWS SageMaker pd.read_pickle() не работает, а read_csv() работает?
Недавно я пытался обучить некоторые модели на экземпляре ноутбука AWS SageMaker jupyter.
Все работало очень хорошо, пока я не попытался загрузить какой-то пользовательский набор данных (REDD) через файлы.
У меня есть кадры данных, хранящиеся в...
611 просмотров
schedule
02.06.2022
Как обучить собственную модель в AWS Sagemaker?
Я только начал работать с AWS и хочу обучить собственную модель с собственным набором данных. У меня есть моя модель как модель keras с бэкэндом тензорного потока на Python. Прочитал документацию, говорят, мне нужен образ Docker для загрузки модели....
1932 просмотров
schedule
26.05.2023
Развертывание SageMaker в EIA из режима сценария TF Python3
Я установил Tensorflow Estimator в SageMaker, используя режим сценария с framework_version='1.12.0' и python_version='py3' , используя экземпляр GPU.
Вызов развертывания непосредственно в этом оценщике работает, если я также выберу тип...
297 просмотров
schedule
30.11.2022
Руководство для начинающих по Sagemaker
Я следил за учебником Amazon по использованию SageMaker и использовал его для создания модели в учебнике ( https://aws.amazon.com/getting-started/tutorials/build-train-deploy-machine-Learning-model-sagemaker/ ).
Я впервые использую SageMaker,...
575 просмотров
schedule
22.04.2022
Результат задания пакетного преобразования - InternalServerError с файлом данных ›100 МБ
Я использую Sagemaker, чтобы выполнить двоичную классификацию временных рядов, каждый образец представляет собой массив множества форм [24,11] (24 часа, 11 функций). Я использовал модель тензорного потока в режиме сценария, мой сценарий очень похож...
1117 просмотров
schedule
09.02.2023
Могу ли я скопировать или загрузить записную книжку Google Colab на экземпляр AWS Sagemaker?
Хочу иметь копию моего блокнота Google Colab python в моем блокноте AWS Sagemaker Jupyter (новичок в AWS Sagemaker)
Я попытался выбрать все ячейки в своем блокноте Colab и вставить в блокнот Jupyter sagemaker, используя значки копирования и вставки...
1263 просмотров
schedule
13.04.2022
AWS sagemaker RandomCutForest (RCF) против Scikit Lean RandomForest (RF)?
Есть ли разница между ними или это разные названия одного и того же алгоритма?
173 просмотров
schedule
16.01.2023
Randomforest в amazon aws sagemaker?
Я хочу воссоздать случайную модель леса, созданную локально, и развернуть ее через sagemaker. Модель очень простая, но для сравнения я хотел бы использовать ее в sagemaker. Я не вижу случайного леса среди встроенных алгоритмов sagemaker (что кажется...
2753 просмотров
schedule
28.04.2023