Публикации по теме 'amazon-sagemaker'


Переход с локального Jupyter на Amazon SageMaker  —  Часть 2
Авторы : Викеш Пандей , Осман Хамзауи В разделе Переход с локального jupyter на Amazon SageMaker — часть 1 мы рассказали, как взять готовый пример из руководств по PyTorch и запустить его с помощью обучающего API SageMaker. Мы рассмотрели, как мы можем запускать код на эфемерных управляемых обучающих кластерах и как сохранять ваши модели, сохраняя их в S3 после завершения обучения. В этой части мы объясним, как указать ваш сценарий обучения на ваши собственные данные и как добавить..

Разработчик заходит в Amazon SageMaker…
Построение моделей машинного обучения с использованием алгоритма K-средних и Amazon SageMaker Если вы не живете в условиях пресловутой технической скалы, вы, вероятно, когда-то слышали фразу «машинное обучение». В последние годы машинное обучение вышло из академических кругов и науки о данных в область общей разработки программного обеспечения. Это привело к тому, что инженерные группы столкнулись с трудностями, пытаясь понять эту новую область и способы ее интеграции в традиционную..

Amazon Sagemaker: краткое руководство
Тратьте меньше времени на построение рабочих процессов и больше времени на разработку моделей Как специалист по данным, одно из моих нелюбимых занятий - установка пакетов и построение рабочих процессов для поддержки моих моделей машинного обучения. Чем быстрее я смогу настроить свою инфраструктуру , тем больше у меня будет времени для исследования данных и разработки моделей. Кроме того, переход с моего Mac на HPC или облако означает больше времени, потраченного на настройку этих..

Прогнозирование оттока клиентов с помощью текста и интерпретируемости
Промышленные записки Прогнозирование оттока клиентов с помощью текста и возможности интерпретации Предсказание, если клиенты захотят уйти, и понимание того, почему. Авторы Даниэль Херкерт , Тайлер Мюлленбах Репозиторий кода, сопровождающий это сообщение в блоге, можно найти здесь . Отток клиентов, потеря текущих клиентов - проблема, с которой сталкивается широкий круг компаний. При попытке удержать клиентов в интересах компании сосредоточить свои усилия на клиентах, которые..

Вопросы по теме 'amazon-sagemaker'

Как вызвать конечную точку Amazon SageMaker с помощью Python SDK
Я пытаюсь использовать эту очень простую команду: import boto3 client = boto3.client('sagemaker-runtime') перечислены в документации но я получаю эту ошибку: UnknownServiceError: Unknown service: 'sagemaker-runtime'. Valid service...
2699 просмотров

Как я могу развернуть модель машинного обучения из ECS в Sagemaker?
У меня есть модель, которую обучили локально, а затем перенесли в AWS ECS. Я хочу развернуть его в Sagemaker. В настоящее время занимаюсь: from sagemaker.estimator import Estimator model = Estimator(image, role, 1,...
666 просмотров

Как установить процент вызовов логического вывода при выполнении A/B-тестирования с помощью AWS sagemaker?
Я новичок в sagemaker. Я пытаюсь понять, как проводить A/B-тестирование с помощью AWS sagemaker. Я понимаю, что установка train_instance_count распределит обучение между двумя экземплярами. Но как указать процент вызовов логического вывода, который...
703 просмотров

Sagemaker вызывает конечную точку, не возвращая прогноз
Я сделал модель по титанической задаче и развернул ее на sagemaker. Я использую следующий код для отправки ввода: import boto3 import pandas as pd import io import numpy as np sm=boto3.client("runtime.sagemaker",region_name='us-east-1') def...
899 просмотров

Можем ли мы обучить модель обнаружения пользовательских объектов Tensorflow в SageMaker of AWS?
Не могли бы вы помочь мне со следующими пунктами: Можем ли мы обучить модель обнаружения настраиваемых объектов tensorflow в SageMaker из AWS? Я наткнулся на алгоритм классификации изображений SageMaker? Можем ли мы использовать его для...
1304 просмотров

Sagemaker PySpark: ядро ​​мертвое
Я выполнил инструкции здесь , чтобы настроить кластер EMR и записную книжку SageMaker. У меня не было ошибок до последнего шага. Когда я открываю новый блокнот в Sagemaker, я получаю сообщение: The kernel appears to have died. It will restart...
1393 просмотров
schedule 01.05.2022

AWS Sagemaker - в пути к данным обнаружен скрытый файл! Удалите это перед тренировкой.
Я пытаюсь обучить модель с помощью Amazon Sagemaker (xgboost: eu-west-1 ':' 685385470294.dkr.ecr.eu-west-1.amazonaws.com/xgboost:latest '). Но вскоре после начала обучения я всегда получаю одно и то же сообщение об ошибке: «ClientError: в пути...
1418 просмотров

Не удается начать обучение на Amazon SageMaker
def input_csv_fn(): #filenames = np.load(file_io.FileIO(npy_file, 'r')) Dataset = tf.data.TextLineDataset(csv_file).skip(1).shuffle(buffer_size = 2000000).map(parser_csv, num_parallel_calls = cpu_count()) #Dataset =...
131 просмотров

AWS SageMaker - в запросе указан недопустимый формат изображения
Я тестирую сервис Amazon SageMaker с помощью NodeJS + AWS SDK и после создания новой модели и конечной точки на основе этот пример (в записной книжке все работает хорошо, включая запрос к конечной точке), я пытаюсь создать запросы из моего...
628 просмотров

Запуск файла .ipynb из функции Lambda или Sagemaker Lifecycle Config
ipynb при запуске экземпляра Sagemaker. текущий статус: Cloudwatch (успех) -> Lambda (успех) -> Экземпляр Sagemaker (успех) -> Запуск конкретного блокнота (не удалось) 1. Я пробовал использовать конфигурацию "Sagemaker Lifecycle" с кодом...
1194 просмотров
schedule 04.02.2023

AWS Sagemaker: Есть ли способ взглянуть на коэффициенты регрессоров модели «линейный ученик - бинарный классификатор»?
Мне интересно получить немного больше информации о строящейся модели. А именно, какие коэффициенты регрессоров он использует для прогноза? Для функции потерь автоматически устанавливается значение «логистический». Я предполагаю, что это означает...
310 просмотров

LightFM на AWS sagemaker | Можно ли тренировать модель
Я использую LightFM для рекомендательной системы https://github.com/lyst/lightfm Теперь я хочу переместить свою модель в AWS Sagemaker, где это не является частью встроенного алгоритма, теперь я хочу обучить свою модель с помощью этого алгоритма,...
276 просмотров

AWS SageMaker pd.read_pickle() не работает, а read_csv() работает?
Недавно я пытался обучить некоторые модели на экземпляре ноутбука AWS SageMaker jupyter. Все работало очень хорошо, пока я не попытался загрузить какой-то пользовательский набор данных (REDD) через файлы. У меня есть кадры данных, хранящиеся в...
611 просмотров

Как обучить собственную модель в AWS Sagemaker?
Я только начал работать с AWS и хочу обучить собственную модель с собственным набором данных. У меня есть моя модель как модель keras с бэкэндом тензорного потока на Python. Прочитал документацию, говорят, мне нужен образ Docker для загрузки модели....
1932 просмотров

Развертывание SageMaker в EIA из режима сценария TF Python3
Я установил Tensorflow Estimator в SageMaker, используя режим сценария с framework_version='1.12.0' и python_version='py3' , используя экземпляр GPU. Вызов развертывания непосредственно в этом оценщике работает, если я также выберу тип...
297 просмотров

Руководство для начинающих по Sagemaker
Я следил за учебником Amazon по использованию SageMaker и использовал его для создания модели в учебнике ( https://aws.amazon.com/getting-started/tutorials/build-train-deploy-machine-Learning-model-sagemaker/ ). Я впервые использую SageMaker,...
575 просмотров

Результат задания пакетного преобразования - InternalServerError с файлом данных ›100 МБ
Я использую Sagemaker, чтобы выполнить двоичную классификацию временных рядов, каждый образец представляет собой массив множества форм [24,11] (24 часа, 11 функций). Я использовал модель тензорного потока в режиме сценария, мой сценарий очень похож...
1117 просмотров
schedule 09.02.2023

Могу ли я скопировать или загрузить записную книжку Google Colab на экземпляр AWS Sagemaker?
Хочу иметь копию моего блокнота Google Colab python в моем блокноте AWS Sagemaker Jupyter (новичок в AWS Sagemaker) Я попытался выбрать все ячейки в своем блокноте Colab и вставить в блокнот Jupyter sagemaker, используя значки копирования и вставки...
1263 просмотров

AWS sagemaker RandomCutForest (RCF) против Scikit Lean RandomForest (RF)?
Есть ли разница между ними или это разные названия одного и того же алгоритма?
173 просмотров

Randomforest в amazon aws sagemaker?
Я хочу воссоздать случайную модель леса, созданную локально, и развернуть ее через sagemaker. Модель очень простая, но для сравнения я хотел бы использовать ее в sagemaker. Я не вижу случайного леса среди встроенных алгоритмов sagemaker (что кажется...
2753 просмотров