Публикации по теме 'data-engineering'


Панель визуализации с D3 и Svelte-Kit  — не с Tableau
Визуализация данных используется повсеместно. С инструментами, которые очень просты с наименьшими затратами на обучение , возникают свои проблемы. Такие библиотеки, как Plotly и D3.js, предлагают больший контроль над визуализацией, но требуют сложного обучения . Сначала я изучил D3.js и Javascript, а затем освоил все доступные технологии. (См. 3-й раздел) Я пишу этот пост для тех, кто думает о том, чтобы освоить визуализацию данных. Можно составить общую картину, что для этого..
Организация конвейеров машинного обучения
Конвейеры машинного обучения (ML) помогают поддерживать порядок различных последовательных шагов в рабочем процессе от базовой инъекции данных до очистки, обучения модели, мониторинга и развертывания. Надежность и эффективность моделей машинного обучения, развернутых в производственной среде, можно повысить, систематизировав весь процесс от начала до конца в единый автоматизированный поток. Организация конвейера машинного обучения Типичный хорошо спланированный пайплайн состоит из..
10 советов специалистам по данным
Пока я сижу здесь, в своем гостиничном номере на Манхэттене, готовясь к рабочим встречам и обсуждениям, которые состоятся на следующий день. Я обнаружил, что не могу не смотреть в окно на Эмпайр Стейт Билдинг. «Я здесь, в Нью-Йорке… Футурама… Уолл-стрит… Таймс-сквер…» В целом я прагматичный и приземленный человек, но этот город что-то сделал со мной. Минут пятнадцать или около того я сидел и не мог понять, почему я застрял на этой идее Нью-Йорка. И тут меня осенило: тяжелая работа,..
Корреляционный анализ
Всем привет, сегодня я расскажу о корреляции между столбцами фрейма данных. Перед тем, как глубоко погрузиться в эту тему, это моя первая статья на тему науки о данных, поэтому, если вы видите кусок неверной информации, не стесняйтесь, пишите комментарий. Примеры в этой статье написаны на python. Корреляция Проще говоря, корреляция исследует линейную связь переменных. Представьте, что у вас есть две переменные: мощность автомобиля и расход автомобиля. Обычно, когда мощность..
ПОЛНАЯ НАУКА ДАННЫХ
Поскольку область науки о данных продолжает развиваться, появилась новая роль: наука о данных с полным стеком. Этот гибридный профессионал сочетает в себе навыки инженера данных, аналитика данных и специалиста по данным для управления сквозным процессом сбора, очистки, анализа и интерпретации данных. В этой статье мы рассмотрим, кто такой full-stack специалист по данным, какими навыками он обладает и почему он пользуется большим спросом. Кто является специалистом по данным Full-Stack?..
Фонд искусственного интеллекта настроит проекты трансформации на успех
Искусственный интеллект сегодня является главной тенденцией в отрасли. Недавние исследования показали, что ИИ, по оценкам, добавит мировой экономике 13 триллионов долларов в предстоящее десятилетие. Тем не менее, предприятия все еще стремятся расширить свою структуру ИИ. Здесь необходимо признать и понять культурные и организационные препятствия, с которыми сталкиваются ваши усилия по ИИ, и найти пути их развития. Чтобы добиться успеха в цифровой трансформации, компаниям необходимо..
Большие данные и их влияние на науку о данных
Большие данные — это огромное количество структурированных и неструктурированных данных, ежедневно создаваемых предприятиями, отдельными лицами и другими организациями. Растущий объем, скорость и разнообразие данных создали значительные возможности и проблемы для ученых и организаций, занимающихся данными. В этом блоге мы рассмотрим влияние больших данных на науку о данных и то, как они меняют эту область. Увеличение объема данных Экспоненциальный рост данных был определяющей..