Имеет ли ваша организация право собственности на распределенные данные?

Что такое платформа данных самообслуживания?

Вы заходите в ближайший супермаркет, берете корзину, наполняете ее всем, что вам нужно, и идете к кассе. Вы сканируете штрих-коды товаров, платите, кладете их в сумку и уходите — и все это, не взаимодействуя ни с одним человеком в супермаркете.

Представьте, что заинтересованные стороны вашего бизнеса ищут ответ на конкретный вопрос. Они вносят свои данные в озеро данных или хранилище данных, курируют их и создают для них отчет BI. Опять же, делая это, не полагаясь на команду, чтобы включить их. Добро пожаловать на платформу данных самообслуживания — «платформу, позволяющую заинтересованным сторонам получать, обрабатывать, делиться и составлять отчеты о данных, которыми они владеют, не полагаясь на какую-либо другую команду».

Традиционно платформы данных создавались, обслуживались и обновлялись центральными командами, которые управляют как инфраструктурой, так и данными. Это создает зависимость и ощущение узкого места для новых инициатив и требований. Чтобы решить эту проблему, многие организации встали на путь владения распределенными данными или, проще говоря, мультиарендности.

Каждый владелец данных несет ответственность за создание, обслуживание и эксплуатацию своих конвейеров данных. Команда платформы будет отвечать только за базовую инфраструктуру и предоставлять новые возможности, облегчающие жизнь владельцам данных. Теоретически это фантастическая идея, позволяющая вашим конечным пользователям быть независимыми. На самом деле, это не все розы.

4 главные проблемы платформы данных самообслуживания

Большинство проблем с самообслуживанием не связаны с базовой технологией, которая закрепляет платформу. Обсудим примечательные.

Благословение высшего руководства

Переход на платформу данных самообслуживания — это скорее изменение мышления, чем изменение технологии. Для успеха вашей инициативы необходимо получить одобрение высшего руководства. Это помогает направить организацию и использование данных в правильном направлении.

Высшее руководство несет основную ответственность за популяризацию концепции аналитики самообслуживания. Если они не увидят в нем ценности, они не смогут убедить своих коллег принять его.

Отсутствие соответствующих навыков

Одна из самых частых жалоб, которые я слышу от владельцев данных, заключается в том, что в нашей команде нет специалистов по обработке данных. Если вы задумаетесь об основе существования концепции самообслуживания, вы поймете, что мы расширяем возможности и возможности наших пользователей.

Эти пользователи всегда были аналитиками или бизнес-пользователями, у которых не было инженерного склада ума. Попросить их заняться проектированием данных — непростая задача. Следовательно, те команды, которые наняли аналитиков, должны начать нанимать инженеров данных. Хотя это выполнимо, время, необходимое для найма, запуска и начала доставки, все еще составляет пару месяцев.

Вы могли бы подумать, что нанять дата-инженеров и создать команду, которая позаботится обо всем, — это разовая инвестиция. Представьте, что у вас есть десятки таких групп, нанимающих дата-инженеров, а затем умножьте это на стоимость приобретения этих ресурсов. Сейчас мы ищем десятки квалифицированных инженеров, разбросанных по всей вашей организации.

Новое изобретение колеса

У каждой команды есть методы работы, которые она приняла на основе невыполненных работ, приоритетов и целей. То же самое относится и к распределенным командам инженеров данных. Внедрение стандартных шаблонов приема, курирования, совместного использования и отчетности является сложной задачей. Большую часть времени ваша платформа данных будет страдать от отсутствия общих методов обработки данных.

Это серьезная проблема из-за взаимозависимости обмена и доставки данных другим внутренним и внешним командам. Несколько команд применяют разные шаблоны для решения одной и той же проблемы, по сути заново изобретая колесо.

Управление доступом

Передача управления данными и конвейерами нескольким бизнес-группам сопряжена с новой проблемой доступа к данным и их безопасности. Независимо от того, сколько правил вы применяете, всегда будет риск распространения данных. Чем больше у групп доступа, тем выше риск утечки данных и неправильного доступа в организации.

Существует тонкая грань между ограничением доступа и предоставлением пользователям возможности выполнять свою работу. Слишком много ограничений, и ничего не получится; слишком меньше будет означать, что данные доступны больше, чем необходимо. Крайне важно иметь достаточно средств контроля, чтобы снизить операционный риск и включить аналитику самообслуживания.

Преодоление вызовов

Общаться

Самый мощный инструмент демократизации вашей платформы данных — это привлечение промоутеров; единственный способ — поделиться с ними своей идеей. Демонстрация возможностей и преимуществ, которые принесет ваша платформа еще до того, как она будет разработана, поставит вас на правильный путь.

Начать мелкосерийное самообслуживание

Как бы здорово это ни звучало, просить бизнес-команды о комплексном самообслуживании может быть не очень хорошей идеей. Цель состоит в том, чтобы обеспечить полное самообслуживание; однако разбив его на небольшие шаги, вы только поможете своему делу. Может быть, начать с включения самообслуживания для создания отчетов и позволить платформе создавать стандартные структуры и шаблоны для приема и курирования. Начните с передачи ответственности, чтобы не перегружать бизнес-команды, а сбалансировать свое настоящее с будущим направлением.

Ограждения

Если вы дадите ручку и бумагу группе людей и попросите их нарисовать картинку, будьте уверены, среди них не будет двух одинаковых. То же самое относится и к инженерии данных. Чтобы предотвратить хаос, внедрите стандартные методы и шаблоны и обучите команды инженеров использовать их. Мотив состоит в том, чтобы следовать по тому же пути, если он уже существует, и прокладывать новый, если его нет.

Улучшить совместную работу

Потребность в постоянном сотрудничестве возрастает с распределенными командами, работающими над достижением общей цели. Учебные занятия, чат-группы и регулярные семинары для обмена выводами, знаниями, процессами и практиками повысят признание вашей платформы данных.

Заключение

Платформа данных стала важным компонентом бизнес-стратегии. Малые и крупные организации нуждаются в информации быстрее, чем когда-либо прежде. Инвестирование в платформу данных требует тщательного обдумывания и реализации. Последнее, что вам нужно, — это создавать что-то медленное и непригодное для использования. Независимо от того, как вы разработаете свою платформу, обязательно уделяйте равное внимание использованию платформы, уделяя особое внимание ее использованию заинтересованными сторонами.

«Создайте платформу — подготовьтесь к неожиданностям… вы поймете, что добились успеха, когда созданная вами платформа послужит вам неожиданным образом». — Пьер Омидьяр