Все, что вы должны знать о картировании данных — полное руководство
Опубликовано: 2023-01-17Способность вашей компании принимать решения, используя свои данные, является неотъемлемой частью ее успеха. Но есть ли у вас четкое представление о том, какие данные есть в вашей компании, откуда они берутся и как используются?
Сопоставление данных — это первый шаг для команд к контролю над своими данными и сохранению их качества при перемещении между системами. Проблема заключается в том, что сопоставление данных может стать техническим и вызвать у команд непосильную нагрузку, что мешает им отображать свои данные, что приводит к серьезным проблемам с качеством данных, неэффективному принятию бизнес-решений и потенциальным проблемам с безопасностью данных.
Чтобы помочь вам с уверенностью отображать данные вашей компании, давайте рассмотрим, что такое сопоставление данных, как сопоставление данных может помочь вашей организации, а также четкие шаги для эффективного сопоставления ваших данных.
Что такое отображение данных?
Сопоставление данных связывает и отслеживает поля данных из одного источника (точка A) в другой источник (точка B) — независимо от каких-либо различий в языке — что позволяет отслеживать изменения в ваших данных в разных системах. Это также снижает вероятность ошибок, стандартизирует ваши данные и упрощает их понимание.
Давайте обратимся к аналогии с картой. В своей простейшей форме сопоставление данных идентифицирует:
- Источники данных —включают источник ваших данных и приложения, в которых они хранятся. Думайте об этом как об озере на традиционной карте, и все ваши «дороги» будут начинаться от этих источников. Ваш веб-сайт, серверы и приложения, такие как CRM, считаются источниками данных.
- Цели данных — любые приложения, использующие ваши данные.Их можно сравнить со зданиями и адресами на карте. Дороги будут вести от ваших источников данных к цели данных или от одной цели данных к другой.
- Преобразования данных — они стандартизируют ваши данные, чтобы их можно было использовать в ваших системах.Воспринимайте преобразования данных как остановки на пути к цели данных. На каждой остановке может потребоваться «преобразование» данных для ввода в цель данных, особенно если цель данных использует данные из нескольких источников. Преобразование данных может включать в себя такие вещи, как стандартизация формата дней рождения клиентов или анонимизация конфиденциальной информации.
Мы понимаем, что эту концепцию может быть трудно понять, поэтому давайте рассмотрим пример сопоставления данных, чтобы помочь.
Примеры сопоставления данных
Подумайте обо всех данных клиентов, которые вы храните. Вы собираете такие данные, как имя клиента, адрес, статус участника программы лояльности, адреса в социальных сетях и недавние покупки, а такжемногиедругие сведения.
Скорее всего, ваша CRM — это хранилище большей части ваших данных о клиентах, поэтому ваша CRM — этоисточникданных . Но вы можете хранить данные в нескольких других местах, например, в базе данных инвентаризации, чтобы отслеживать уровни ваших запасов.
Предположим, вы отправляете клиентам электронное письмо, чтобы уведомить их о том, что товара-бестселлера почти нет в наличии, и им нужно действовать быстро.
Сопоставление данных будет визуализировать, как данные из вашей CRM и базы данных инвентаря передаются в ваш инструмент маркетинга по электронной почте для заполнения ключевой информации. Сопоставляя данные в этом потоке, вы можете понять, что вам нужно объединить данные о клиентах из нескольких мест, прежде чем их можно будет использовать в вашем инструменте маркетинга по электронной почте. Или вы можете обнаружить критическое отключение, которое вредит вашей автоматизации маркетинга по электронной почте.
Управление данными начинается с отображения данных
Хотя сопоставление данных может показаться новичкам непосильным, это критически важный процесс, который послужит основой для всех ваших потребностей в управлении данными. В частности, отображение данных является первым шагом для каждой из этих общих потребностей управления данными:
Интеграция данных
Интеграция данных включает в себя объединение данных из нескольких источников для получения единого представления обо всех ваших данных. Интеграция данных берет все наборы данных, форматирует информацию единым образом и удаляет повторяющиеся детали или профили.
Перенос данных
Миграция данных включает перенос одного или нескольких наборов данных из одного места или формата в другой целиком. Распространенный тип миграции данных — это когда компания перемещает свои данные на облачную платформу, такую как AWS, из локального центра обработки данных. Далее мы объясним, как провести миграцию данных в этом посте.
Преобразование данных
Преобразование данных, как мы обсуждали выше, берет данные в их существующем формате и изменяет их, чтобы они соответствовали новому формату, чтобы их можно было использовать в других ваших системах и целях данных. Сначала команды должны пройти профилирование данных , а затем стандартизировать и очистить данные в соответствии с целевыми потребностями данных.
Как картирование данных может помочь вашей организации?
Преимущества сопоставления данных наиболее очевидны сразу после того, как вы впервые сопоставите свои данные. Картирование данных повысит качество ваших данных и поможет вам принимать более обоснованные бизнес-решения. Это также дает следующие преимущества:
Выявление и снижение рисков
Сопоставление данных повышает безопасность ваших данных , помогая вам понять, где хранятся конфиденциальные данные и как они используются вашими системами. Как только вы поймете, где находятся ваши конфиденциальные данные, вы сможете внедрить протоколы безопасности и ограничения доступа, которые гарантируют, что только утвержденные люди или системы смогут находить и использовать данные.
Оптимизация сложных данных
Данные хранятся и используются по-разному в разных бизнес-системах. Картирование данных — это единственный способ понять, как используются ваши данные, и найти способы оптимизировать их сбор, хранение или использование.
Принятие решений на основе данных
Сопоставление данных дает вам большую уверенность в том, что вы используете все нужные данные для обоснования своих бизнес-решений. Карта данных помогает определить, не хватает ли вам ключевых источников данных в ваших инструментах аналитики или есть ли на пути разрывы связи, которые ставят под угрозу качество ваших данных. Когда вы сможете подтвердить, что ваши инструменты аналитики получают надежные данные, ваша команда сможет сделать более разумный выбор на основе этих данных.
Улучшить внутренние операции
Тщательно изучив все способы, которыми ваша компания хранит и использует данные, вы сможете выявить избыточность и найти способы оптимизировать свои операции. Карта данных может объединить заинтересованные стороны в вашей организации и дать полное представление о том, как вы можете оптимизировать управление данными.
Как эффективно выполнять сопоставление данных: процесс сопоставления данных
Теперь, когда у вас есть четкое представление о том, как сопоставление данных может помочь вашей организации, пришло время объяснить, как начать сопоставление данных. Вы, вероятно, захотите использовать инструмент, чтобы помочь, и мы объясним преимущества этого в следующем разделе. Но процесс, иногда называемый шаблоном сопоставления данных, будет включать следующие шаги:
Определить все поля данных
Каковы источники данных вашей организации и какие данные вы в них храните? Создайте детальный список каждого поля данных в CRM и других источниках данных, включая форматирование полей.
Объедините заинтересованные стороны в разных организациях, чтобы определить источники данных, чтобы убедиться, что вы зафиксировали все.
Сопоставьте данные
После того, как вы определили свои поля данных, вы можете начать отображать, как эти данные используются и перемещаются в вашей организации. Визуализируйте, как данные будут передаваться от ваших источников данных к целевым объектам данных или между вашими целевыми данными. Обратите внимание, как данные из нескольких источников могут использоваться вашими бизнес-инструментами, так как это поможет на следующем шаге.
Преобразование данных
Как обсуждалось ранее, ваши данные, скорее всего, хранятся в разных форматах в ваших системах, поэтому их необходимо преобразовать, прежде чем они смогут использоваться вашими бизнес-инструментами. В вашей карте данных определите преобразования данных, которые происходят на каждом возможном шаге. Этот список поможет вам увидеть, нужно ли вам больше или другие преобразования, или вы можете оптимизировать сбор данных, чтобы уменьшить преобразование данных.
Тестирование
Начните с подмножества вашего основного набора данных, чтобы увидеть, допустили ли вы какие-либо ошибки в своей карте и не были ли непреднамеренно повреждены последующие зависимости. Тестирование вашей логики поможет вам сохранить качество данных и убедиться, что все работает, как задумано. Если вы уверены, что карта завершена, используйте ее в качестве шаблона отображения данных.
Обновления/обслуживание
Картирование данных — это непрерывное путешествие. Ваша команда представит новые источники данных, интегрирует или перенесет данные, а также примет новые инструменты, которые используют ваши данные для предоставления аналитики. Регулярно пересматривайте свою карту данных, особенно если вы внедрили новый бизнес-инструмент.
Если отделы рассматривают возможность сокращения своих расходов на ИТ, используйте карту данных, чтобы понять, какие системы наиболее важны для вашего успеха.
Какой метод сопоставления данных лучше всего подходит для вас?
Теперь приходит важное решение:каквы хотите отобразить свои данные? Есть несколько различных подходов, которые вы можете использовать в зависимости от ваших навыков разработчика, бюджета и терпения:
Автоматизированный
Автоматическое сопоставление данных включает в себя специальные инструменты или программное обеспечение, основанное на машинном обучении для обработки ваших данных, их сопоставления и визуализации ваших преобразований. Автоматическое сопоставление данных может сэкономить вашей команде сотни часов и неизмеримый стресс, учитывая, что эти решения созданы интуитивно понятными. Тем не менее, вам нужно будет выделить бюджет, чтобы использовать такой инструмент.
Полуавтоматический
Полуавтоматический процесс сопоставления данных будет основываться на сочетании технологий и ручных усилий, что делает его идеальным выбором для большинства компаний. Член вашей команды будет использовать инструмент для сопоставления ваших источников данных и целей, а затем ваша команда вручную просмотрит эту карту и при необходимости внесет изменения. Это потребует некоторых навыков кодирования и займет больше времени, чем автоматизированное решение, но это самый разумный выбор, если вы только начинаете свое путешествие по картированию данных.
Руководство по эксплуатации
Если вы не можете использовать инструмент для поддержки автоматического или полуавтоматического сопоставления данных, вам понадобится разработчик со знаниями в области сопоставления данных. Ручное сопоставление данных занимает значительное количество времени и может оставить значительное место для ошибок, учитывая множество различных решений и инструментов для данных, которые используют команды.
Тем не менее, ручное сопоставление данных дает вашей команде полный контроль над процессом и позволяет настраивать карту данных в точном соответствии с вашими потребностями.
Используйте данные клиентов в полной мере
Ваша способность использовать данные своих клиентов и доверять им имеет важное значение для эффективного привлечения клиентов и стимулирования продаж.
Сопоставление данных — это первый шаг к пониманию того, как вы собираете, храните и используете данные о клиентах, но этот процесс может оказаться сложным. Мы рекомендуем вам использовать инструмент для оптимизации значительной части ваших карт данных и проводить регулярное обслуживание, чтобы поддерживать вашу карту в актуальном состоянии.
Чтобы еще больше помочь вам оптимизировать данные о ваших клиентах, зарегистрируйтесь для участия в нашем следующем выпуске Data In Sight, чтобы получить практические советы по поддержанию чистой и действенной CRM.