Данные, ИТ и машинное обучение
Коммерческие данные в одной системе
Автоматический сбор sell-in, отчётов дистрибьюторов и чеков сетей. Сопоставление номенклатуры, карантин данных, аналитические кубы, ML-модели спроса и рассылка отчётов в Excel.
Для когоCIO, CDO, Head of DWH, руководители коммерческой аналитики и BI.
От сбора отчётов из всех каналов до хранилища на ClickHouse, кубов SSAS Tabular и прикладных ML-моделей
Почему коммерческая аналитика в FMCG держится на ручном труде
Типичные проблемы ИТ-ландшафта производителя
Ручная работа в Excel
Аналитики тратят до 70% рабочего времени на то, чтобы скачивать отчёты с закрытых порталов сетей, сводить разнородные файлы дистрибьюторов и вручную сопоставлять строки.
Несогласованные справочники
Один и тот же товар в отчётах сетей, дистрибьюторов и в учётной системе завода («1С», SAP) называется по-разному, и автоматическая загрузка ломается.
У каждого отдела свои цифры
Коммерческий директор, бренд-маркетолог и финансовая служба видят разные выручку, маржинальность и объёмы за один и тот же отчётный месяц.
Автоматический сбор и карантин данных
Что даёт: бесперебойный сбор разнородных данных. Некорректные строки, пропущенные артикулы и аномалии задерживаются на входе, чтобы не попасть в корпоративное хранилище.
Учётные системы, дистрибьюторы, сети
Первичные продажи (sell-in) загружаются автоматически из учётных систем («1С», SAP), отчётов дистрибьюторов (EDI, Excel, CSV) и кассовых порталов сетей («X5 Диалог», «Магнит Data», «Лента», O'KEY).
Ошибочные строки — в карантин
Строки с нераспознанными товарами, неизвестными адресами торговых точек или аномальными объёмами автоматически откладываются в карантинный слой и ждут разбора.
Загрузка не останавливается
В интерфейсе оператора спорные записи сопоставляются в 1 клик. Основной расчёт и витрины аналитиков в это время продолжают работать.
Сопоставление номенклатуры и контрагентов (MDM)
Что даёт: единый эталонный справочник товаров, квантов поставки и торговых точек производителя.
Нечёткое сопоставление (fuzzy matching)
Алгоритм связывает произвольные названия товаров из отчётов сетей («Печ.земл.112», «Печенье Сах Земл 112г») с внутренними артикулами завода. Точность сопоставления — 99,4%.
EAN, PLU, спайки и короба
Система хранит связи между кодами: внутренний код 1С ↔ штрихкод единицы (EAN-13) ↔ код сети (PLU) ↔ спайка ↔ транспортный гофрокороб (ITF-14). Поэтому продажи корректно пересчитываются из одних единиц в другие.
Привязка к ФИАС и территориям
Адреса магазинов сетей и складов дистрибьюторов автоматически приводятся к классификатору ФИАС и привязываются к дивизионам продаж производителя.
Аналитическое хранилище и кубы SSAS Tabular
Что даёт: единые для всей компании определения метрик и быстрый доступ к миллиардам строк кассовых чеков без нагрузки на учётные системы завода.
ClickHouse и трансформации в dbt
Колоночная СУБД ClickHouse сильно сжимает данные и быстро агрегирует чековые транзакции. Трансформации описаны декларативным кодом в dbt и проверяются автотестами целостности.
Аналитические кубы SSAS Tabular
LFL (сопоставимые продажи), соотношение sell-in/sell-out, запас в неделях (Weeks of Supply) и Pocket Margin считаются по утверждённым формулам. Все отделы работают с одними определениями — цель в том, чтобы цифры совпадали на 100%.
Прикладные модели машинного обучения (ML)
Что даёт: решение конкретных задач коммерческой аналитики FMCG прогнозными моделями, а не абстрактным «AI».
Что модели находят в кассовых чеках: органический спрос, фантомные остатки и отсутствие товара на полке (OOS)
Базовый спрос (baseline)
Из истории продаж убираются всплески от жёлтых ценников и праздников, а также провалы из-за дефицита (OOS). Остаётся реальный органический спрос — основа для планирования.
Фантомные остатки (phantom inventory)
Модель находит аномалию: по учётной системе магазина товар есть в остатке, но продажи на кассе внезапно упали до нуля. Обычно это значит, что товар украден, у него повреждён штрихкод или он завален на складе.
Доступность на полке (OSA)
Модель оценивает, сколько времени товар фактически был в торговом зале, по интервалам между покупками в чеках.
Автоматическая сборка и рассылка отчётов
Что даёт: доставка готовой аналитики сотрудникам в привычных форматах, без необходимости осваивать сложные BI-системы.
Большие книги Excel
Система автоматически заполняет корпоративные шаблоны Excel со сводными таблицами, формулами и оформлением.
Презентации PowerPoint / PDF
Слайды к еженедельным совещаниям коммерческого департамента собираются автоматически — с графиками факторного анализа и выводами.
Адресная доставка по расписанию
Каждый ответственный сотрудник получает свои отчёты: утренние сводки продаж, еженедельные дайджесты по понедельникам, отчёты на закрытие месяца.
Что получают ИТ-дирекция и аналитики
На столько сокращается время подготовки отчётов: аналитики занимаются не сведением таблиц, а поиском инсайтов.
Совпадение цифр у коммерции, маркетинга и финансов: все берут данные из одного источника.
Время построения многомерного среза по терабайтам чековых данных в ClickHouse и кубах SSAS.
Проверьте, готова ли ваша ИТ-инфраструктура к единому хранилищу данных
Оставьте контакты — пришлём подробную архитектурную схему DWH, описание API-коннекторов к сетям и спецификацию карантина данных.