Крупная телекоммуникационная компания улучшает операции с данными с помощью Cloudian, MemSQL и Druid

В смелом шаге по модернизации своих операций с данными в сфере телекоммуникаций крупная телекоммуникационная компания развернула объектное хранилище Cloudian, интегрировала аналитические платформы MemSQL и Apache Druid для анализа в режиме реального времени. Эта инициатива вдохнула новую жизнь в операции с данными в сфере телекоммуникаций, предоставив масштабируемое объектное хранилище, обработку данных в режиме реального времени и экономичное хранение данных для решения масштабных задач по управлению данными в сфере телекоммуникаций. Эта трансформация наглядно демонстрирует, как телекоммуникационные компании могут интегрировать Cloudian Storage с MemSQL и Druid, чтобы стать более гибкими и ориентированными на аналитику.

В этой статье мы рассмотрим, почему операции с данными в телекоммуникационных компаниях требуют изменений, как была разработана архитектура, объединяющая Cloudian, MemSQL и Druid, какие преимущества получила телекоммуникационная компания и как ваша организация может повторить подобный успех. Мы рассмотрим передовые практики управления данными в телекоммуникационных компаниях, выделим ключевые этапы интеграции и рассмотрим, как аналитика данных с использованием ИИ и аналитика в режиме реального времени с ИИ используются в этой среде.

Почему операции с данными в сфере телекоммуникаций нуждались в трансформации

Телекоммуникационная компания столкнулась с взрывным ростом объёма данных: записи вызовов, сетевая телеметрия, журналы использования клиентами, события потоковой передачи данных и многое другое. Устаревшие системы испытывали трудности с масштабированием, затратами и производительностью. Операции с данными в сфере телекоммуникаций стали узким местом, расходы на хранение данных росли, аналитика работала медленно, а доступ к информации в режиме реального времени отсутствовал.

Им требовалось масштабируемое объектное хранилище с возможностью плавного роста, совместимость с API S3 для использования современных инструментов, обработка данных в режиме реального времени для поддержки потоковой аналитики и телекоммуникационное озеро данных, поддерживающее как историческую, так и практически мгновенную аналитику. Развертывание хранилища Cloudian, аналитики MemSQL и аналитики в режиме реального времени Apache Druid позволило решить эти задачи. Пример из практики Cloudian подтверждает масштабное развертывание.

Обзор архитектуры Cloudian + MemSQL + Druid в операциях с телекоммуникационными данными

Cloudian Storage как основа — масштабируемое объектное хранилище с совместимостью с API S3

Основой новой архитектуры телекоммуникационной компании является объектное хранилище Cloudian. Это высокомасштабируемое решение, совместимое с S3, позволяет оператору хранить петабайты данных с меньшими затратами по сравнению с традиционными системами SAN/NAS. Совместимость с API S3 обеспечивает бесперебойную интеграцию существующих инструментов для обработки и анализа больших данных.

Роль Cloudian: хранение большого количества необработанных и обработанных данных, поддержка телекоммуникационного озера данных и обеспечение работы MemSQL и Druid.

Аналитический слой MemSQL для структурированных и полуструктурированных рабочих нагрузок

MemSQL служит аналитическим инструментом для структурированных и полуструктурированных наборов данных. Благодаря высокопроизводительным SQL-запросам он позволяет аналитикам выполнять сложные нерегламентированные запросы, создавать информационные панели и отчёты по использованию телекоммуникационных услуг, оттоку клиентов, доходам и производительности сети.

Уровень аналитики в реальном времени Apache Druid для быстрой обработки событий

Apache Druid обеспечивает потоковую обработку данных и запросы в режиме реального времени, идеально подходя для обработки телеметрии, данных о событиях и показателей сетевых операций. Он поддерживает запросы с задержкой менее секунды, предоставляя сетевым инженерам и бизнес-пользователям доступ к аналитике практически в режиме реального времени.

Интеграция: от необработанных данных к аналитике в реальном времени

В этой архитектуре данные из сетевых систем и журналов использования поступают в хранилище Cloudian. Затем потоковые конвейеры передают данные в Druid для обработки в режиме реального времени, а пакетные и полуструктурированные данные поступают в MemSQL для более глубокой аналитики. Управление, каталогизация и оркестровка связывают систему воедино.

Основные преимущества, получаемые телекоммуникационной компанией

Экономичное хранение данных и более низкая совокупная стоимость владения

Перейдя на хранилище Cloudian, телекоммуникационная компания добилась значительной экономии по сравнению с устаревшими системами. Модель объектного хранения позволила масштабировать данные, не привязываясь к дорогостоящим циклам обновления оборудования.

Улучшенная аналитика в реальном времени для сетевой и клиентской информации

Благодаря внедрению Druid телекоммуникационная компания получила возможность получать аналитику сетевой телеметрии и клиентских событий за доли секунды. Это улучшило время реагирования, улучшило обнаружение неисправностей и повысило операционную гибкость.

Унифицированная платформа данных для структурированных и потоковых рабочих нагрузок

Совместное использование MemSQL и Druid позволило телекоммуникационной компании объединить аналитику исторических структурированных данных и новых потоковых данных, что позволило сократить разрозненность данных и ускорить получение аналитической информации.

Более высокая масштабируемость и перспективная архитектура

Масштабируемое объектное хранилище Cloudian позволило справиться с будущим ростом — эксабайтами данных, большим количеством устройств, большим количеством событий без переписывания архитектуры.

Лучшее принятие решений и более быстрое понимание

Бизнес-участники теперь получают доступ к решениям платформы аналитики в сфере телекоммуникаций с меньшими задержками. Информационные панели в режиме реального времени и прогнозное моделирование поддерживают отделы маркетинга, сетевых операций и обслуживания клиентов.

Шаги по внедрению платформы управления данными Cloudian + MemSQL + Druid Telecom

1. Определите варианты использования и фокус на ценности для бизнеса

Начните с определения аспектов телекоммуникационных операций с данными, требующих улучшения: надёжность сети, отток клиентов, утечка доходов и мониторинг сети в режиме реального времени. Выстраивайте архитектуру вокруг этих требований — как оптимизировать телекоммуникационные операции с данными.

2. Разработайте масштабируемую стратегию хранения объектов

Определите уровни хранения, политики жизненного цикла, требования к соблюдению нормативных требований, конечные точки API S3 и показатели производительности. Cloudian выбран за масштабируемое хранилище объектов и совместимость с S3.

3. Архитектура аналитических движков (MemSQL + Druid)

Выберите, где использовать MemSQL (структурированные рабочие нагрузки SQL) или Druid (потоковую передачу событий в реальном времени). Определите конвейеры сбора данных, политики хранения и шаблоны запросов. «Интеграция MemSQL и Apache Druid» становится центральной темой.

4. Создайте конвейеры приема и потоковой передачи данных

Используйте потоковые фреймворки (например, Kafka или Pulsar) для работы с Druid и пакетные конвейеры для MemSQL. Обеспечьте непрерывную подачу данных в озеро телекоммуникационных данных и актуальность аналитики.

5. Внедрение управления, метаданных и управления данными

Масштабирование требует управления: каталогизации, определения происхождения, контроля доступа и журналов аудита. Управление телекоммуникационными данными должно соответствовать нормативным и конкурентным стандартам.

6. Включите аналитику самообслуживания и панели мониторинга в реальном времени

Предоставьте командам по сетевым операциям, маркетингу и обслуживанию клиентов информационные панели, аналитику в реальном времени и инструменты бизнес-аналитики на базе этой архитектуры.

7. Мониторинг, оптимизация и масштабирование

Отслеживайте производительность, показатели затрат (хранение, вычисления), задержку запросов и освоение пользователями. Постоянно оптимизируйте архитектуру для экономичного хранения данных и обработки данных в режиме реального времени.

Лучшие практики и подводные камни в управлении крупномасштабными телекоммуникационными данными

Распространенные проблемы в работе с данными в телекоммуникационных компаниях включают неконтролируемый рост объёмов хранилища, отсутствие интеграции между аналитикой в ​​реальном времени и пакетной аналитикой, неэффективное управление и разрозненность инструментов. Избегайте этих проблем, внедряя интегрированные платформы, применяя метаданные и каталогизацию, а также согласуя аналитику с бизнес-результатами.

Передовые практики включают выбор масштабируемого объектного хранилища, совместимого с S3, например Cloudian, объединение структурированной аналитики (MemSQL) с потоковой аналитикой в ​​реальном времени (Druid) и создание конвейеров, учитывающих будущий рост.

Как Solix дополняет платформы обработки телекоммуникационных данных

Хотя в случае телекоммуникационной компании основное внимание уделяется Cloudian, MemSQL и Druid, стоит рассмотреть ещё один компонент — Solix для управления данными, их контроля и архивирования. Solix предоставляет инструменты для работы с данными корпоративного уровня, легко встраивая управление, метаданные, каталогизацию и архивирование в крупномасштабные платформы данных.

Для телекоммуникационных организаций Solix помогает: масштабируемость политики хранения данныхЭкономичное многоуровневое хранилище, соответствие требованиям и готовность к аудиту, кроссплатформенная интеграция данных и поддержка аналитики данных на базе искусственного интеллекта. Сочетание Cloudian + MemSQL + Druid с Solix может дополнительно улучшить решения для аналитики в сфере телекоммуникаций и оптимизировать управление крупномасштабными данными в сфере телекоммуникаций.

Часто задаваемые вопросы (FAQ)

Какие преимущества дают хранилище Cloudian, аналитика MemSQL и аналитика в реальном времени Apache Druid для операций с телекоммуникационными данными?

Cloudian предлагает масштабируемое объектное хранилище с совместимостью с API S3, что снижает затраты и обеспечивает лёгкое масштабирование; MemSQL обеспечивает высокопроизводительную SQL-аналитику структурированных данных; Apache Druid поддерживает потоковую обработку и запросы в режиме реального времени для рабочих нагрузок, управляемых событиями. В совокупности они обеспечивают эффективное и экономичное управление телекоммуникационными данными в режиме реального времени.

Каким образом масштабируемое объектное хранилище поддерживает аналитику в реальном времени в телекоммуникациях?

Масштабируемое объектное хранилище позволяет хранить огромные объёмы необработанных и обработанных данных по доступной цене, а потоковые движки (например, Druid) могут обрабатывать эти данные и выполнять запросы практически в режиме реального времени. Интерфейс, совместимый с S3, позволяет легко подключать различные аналитические инструменты.

Зачем интегрировать MemSQL и Druid, а не выбирать один аналитический движок?

У каждого движка есть свои сильные стороны: MemSQL превосходно справляется со структурированной аналитикой на основе SQL; Druid — с аналитикой потока событий в режиме реального времени, выполняя запросы за доли секунды. Комбинированный подход охватывает как исторические, так и актуальные данные в операциях с данными в телекоммуникациях.

Какие типичные ошибки возникают при масштабном развертывании платформы аналитики в сфере телекоммуникаций?

К подводным камням относятся неконтролируемый рост объема данных, приводящий к перерасходу средств, а также отсутствие управления, вызывающее разрозненные хранилища данныхНедостаточная поддержка работы в режиме реального времени приводит к задержке получения информации и нежеланию бизнес-команд внедрять новую платформу. Решайте эти проблемы как можно скорее с помощью архитектуры, корпоративного управления и управления изменениями.

С чего организациям следует начать, стремясь оптимизировать операции с телекоммуникационными данными с помощью современных аналитических платформ?

Начните с определения наиболее ценных вариантов использования (например, обнаружение сетевых аномалий, прогнозирование оттока клиентов в реальном времени), оцените текущую инфраструктуру данных, выберите масштабируемое объектное хранилище, такое как Cloudian, определите аналитические механизмы (MemSQL и Druid), внедрите методы управления и измеряйте влияние с течением времени.

ОТКАЗ ОТ ОТВЕТСТВЕННОСТИ: СОДЕРЖАНИЕ, ВЗГЛЯДЫ И МНЕНИЯ, ВЫСКАЗАННЫЕ В ЭТОМ БЛОГЕ, ПРИНАДЛЕЖАТ ИСКЛЮЧИТЕЛЬНО АВТОРУ(АМ) И НЕ ОТРАЖАЮТ ОФИЦИАЛЬНУЮ ПОЛИТИКУ ИЛИ ПОЗИЦИЮ SOLIX TECHNOLOGIES, INC., ЕЁ АФФИЛИРОВАННЫХ ЛИЦ ИЛИ ПАРТНЕРОВ. ЭТОТ БЛОГ ВЕДЁТСЯ НЕЗАВИСИМО И НЕ РЕЦЕНЗИРУЕТСЯ И НЕ ОДОБРЯЕТСЯ SOLIX TECHNOLOGIES, INC. В ОФИЦИАЛЬНОМ ПОРЯДКЕ. ВСЕ ТОРГОВЫЕ МАРКИ, ЛОГОТИПЫ И МАТЕРИАЛЫ, ЗАЩИЩЕННЫЕ АВТОРСКИМ ПРАВОМ, УПОМЯНУТЫЕ В НАСТОЯЩЕМ МАТЕРИАЛЕ, ЯВЛЯЮТСЯ СОБСТВЕННОСТЬЮ ИХ СООТВЕТСТВУЮЩИХ ВЛАДЕЛЬЦЕВ. Любое использование предназначено исключительно для опознавательных, консультативных или образовательных целей в соответствии с доктриной добросовестного использования (Закон США об авторском праве, статья 107, и международные эквиваленты). Никакое спонсорство, поддержка или связь с SOLIX TECHNOLOGIES, INC. не подразумевается. Контент предоставляется «как есть» без гарантий точности, полноты или пригодности для какой-либо цели. SOLIX TECHNOLOGIES, INC. отказывается от любой ответственности за действия, предпринятые на основе этого материала. Читатели несут полную ответственность за использование этой информации. SOLIX уважает права интеллектуальной собственности. ЧТОБЫ ПОДАТЬ ЗАПРОС НА УДАЛЕНИЕ МАТЕРИАЛА В СООТВЕТСТВИИ С DMCA, ОТПРАВЬТЕ ЭЛЕКТРОННОЕ ПИСЬМО НА АДРЕС INFO@SOLIX.COM, УКАЗАВ: (1) ИДЕНТИФИКАЦИЮ РАБОТЫ, (2) URL-АДРЕС МАТЕРИАЛА, НАРУШАЮЩЕГО АВТОРСКИЕ ПРАВА, (3) ВАШИ КОНТАКТНЫЕ ДАННЫЕ И (4) ЗАЯВЛЕНИЕ О ДОБРОСОВЕСТНОСТИ. ОБОСНОВАННЫЕ ПРЕТЕНЗИИ БУДУТ БЫТЬ ОПЕРАТИВНО РАССМОТРЕНЫ. ПОЛУЧАЯ ДОСТУП К ЭТОМУ БЛОГУ, ВЫ СОГЛАШАЕТЕСЬ С НАСТОЯЩИМ ОТКАЗОМ ОТ ОТВЕТСТВЕННОСТИ И НАШИМИ УСЛОВИЯМИ ИСПОЛЬЗОВАНИЯ. НАСТОЯЩЕЕ СОГЛАШЕНИЕ РЕГУЛИРУЕТСЯ ЗАКОНАМИ ШТАТА КАЛИФОРНИЯ.