Логотип
Баннер в шапке 1
Баннер в шапке 2

Google BigQuery

Продукт
Название базовой системы (платформы): Google Cloud Platform (GCP)
Разработчики: Google
Технологии: BI,  Big Data,  Cloud Computing,  Data Mining

Когда речь идет о Больших Данных, то чаще всего подразумевается, что системы их обработки будут локально внедряться самими заказчиками. Компания Google же создает сервис, который позволит анализировать огромные объемы данных в облаке.

Сервис носит название BigQuery. С его помощью организации смогут обрабатывать свои данные без самостоятельного создания соответствующей инфраструктуры, заявил менеджер по продуктам Google Джу-Кей Квек на прошедшей в Нью-Йорке конференции GigaOm Structure Data.[1]

BigQuery — сервис, позволяющий создавать приложения и предоставлять совместный доступ к данным, добавил он. Google предлагает его отдельным пользователям в ознакомительном режиме. Сроки полноценного ввода BigQuery в действие пока не называются.

В Google сочли логичным создать подобный сервис, так как в компании уже были разработаны некоторые его элементы для внутреннего использования. «Индексация Web — это в первую очередь задача обработки Больших Данных», — утверждает Квек. Системы Google также широко анализируют использование всевозможных онлайн-сервисов компании, таких как Gmail. Анализ операционных данных помогает понять, какие функции сервисов оказались полезными, а какие — нет.

Для Google чрезвычайно важно сохранять и анализировать все данные, генерируемые ее сервисами, утверждают в компании. «Анализ ‘мелкого песка’ данных очень ценен, — заявляет Квек. — Задавать много вопросов к данным просто необходимо. Чем больше задается вопросов, тем ‘умнее’ эти вопросы становятся».Чек-лист: как модернизировать ЦОД в рамках концепции OCP (Open Compute Project) 5.8 т

Пользователи пробной версии сервиса тестируют его всевозможными способами. Например, загружают в него набор данных, а впоследствии добавляют обновления по мере того, как они появляются. С помощью разработанных в Google алгоритмов и языка запросов данные можно подвергать аналитическому разбору. Операторы баннерных сетей с помощью сервиса собирают сведения о действиях пользователей и оценивают эффективность рекламы. Еще один заказчик, оператор гостиничной сети, анализирует ее доходность с помощью сервиса, делая прогнозы на основании данных из различных финансовых систем.

Облачная модель анализа Больших Данных имеет ряд преимуществ, полагает Квек: важнее всего то, что она избавляет организацию от необходимости приобретать и настраивать собственное хранилище данных. «Google берет на себя все технические заботы, — утверждает он. — В сервис встроены механизмы безопасности и резервного копирования данных. Благодаря этому ускоряется извлечение полезных сведений из Больших Данных».

Один из пользователей BigQuery — французская компания We Are Cloud, предлагающая систему бизнес-анализа в виде облачного сервиса под названием Bime. Он рассчитан на малые и средние предприятия, у которых может не быть собственной системы бизнес-анализа и соответствующего технического персонала. Информационная панель сервиса может получать сведения из множества источников, например из локальных реляционных баз данных. «Заказчикам нужны подобные инструменты, чтобы чувствовать уверенность в своем бизнесе», — полагает Рашель Делакур, основатель и генеральный директор We Are Cloud.

Как пользователь бета-версии BigQuery, компания имеет право предлагать сервис Google своим заказчикам. Один из них, телекоммуникационный оператор с Ближнего Востока, загрузил для анализа с помощью Bime 15 Тбайт данных о своих абонентах. По словам Делакур, она не имеет права разглашать, сколько денег Google берет за хостинг данных, однако, по ее утверждению, тариф вполне приемлемый.

«В динамической среде пользоваться BigQuery очень удобно — сервис практически мгновенно выдает результаты обработки гигантских наборов данных», — утверждает глава We Are Cloud.

Примечания



СМ. ТАКЖЕ (21)


Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Прогноз (250)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  RBC Group Украина (124)
  БизнесАвтоматика НПЦ (117)
  Консультационная группа АТК (100)
  Другие (2456)

  Сапиенс солюшнс (Sapiens solutions) (9)
  Форсайт (8)
  Navicon (Навикон) (7)
  Корус Консалтинг (6)
  Доверенная среда (5)
  Другие (98)

  БизнесАвтоматика НПЦ (13)
  Форсайт (8)
  ФТО (5)
  Manzana Group (М Софт) (4)
  Optimacros (Оптимакрос) (3)
  Другие (71)

  БизнесАвтоматика НПЦ (7)
  Инфомаксимум (Infomaximum) (6)
  Manzana Group (М Софт) (5)
  PIX Robotics (Пикс Роботикс) (4)
  Analytic Workspace (ОСТ) (4)
  Другие (64)

  Simetra (ранее А+С Транспроект) (3)
  БизнесАвтоматика НПЦ (2)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (2)
  Первый Бит (2)
  Manzana Group (М Софт) (2)
  Другие (17)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Qlik (QlikTech) (59, 464)
  Форсайт (19, 331)
  SAP SE (70, 301)
  Oracle (65, 267)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (4, 236)
  Другие (1089, 1537)

  SAP SE (6, 13)
  Qlik (QlikTech) (2, 8)
  Форсайт (2, 8)
  Microsoft (2, 6)
  Доверенная среда (1, 5)
  Другие (46, 72)

  БизнесАвтоматика НПЦ (1, 13)
  Форсайт (3, 8)
  Optimacros (Оптимакрос) (1, 6)
  Microsoft (1, 5)
  Manzana Group (М Софт) (3, 4)
  Другие (38, 47)

  Optimacros (Оптимакрос) (1, 10)
  Форсайт (2, 7)
  БизнесАвтоматика НПЦ (1, 7)
  Инфомаксимум (Infomaximum) (1, 6)
  Manzana Group (М Софт) (2, 5)
  Другие (34, 52)

  Optimacros (Оптимакрос) (1, 4)
  Simetra (ранее А+С Транспроект) (1, 3)
  Manzana Group (М Софт) (1, 2)
  PIX Robotics (Пикс Роботикс) (1, 2)
  БизнесАвтоматика НПЦ (1, 2)
  Другие (16, 15)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  QlikView - 370
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 317
  Deductor - 226
  Visary BI Платформа бизнес-аналитики - 117
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 101
  Другие 1944

  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 7
  Qlik Sense - 6
  Microsoft Power BI - 5
  Доверенная среда: Триафлай BI-платформа - 5
  Другие 84

  Visary BI Платформа бизнес-аналитики - 13
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6
  Microsoft Power BI - 5
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 5
  Qlik Sense - 4
  Другие 49

  Optimacros Платформа для оптимизационного и консолидационного планирования - 10
  Visary BI Платформа бизнес-аналитики - 7
  Инфомаксимум: Proceset (Система класса Process mining) - 6
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 6
  Manzana Customer Data Platform (CDP) - 5
  Другие 51

  Optimacros Платформа для оптимизационного и консолидационного планирования - 4
  RITM3 - Real time integration transport measurements modelling managemet - 3
  Manzana BI - 2
  Visary BI Платформа бизнес-аналитики - 2
  PIX BI - 2
  Другие 13

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  БизнесАвтоматика НПЦ (118)
  Инфосистемы Джет (13)
  Сбербанк (10)
  Marketing Logic (Маркетинг Лоджик) (9)
  Другие (580)

  Ростелеком (3)
  БизнесАвтоматика НПЦ (3)
  Сапиенс солюшнс (Sapiens solutions) (2)
  Сбербанк (2)
  IPavlov (Айпавлов) (2)
  Другие (48)

  БизнесАвтоматика НПЦ (13)
  OneFactor (Уанфактор) ЕдиныйФактор (3)
  Платформа больших данных (Platforma) (2)
  HFLabs (ХФ Лабс), ранее HumanFactorLabs (2)
  К-Скай (K-SkAI) (2)
  Другие (58)

  БизнесАвтоматика НПЦ (7)
  Департамент информационных технологий Москвы (ДИТ) (3)
  Группа компаний ЦРТ (Центр речевых технологий) (2)
  Axenix (ранее Аксенчер Россия) Аксеникс (2)
  CM.Expert (АвтоЭксперт) (2)
  Другие (61)

  БизнесАвтоматика НПЦ (3)
  Университет Иннополис (2)
  Мобильные ТелеСистемы (МТС) (2)
  Нота (Холдинг Т1) (1)
  Ростелеком (1)
  Другие (23)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (2, 236)
  БизнесАвтоматика НПЦ (2, 117)
  Oracle (12, 14)
  IBM (10, 14)
  Полиматика (Polymatica) (3, 11)
  Другие (284, 144)

  БизнесАвтоматика НПЦ (1, 3)
  Полиматика (Polymatica) (1, 2)
  Dell EMC (1, 2)
  Informatica (1, 1)
  Minit (1, 1)
  Другие (5, 5)

  БизнесАвтоматика НПЦ (1, 13)
  Сбербанк (2, 2)
  Платформа больших данных (Platforma) (1, 2)
  HFLabs (ХФ Лабс), ранее HumanFactorLabs (1, 2)
  К-Скай (K-SkAI) (1, 2)
  Другие (14, 16)

  БизнесАвтоматика НПЦ (1, 7)
  Сбербанк (2, 2)
  Ситроникс КТ (ранее Кронштадт Технологии) (2, 2)
  Группа компаний ЦРТ (Центр речевых технологий) (1, 2)
  CM.Expert (АвтоЭксперт) (1, 2)
  Другие (12, 13)

  БизнесАвтоматика НПЦ (1, 2)
  Полиматика (Polymatica) (1, 1)
  Т1 Консалтинг (Т1 Инновации) (1, 1)
  Exodrive (Экзодрайв) (1, 1)
  T1 Digital (Т1 Диджитал) (1, 1)
  Другие (3, 3)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Deductor - 226
  Visary BI Платформа бизнес-аналитики - 117
  Polymatica Analytics Аналитическая платформа - 11
  IBM SPSS Decision Management - 10
  Loginom Аналитическая платформа - 10
  Другие 151

  Visary BI Платформа бизнес-аналитики - 3
  EMC Greenplum Data Computing Appliance - 2
  Polymatica Analytics Аналитическая платформа - 2
  Loginom Аналитическая платформа - 1
  IBM SPSS Decision Management - 1
  Другие 5

  Visary BI Платформа бизнес-аналитики - 13
  Platforma и HFLabs: Технология безопасного метчинга данных - 2
  Webiomed - Платформа предиктивной аналитики и управления рисками в здравоохранении на основе машинного обучения - 2
  PolyAnalyst Платформа визуальной разработки сценариев анализа данных и текстов - 2
  Loginom Аналитическая платформа - 2
  Другие 11

  Visary BI Платформа бизнес-аналитики - 7
  ЦРТ: Speech Analytics Lab - 2
  CM.Expert Data Mining платформа - 2
  PIX Process Management (PIX Процессы) - 2
  Polymatica Analytics Аналитическая платформа - 1
  Другие 13

  Visary BI Платформа бизнес-аналитики - 2
  Napoleon IT PowerPrice - 1
  Сфера. Интеллектуальный анализ процессов - 1
  Polymatica Analytics Аналитическая платформа - 1
  МТС DataOps Platform - 1
  Другие 1