Обозреватель данных Azure - Azure Data Explorer

Обозреватель данных Azure
Windows Azure logo.png
Разработчики)Microsoft
изначальный выпуск2018; 2 года назад (2018)
ПлатформаMicrosoft Azure
ТипОблачное хранилище
ЛицензияПроприетарный
Интернет сайтдокументы.microsoft.com/ en-us/ лазурный/ обозреватель данных/

Обозреватель данных Azure полностью управляемый[1] большое количество данных аналитика облако Платформа[2][3] и исследование данных служба,[4] разработан Microsoft,[5][6] что глотает структурированный, полуструктурированный (подобно JSON ) и неструктурированные данные (как свободный текст).[7][8][9][10] Затем служба сохраняет эти данные и отвечает на специальные аналитические запросы с задержкой в ​​несколько секунд. Это полнотекстовая индексация и поисковая база данных, включая Временные ряды возможности анализа[6][7] и регулярное выражение оценка и анализ текста.[11]

Предлагается как Платформа как услуга (PaaS) как часть Microsoft Azure Платформа. Продукт был анонсирован Microsoft в 2018 году.

История

Разработка продукта началась в 2014 году как массовый инкубационный проект в Израиль я НИОКР центр Microsoft,[12] с внутренним кодовым названием Kusto[9][7]' (названный в честь Жак Кусто, как отсылка к «исследованию океана данных»). Целью проекта было удовлетворение потребностей служб Azure в быстрой и масштабируемой аналитике журналов и телеметрии. В 2016 году он стал серверной службой больших данных и аналитики для Application Insights Analytics. [13]Продукт был объявлен как продукт общедоступной предварительной версии на Microsoft Ignite Конференция 2018,[14] и был объявлен как общедоступный продукт на конференции Microsoft Ignite в феврале 2019 года.[15]

Функции

Обозреватель данных Azure предлагает оптимизированный язык запросов и варианты визуализации[16] своих данных с SQL -подобный язык под названием KQL (Kusto Query Language.[17][18][19]).[7][8] KQL используется только для запросов и, в отличие от SQL, KQL не может обновлять или удалять данные.[20]

Обозреватель данных Azure может принимать 200 МБ в секунду на узел.[14] Методы приема данных - это конвейеры и соединители для общих служб, таких как Azure Event Grid или Azure Event Hub,[21] или программный прием с использованием SDK.

Визуализации данных можно добиться с помощью таких инструментов, как PowerBI[22][23] или же Графана.[24][25]

Дизайн

Обозреватель данных Azure - это распределенная база данных работает на кластере вычислительных узлов в Microsoft Azure. Он основан на системы управления реляционными базами данных (СУБД), поддерживающие объекты, такие как базы данных, столы, функции и столбцы. Он поддерживает сложные операторы аналитических запросов, такие как вычисляемые столбцы, поиск и фильтрация или строки, группировка по агрегатам и присоединяется.[26]

Сервис двигателя предоставляет реляционная модель данных: На верхнем уровне (кластер ) есть набор баз данных, каждая база данных содержит набор таблиц и хранимых функций. Каждая таблица определяет схема (упорядоченный список типизированных полей).

В Azure Data Explorer, в отличие от типичного системы управления реляционными базами данных (СУБД), нет ограничений вроде уникальности ключа, начальный и иностранный ключ.[27] Необходимые отношения устанавливаются во время запроса.[28] Данные в обозревателе данных Azure обычно следуют этому шаблону:[29] Создание базы данных, загрузка данных, запрос к базе данных.

Рекомендации

  1. ^ Серра, Джеймс (14 марта 2019 г.). «Обозреватель данных Azure». Блог Джеймса Серры. Получено 2020-04-09.
  2. ^ «Microsoft развертывает хранилище озера данных Azure, обозреватель данных Azure». eWEEK. Получено 2020-04-10.
  3. ^ Могенис, Макс. "Что такое обозреватель данных Azure?". blog.pragmaticworks.com. Получено 2020-03-21.
  4. ^ «Создание кластера и базы данных обозревателя данных Azure в Azure». www.c-sharpcorner.com. Получено 2020-04-09.
  5. ^ Маки, Курт; 20.09.2019. «Скоро появятся обновленные инструменты для Office 365 и Microsoft Azure - Redmondmag.com». Redmondmag. Получено 2020-04-10.CS1 maint: числовые имена: список авторов (связь)
  6. ^ а б «Microsoft Azure Data Explorer и сравнение баз данных Microsoft Azure SQL». db-engines.com. Получено 2020-04-09.
  7. ^ а б c d Махаджан, Гаури (27 февраля 2020 г.). «Обозреватель данных Azure для начинающих». SQL Shack - статьи об аудите баз данных, производительности сервера, восстановлении данных и многом другом. Получено 2020-04-09.
  8. ^ а б орспод. "Что такое обозреватель данных Azure?". docs.microsoft.com. Получено 2019-12-06.
  9. ^ а б Махаджан, Гаури (27 февраля 2020 г.). «Обозреватель данных Azure для начинающих». SQL Shack - статьи об аудите баз данных, производительности сервера, восстановлении данных и многом другом. Получено 2020-03-21.
  10. ^ Лай, Алекс (2019-01-14). "Что такое обозреватель данных Azure и язык запросов Kusto (KQL)?". Адатис. Получено 2020-04-10.
  11. ^ «Обозреватель данных Azure - цифровая торговая площадка». www.digitalmarketplace.service.gov.uk. Получено 2020-03-21.
  12. ^ «Microsoft R&D». www.microsoftrnd.co.il. Получено 2019-12-06.
  13. ^ орспод. «Представляем Application Insights Analytics». devblogs.microsoft.com. Получено 2019-12-06.
  14. ^ а б «Знакомство с обозревателем данных Azure». azure.microsoft.com. Получено 2019-12-06.
  15. ^ «Общая доступность: Обозреватель данных Azure | Обновления Azure | Microsoft Azure». azure.microsoft.com. Получено 2019-12-06.
  16. ^ Бруст, Эндрю. «Быстро, Microsoft станет партнером по аналитике в реальном времени с помощью Azure Data Explorer». ZDNet. Получено 2020-04-09.
  17. ^ Маки, Курт; 18.07.2019. "Microsoft предварительно просматривает данные Prometheus в Azure Monitor для контейнеров - Redmondmag.com". Redmondmag. Получено 2020-04-09.CS1 maint: числовые имена: список авторов (связь)
  18. ^ «Начало работы с языком запросов Kusto (KQL) - System.Blog.Martens.Ben». blogs.msdn.microsoft.com. Получено 2019-12-06.
  19. ^ «Изучение данных в Microsoft Azure с помощью языка запросов Kusto и обозревателя данных Azure». www.pluralsight.com. Получено 2020-03-21.
  20. ^ Лай, Алекс (2019-01-14). "Что такое обозреватель данных Azure и язык запросов Kusto (KQL)?". Адатис. Получено 2020-04-10.
  21. ^ «Архитектура конвейеров данных и аналитики в Azure». Gartner. Получено 2020-04-10.
  22. ^ «Архитектура конвейеров данных и аналитики в Azure». Gartner. Получено 2020-04-10.
  23. ^ Махаджан, Гаури (27 февраля 2020 г.). «Обозреватель данных Azure для начинающих». SQL Shack - статьи об аудите баз данных, производительности сервера, восстановлении данных и многом другом. Получено 2020-04-10.
  24. ^ «Графана против панелей мониторинга Azure - какую из них использовать и когда?». CloudIQ Tech. 2018-12-10. Получено 2020-04-10.
  25. ^ «Подключаемый модуль источника данных Azure Data Explorer для Grafana». Grafana Labs. Получено 2020-04-10.
  26. ^ орспод. «Начало работы с Kusto - Azure Data Explorer». docs.microsoft.com. Получено 2019-12-06.
  27. ^ «Сравнение GraphDB и Microsoft Azure Data Explorer». db-engines.com. Получено 2020-04-10.
  28. ^ «Обозреватель данных Azure: облачная платформа для анализа больших данных» (PDF).
  29. ^ Серра, Джеймс (14 марта 2019 г.). «Обозреватель данных Azure». Блог Джеймса Серры. Получено 2020-03-21.