O que é o Azure Data Explorer?
Vamos começar definindo o serviço e fazendo um tour pelos principais recursos do Azure Data Explorer. Esta visão geral deve ajudá-lo a decidir se é o serviço certo para você gerenciar e analisar seus dados.
O que é o Azure Data Explorer?
O Azure Data Explorer é uma plataforma de análise de big data que facilita a análise de grandes volumes de dados quase em tempo real. Permitindo extrair insights importantes, identificar padrões e tendências e criar modelos de previsão.
A caixa de ferramentas do Azure Data Explorer oferece uma solução completa para ingestão, consulta, visualização e gerenciamento de dados. Essas ferramentas permitem analisar dados estruturados, semiestruturados e não estruturados em séries temporais e aplicar o Machine Learning.
O Azure Data Explorer é totalmente gerenciado, escalável, seguro, robusto e pronto para a empresa. É útil para análise de logs, análise de séries temporais, IoT e análises exploratórias de uso geral.
Como entender seu big data
Se você se lembra do nosso exemplo de empresa de roupas, eles têm muitos tipos de dados provenientes de domínios variados. Eles precisam usar diferentes tipos de análise nesses tipos de dados e, em seguida, compartilhar seus resultados com uma série de partes interessadas. Eles usarão o Azure Data Explorer para obter informações de todos os seus dados na empresa.
A produção analisa seus registros de produtos para gerenciar seu estoque e tomar decisões de fabricação. A análise geoespacial informa essas decisões, que são usadas para identificar áreas geográficas de anúncios de alto desempenho e antecipar o inventário.
Os armazéns da empresa são equipados com dispositivos IoT, alguns dos quais são usados pela segurança para gerenciar logs de entrada/saída do armazém, enquanto outros são usados por operações para monitorar o ambiente dentro do armazém. Lojas individuais usam análises de séries cronológicas para identificar anomalias de vendas e prever eventos futuros de inventário.
A equipe de marketing global usa dados de fluxo de cliques (também uma forma de análise de log) para otimizar e digitalizar campanhas publicitárias on-line e o funil do cliente, enquanto o departamento de sucesso do cliente usa a pesquisa de texto para analisar o feedback dos usuários nas mídias sociais.
A cada minuto do dia, uma decisão da empresa está sendo tomada com base nos dados que fluem para o Azure Data Explorer.
Quais são alguns dos principais recursos do Azure Data Explorer?
Agora que você tem uma ideia para que o Azure Data Explorer pode ser usado, vamos examinar alguns de seus principais recursos.
Velocidade, variedade e volume de dados
O Azure Data Explorer pode ingerir terabytes de dados em minutos no modo de lote ou streaming. Ele pode consultar petabytes de dados e retornar resultados dentro de milissegundos a segundos. Essa capacidade permite a alta velocidade (milhões de eventos por segundo), baixa latência (segundos) e ingestão em escala linear de dados brutos. Esses dados brutos podem ser ingeridos em diferentes formatos e estruturas e podem fluir de vários pipelines e fontes.
Linguagem de consulta amigável
O Azure Data explorer usa a Kusto Query Language (KQL), uma linguagem de código aberto inicialmente inventada pela equipe. A linguagem é simples de entender e aprender, e altamente produtiva. Você pode usar operadores simples e análises avançadas.
Análise avançada
O Azure Data Explorer tem um grande conjunto de funções para análise de séries temporais. Incluindo, adicionando e subtraindo séries temporais, filtragem, regressão, deteção de sazonalidade, análise geoespacial, deteção de anomalias, varredura e previsão. As funções de séries temporais são otimizadas para processar milhares de séries temporais em segundos. A deteção de padrões é facilitada com plug-ins de cluster que podem diagnosticar anomalias e fazer análise de causa raiz. Você também pode estender os recursos do Azure Data Explorer incorporando código python em consultas KQL.
Assistente fácil de usar
O assistente de ingestão torna o processo de ingestão de dados fácil, rápido e intuitivo. A interface do usuário da Web fornece uma experiência intuitiva e guiada que ajuda os clientes a acelerar rapidamente para começar a ingerir dados, criar tabelas de banco de dados e mapear estruturas. Permite uma ingestão única ou contínua de várias fontes em vários formatos de dados. Mapeamentos de tabela e esquema são sugeridos automaticamente e fáceis de modificar.
Visualização de dados versátil
A visualização de dados ajuda você a obter informações importantes. O Azure Data Explorer oferece visualização interna e painéis prontos para uso, com suporte para vários gráficos e visualizações. Ele tem integração nativa com Power BI, conectores nativos para Grafana, Kibana e Databricks, suporte ODBC para Tableau, Sisense, Qlik e muito mais.
Ingerir, processar e exportar automaticamente
O Azure Data Explorer dá suporte a funções armazenadas no lado do servidor, ingestão contínua e exportação contínua para o repositório do Azure Data Lake. Ele também suporta transformações de mapeamento de tempo de ingestão no lado do servidor, políticas de atualização e agregações agendadas pré-computadas com exibições materializadas.
Integração noutros serviços
Integre-se facilmente e perfeitamente com outras ferramentas em todos os aspetos do seu fluxo de trabalho, como Ingestão, Visualização, Orquestração e Monitoramento.