Arquivos das novidades no Microsoft Fabric
Esta página da camada de arquivos é atualizada periodicamente com um arquivamento de conteúdo de O que há de novo no Microsoft Fabric?
Para seguir as últimas notícias e recursos do Fabric, consulte o Blog do Microsoft Fabric. Siga também as novidades no Power BI em Novidades no Power BI
Novo no Microsoft Fabric?
Esta seção inclui artigos e comunicados antigos que são úteis para os novos usuários no Microsoft Fabric.
- Roteiros de Aprendizagem do Fabric
- Introdução ao Microsoft Fabric
- tutoriais de ponta a ponta no Microsoft Fabric.T
- Definições de termos usados no Microsoft Fabric
Mês | Recurso | Saiba mais |
---|---|---|
Março de 2024 | O Microsoft Fabric agora é compatível com HIPAA | Temos o prazer de anunciar que o Microsoft Fabric, nossa solução de análise tudo em um para negócios, conquistou novas certificações para HIPAA e ISO 27017, ISO 27018, ISO 27001, ISO 27701. |
Março de 2024 | O Exame DP-600 já está disponível | O Exame DP-600 já está disponível, levando à certificação Microsoft Certified: Fabric Analytics Engineer Associate. O Fabric Career Hub pode ajudar você a aprender rapidamente e a obter a certificação. |
Março de 2024 | Preços do Copilot no Fabric: um exemplo completo | O Copilot no Fabric iniciará a cobrança em 1.º de março de 2024 como parte da sua capacidade atual do Power BI Premium ou Fabric. Saiba como o uso do Copilot no Fabric é calculado. |
Janeiro de 2024 | Microsoft Fabric Copilot for Data Science and Data Engineering | O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você? |
Dezembro de 2023 | Fundamentos de segurança da plataforma Fabric | Saiba mais sobre a perspectiva ampla da arquitetura de segurança do Microsoft Fabric descrevendo como os principais fluxos de segurança no sistema funcionam. |
Novembro de 2023 | Microsoft Fabric, explicado para usuários existentes do Synapse | Um foco no que os clientes que usam a versão atual da PaaS (Plataforma como Serviço) do Synapse podem esperar. Explicamos como a disponibilidade geral do Fabric se relaciona com seus investimentos atuais (spoiler: damos suporte total a eles), mas também como pensar no futuro. |
Novembro de 2023 | O Microsoft Fabric está agora em disponibilidade geral | O Microsoft Fabric está agora em disponibilidade geral para compra. O Microsoft Fabric pode remodelar a forma como suas equipes trabalham com dados, reunindo todos em uma única plataforma baseada em IA criada para a era da inteligência artificial. Isso inclui: Power BI, Data Factory, Engenharia de Dados, Ciência de Dados, Análise em Tempo Real, Data Warehouse e a plataforma do Fabric como um todo. |
Novembro de 2023 | As cargas de trabalho do Fabric estão agora em disponibilidade geral! | O Microsoft Fabric está agora em disponibilidade geral! O Data Warehouse do Synapse do Microsoft Fabric, a Engenharia de Dados e Ciência de Dados, a Análise em Tempo Real, o Data Factory, o OneLake e a plataforma Fabric estão com disponibilidade geral. |
novembrod e 2023 | Implementar a arquitetura de lakehouse medallion no Fabric | Uma introdução à arquitetura medallion lake e como você pode implementar um lakehouse no Microsoft Fabric. |
Outubro de 2023 | Comunicados sobre o roteiro do Fabric | Anunciando o roteiro do Fabric. Um lugar em que você pode ver no que estamos trabalhando e quando você pode esperar que esteja disponível. |
Outubro de 2023 | Introdução ao link semântico | Explore como o link semântico conecta perfeitamente os modelos semânticos do Power BI com a Ciência de Dados do Synapse no Microsoft Fabric. Saiba mais em Link semântico no Microsoft Fabric: conectando BI e Ciência de Dados. Você também pode conferir os blocos de anotações de exemplo de link semântico que agora estão disponíveis no repositório do GitHub de amostras de malha. Esses notebooks mostram o uso da biblioteca Python do link semântico, SemPy, no Microsoft Fabric. |
Setembro de 2023 | Capacidades do Fabric – Tudo o que você precisa saber sobre as novidades e o que está por vir | Saiba mais sobre as melhorias que estamos fazendo na plataforma de Gerenciamento da Capacidade do Fabric para usuários do Fabric e Power BI. |
Agosto de 2023 | Acessar o Microsoft Fabric para desenvolvedores, startups e empresas! | Saber como habilitar o Microsoft Fabric como desenvolvedor, startup ou empresa. Cada uma tem etapas diferentes. Saiba mais em Enabling Microsoft Fabric for developers, startups, and enterprises. |
Agosto de 2023 | Forte, útil, bonita: criando uma nova maneira de obter dados | Na equipe de design da Integração de Dados, saiba mais sobre o design forte, criativo e de função do Microsoft Fabric, à medida que a Microsoft cria designs para o futuro da integração de dados. |
Agosto de 2023 | Aprenda em ao vivo: introdução ao Microsoft Fabric | Chamada a todos os profissionais, entusiastas e aprendizes! Em 29 de agosto, iniciaremos a série "Aprenda ao vivo: introdução ao Microsoft Fabric" em parceria com as equipes de Defesa de Dados da Microsoft e as equipes do Microsoft WorldWide Learning para fornecer nove lições transmitidas ao vivo abordando tópicos relacionados ao Microsoft Fabric! |
Julho de 2023 | Tutorial passo a passo: criar ETLs com o Microsoft Fabric | Nesse guia abrangente, explicaremos passo a passo o processo de criação de pipelines ETL (Extração, transformação e carregamento) usando o Microsoft Fabric. |
Junho de 2023 | Ganhe habilidades no Microsoft Fabric – a plataforma de análise baseada em IA | Para quem é o Fabric? Como posso começar? Esta postagem de blog responde a essas perguntas sobre o Microsoft Fabric, uma solução abrangente de análise de dados que unifica muitas experiências em uma única plataforma. |
Junho de 2023 | Apresentando os cenários de ponta a ponta no Microsoft Fabric | Neste blog, exploramos quatro cenários de ponta a ponta que são caminhos típicos que nossos clientes tomam para extrair valor e insights dos seus dados usando o Microsoft Fabric. |
Maio de 2023 | Apresentando o Microsoft Fabric – tudo em um só lugar para todas as suas necessidades analíticas | Uma visão geral técnica e introdução a tudo, desde a movimentação de dados até a ciência de dados, análise em tempo real e business intelligence no Microsoft Fabric. |
Maio de 2023 | Microsoft OneLake in Fabric, o OneDrive para dados | O Microsoft OneLake traz o primeiro data lake de SaaS multinuvem para toda a organização. |
Recursos geralmente disponíveis
A seguinte tabela lista os recursos do Microsoft Fabric que foram transferidos da versão geral para a GA (Disponibilidade Geral).
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | A disponibilidade do Eventhouse no OneLake no formato Delta Lake | Como parte da promessa de uma cópia lógica, temos o prazer de anunciar que a disponibilidade do Eventhouse no OneLake no formato Delta Lake está disponível ao público em geral. |
Maio de 2024 | Links Privados do Microsoft Fabric | O Azure Private Link para Microsoft Fabric protege o acesso aos seus dados confidenciais no Microsoft Fabric fornecendo isolamento de rede e aplicando os controles necessários ao tráfego de rede de entrada. Para obter mais informações, confira Announcing General Availability of Fabric Private Links. |
Maio de 2024 | Acesso confiável ao espaço de trabalho | Agora, o acesso confiável ao espaço de trabalho nos atalhos do OneLake está disponível ao público em geral. Agora você pode criar pipelines de dados para acessar suas contas do Azure Data Lake Storage Gen2 (ADLS Gen2) habilitadas para firewall usando acesso confiável ao espaço de trabalho (versão prévia) em seus pipelines de dados do Fabric. Use a identidade do espaço de trabalho para estabelecer uma conexão segura e ininterrupta entre o Fabric e suas contas de armazenamento. O acesso confiável ao espaço de trabalho também habilita o acesso seguro e sem complicações a contas de armazenamento do ADLS Gen2 usando atalhos do OneLake no Fabric. |
Maio de 2024 | Pontos de extremidade privados gerenciados | Os pontos de extremidade privados gerenciados para Microsoft Fabric permitem conexões seguras por redes virtuais gerenciadas para fontes de dados que estão atrás de um firewall ou que não podem ser acessadas pela Internet pública. Para obter mais informações, confira Announcing General Availability of Fabric Private Links, Trusted Workspace Access, and Managed Private Endpoints. |
Maio de 2024 | Eventhouse | O Eventhouse é um espaço de trabalho novo e dinâmico que hospeda diversos bancos de dados KQL, disponível ao público em geral como parte da Inteligência em Tempo Real do Fabric. Um Eventhouse oferece uma solução robusta para gerenciar e analisar volumes substanciais de dados em tempo real. Comece com um guia para Criar e gerenciar um Eventhouse. |
Maio de 2024 | Engenharia de Dados: Ambiente | O Ambiente no Fabric agora está disponível para o público geral. O Ambiente é um item centralizado permite definir todas as configurações requeridas para executar um trabalho do Spark em um só lugar. No GA, adicionamos suporte para Git, pipelines de implantação, APIs REST, pastas de recursos e compartilhamento. |
Maio de 2024 | Principais APIs REST do Microsoft Fabric | As principais APIs do Microsoft Fabric agora estão disponíveis para o público geral. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade. |
Maio de 2024 | SDK do Fluxo de Dados Gen2 no Power Query para VS Code | O SDK do Power Query agora está disponível para o público geral no Visual Studio Code! Para começar a usar o SDK do Power Query no Visual Studio Code, instale-o por meio do Visual Studio Code Marketplace. |
Abril de 2024 | Link semântico | Os links semânticos estão agora com disponibilidade geral! O pacote vem com nosso VHD padrão e agora você pode usar o link semântico no Fabric imediatamente sem qualquer instalação de pip. |
Março de 2024 | Gateways VNet no Dataflow Gen2 | O suporte do Gateway de Dados VNet para Dataflows Gen2 no Fabric está agora com disponibilidade geral. O gateway de dados VNet ajuda você a se conectar de Dataflows Gen2 do Fabric aos serviços de dados do Azure em uma VNet, sem a necessidade de um gateway de dados local. |
novembrod e 2023 | O Microsoft Fabric está agora em disponibilidade geral | O Microsoft Fabric está agora em disponibilidade geral para compra. O Microsoft Fabric pode remodelar a forma como suas equipes trabalham com dados, reunindo todos em uma única plataforma baseada em IA criada para a era da inteligência artificial. Isso inclui: Power BI, Data Factory, Engenharia de Dados, Ciência de Dados, Análise em Tempo Real, Data Warehouse e a plataforma do Fabric como um todo. |
Comunidade
Esta seção resume as oportunidades anteriores da comunidade Microsoft Fabric para possíveis e atuais influenciadores e MVPs. Para saber mais sobre o Prêmio Microsoft MVP e encontrar MVPs, consulte mvp.microsoft.com.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | As postagens da Comunidade de malha resolvida agora estão disponíveis no Painel de Ajuda do Fabric | Agora, você pode encontrar postagens resolvidas de discussões da Comunidade do Fabric no Painel de Ajuda do Fabric. |
Maio de 2024 | Anunciamos a Conferência da Comunidade do Microsoft Fabric na Europa | Anunciamos a Conferência da Comunidade do Microsoft Fabric na Europa em 24 de setembro de 2024. Registre-se ainda hoje! |
Maio de 2024 | Inscreva-se no Microsoft Build: Microsoft Fabric Cloud Skills Challenge | A partir de 21 de maio de 2024, inscreva-se no Microsoft Build: Microsoft Fabric Cloud Skills Challenge e prepare-se para o Exame DP-600 e qualifique-se para a certificação Fabric Analytics Engineer Associate. |
Março de 2024 | O Exame DP-600 já está disponível | O Exame DP-600 já está disponível, levando à certificação Microsoft Certified: Fabric Analytics Engineer Associate. O Fabric Career Hub pode ajudar você a aprender rapidamente e a obter a certificação. |
Março de 2024 | Conferência da Comunidade do Microsoft Fabric | Junte-se a nós em Las Vegas de 26 a 28 de março de 2024 para a primeira conferência anual da comunidade do Microsoft Fabric. Veja em primeira mão como o Microsoft Fabric e o resto dos produtos de dados e IA da Microsoft podem ajudar sua organização a se preparar para a era da IA. Registre-se hoje usando o código MSCUST para um desconto exclusivo! |
Março de 2024 | Anunciando os ganhadores do "Hack Together: The Microsoft Fabric Global AI Hack" | Recebemos 50 inscrições de projetos no Hackathon de mais de 100 participantes de todo o mundo. Nossos juízes ficaram impressionados com a amplitude, a profundidade e a qualidade geral dos inscritos. Conheça os vencedores do Fabric Global AI Hack! |
Janeiro de 2024 | Anúncio do Fabric Career Hub | O novo Fabric Career Hub é a sua parada única para o crescimento profissional! Criamos uma jornada de aprendizado abrangente com o melhor treinamento gratuito, sob demanda e ao vivo, além de descontos em exames. |
Janeiro de 2024 | Hack Together: The Microsoft Fabric Global AI Hack | O Hack Together é um hackathon online global a ser realizado de 15 de fevereiro a 4 de março de 2024. Junte-se a nós no Hack Together: The Microsoft Fabric Global AI Hack, um evento virtual em que você pode aprender, experimentar e raquear com o novo Copilot e recursos de IA no Microsoft Fabric. Para obter mais informações, confira Microsoft Fabric Global AI Hack. |
Dezembro de 2023 | Conferência da Comunidade do Microsoft Fabric | Junte-se a nós em Las Vegas de 26 a 28 de março de 2024 para a primeira conferência anual da comunidade do Microsoft Fabric. Veja em primeira mão como o Microsoft Fabric e o resto dos produtos de dados e IA da Microsoft podem ajudar sua organização a se preparar para a era da IA. Inscreva-se hoje para mergulhar no futuro dos dados e da IA e conectar-se com milhares de inovadores de dados como você, ansiosos para compartilhar seus insights. |
Novembro de 2023 | Espaço de MVP do Microsoft Fabric – Edição Especial (Ignite) | Uma edição especial da série de blogs "Espaço de MVP do Microsoft Fabric" destaca o conteúdo selecionado relacionado ao Fabric e criado por MVPs durante a conferência Microsoft Ignite 2023, quando anunciamos o Microsoft Fabric em disponibilidade geral. |
Outubro de 2023 | Canto do MVP do Microsoft Fabric – outubro de 2023 | Destaques do conteúdo selecionado relacionado ao Fabric e criados por MVPs em outubro de 2023. |
Setembro de 2023 | Canto do MVP do Microsoft Fabric – Setembro 2023 | Destaques de conteúdo selecionado relacionado ao Fabric e criado por MVPs de Setembro 2023. |
Agosto de 2023 | Canto do MVP do Microsoft Fabric – agosto de 2023 | Destaques do conteúdo selecionado relacionado ao Fabric e criados por MVPs em agosto de 2023. |
Julho de 2023 | Canto MVP do Microsoft Fabric – julho de 2023 | Destaques do conteúdo selecionado relacionado ao Fabric e criados por MVPs em julho de 2023. |
Junho de 2023 | Microsoft Fabric MVP Corner – julho de 2023 | A série de blogs do Fabric MVP Corner para destacar o conteúdo selecionado relacionado ao Fabric e criado por MVPs em junho de 2023. |
Maio de 2023 | Grupos de Usuários do Fabric | Os Grupos de usuários do Power BI agora são grupos de usuários do Fabric! |
Maio de 2023 | Saiba mais sobre o Microsoft Fabric de MVPs | Antes do nosso anúncio oficial do Microsoft Fabric na Build 2023, os MVPs tiveram a oportunidade de se familiarizarem com o produto. Por vários meses, eles vêm testando ativamente o Fabric e obtendo insights valiosos. Agora, seu entusiasmo pelo produto é evidente, pois eles compartilham ansiosamente seus conhecimentos e pensamentos sobre o Microsoft Fabric com a comunidade. |
Amostras e diretrizes do Fabric
Esta seção resume as diretrizes e os exemplos de recursos de projeto arquivados do Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Março de 2024 | Proteja as informações de PII no seu Lakehouse do Microsoft Fabric com IA responsável | Uma maneira possível de usar a IA do Azure para identificar e extrair informação de identificação do usuário (PII) no Microsoft Fabric é usar a Linguagem de IA do Azure para detectar e categorizar entidades de PII em dados de texto, como nomes, endereços, emails, números de telefone, números do seguro social etc. |
Fevereiro de 2024 | Criando arquiteturas de dados comuns com o OneLake no Microsoft Fabric | Leia mais sobre padrões comuns de arquitetura de dados e como eles podem ser protegidos com o Microsoft Fabric e os blocos de construção básicos de segurança do OneLake. |
Janeiro de 2024 | Nova certificação do Fabric e Fabric Career Hub | A disponibilidade beta do Exame do Microsoft Certification DP-600: Implementing Analytics Solutions with Microsoft Fabric é por tempo limitado. A aprovação nesse exame garante a certificação Microsoft Certified: Fabric Analytics Engineer Associate. |
Dezembro de 2023 | Trabalhando com o OneLake usando o Gerenciador de Armazenamento do Azure | Se você quiser usar um aplicativo que se integre diretamente com o Explorador de Arquivos do Windows, confira o explorador de arquivos OneLake. Porém, se você estiver acostumado a usar o Gerenciador de Armazenamento do Azure nas suas tarefas de gerenciamento de dados, poderá continuar a aproveitar suas funcionalidades com o OneLake e alguns de seus principais benefícios. |
Novembro de 2023 | Link semântico: modelos semânticos integrados do OneLake | O link semântico adiciona suporte para os modelos semânticos integrados do OneLake que acabaram de ser lançados. Agora você pode acessar dados diretamente usando o nome do modelo semântico por meio do OneLake usando a função read_table e o novo parâmetro mode definido como onelake . |
novembrod e 2023 | Integrar dados SAP ao Microsoft Fabric | Usar a conectividade interna do Microsoft Fabric é a maneira mais fácil e de menor esforço para adicionar dados de SAP ao seu patrimônio de dados do Fabric. |
novembrod e 2023 | O Fabric alterando o jogo: validar dependências com Link Semântico – Qualidade de Dados | Siga este exemplo passo a passo de como explorar as dependências funcionais entre as colunas em uma tabela usando o link semântico. O link semântico é um recurso que permite estabelecer uma conexão entre os conjuntos de dados do Power BI e a Ciência de Dados do Synapse no Microsoft Fabric. |
novembrod e 2023 | Implementar a arquitetura de lakehouse medallion no Fabric | Uma introdução à arquitetura medallion lake e como você pode implementar um lakehouse no Microsoft Fabric. |
Outubro de 2023 | Alterar o Jogo com o Fabric: Explorando os dados | Siga este exemplo realista de leitura de dados do Azure Data Lake Storage usando atalhos, organizando dados brutos em tabelas estruturadas e exploração básica de dados. Nossa exploração de dados usa como fonte a cidade diversificada e cativante de Londres com informações extraídas de data.london.gov.uk/. |
Setembro de 2023 | Anunciando um workshop de ponta a ponta: Analisando Dados da Vida Selvagem com Microsoft Fabric | Um novo workshop orienta você na construção de uma solução de análise de dados prática e de ponta a ponta para o conjunto de dados da Snapshot Serengeti usando o Microsoft Fabric. O conjunto de dados consiste em, aproximadamente, 1,68 milhão de imagens de vida selvagem e anotações de imagem fornecidas nos arquivos .json. |
Setembro de 2023 | Novo roteiro de aprendizagem: implementar um Lakehouse com Microsoft Fabric | O novo roteiro de aprendizagem Implementar um Lakehouse com o Microsoft Fabric apresenta os componentes fundamentais para implementar um data lakehouse com o Microsoft Fabric com sete módulos aprofundados. |
Setembro de 2023 | Repositório do Fabric Readiness | O repositório Fabric Readiness é um tesouro de recursos para qualquer pessoa interessada em explorar o mundo emocionante do Microsoft Fabric. |
Julho de 2023 | Conectando-se ao OneLake | Como faço para me conectar ao OneLake? Este blog aborda como se conectar e interagir com o OneLake, incluindo como o OneLake alcança sua compatibilidade com qualquer ferramenta usada no ADLS Gen2! |
Junho de 2023 | Usando o Azure Databricks com o Microsoft Fabric e o OneLake | Como o Azure Databricks funciona com o Microsoft Fabric? Esta postagem no blog responde a essa pergunta e mais detalhes sobre como os dois sistemas podem trabalhar juntos. |
Julho de 2023 | O uso de visualização gratuita das experiências do Microsoft Fabric foi estendido até 1º de outubro de 2023 | Estamos estendendo o uso de visualização gratuita das experiências do Fabric (além do Power BI). Essas experiências não serão contabilizadas na capacidade adquirida até 1º de outubro de 2023. |
Microsoft Copilot no Microsoft Fabric
Esta seção resume os comunicados arquivados sobre Copilot no Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Privacidade e segurança no Copilot | Para obter mais informações sobre a privacidade e a segurança do Copilot no Microsoft Fabric e detalhes sobre cada carga de trabalho, confira Privacidade, segurança e uso responsável do Copilot no Microsoft Fabric (versão prévia). |
Maio de 2024 | A IA e a configuração do Copilot automaticamente delegadas aos administradores de capacidade | No portal de administração do locatário, você pode delegar a habilitação de IA e recursos do Copilot aos administradores de capacidade. Essa IA e configuração do Copilot é delegada automaticamente aos administradores de capacidade e os administradores de locatários não poderão desativar a delegação. |
Fevereiro de 2024 | Fabric Change the Game: How easy is it to use Copilot in Microsoft Fabric | Esta postagem no blog mostra como é simples habilitar o Copilot, uma IA generativa que apresenta novas maneiras de transformar e analisar dados, gerar insights e criar visualizações e relatórios no Microsoft Fabric. |
Fevereiro de 2024 | Copilot para Data Factory no Microsoft Fabric | O Copilot para Data Factory no Microsoft Fabric agora está disponível em preview e está incluído na experiência do Dataflow Gen2. Para obter mais informações, confira Copilot para Data Factory. |
Janeiro de 2024 | Microsoft Fabric Copilot for Data Science and Data Engineering | O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você? |
Janeiro de 2024 | Como habilitar o Copilot no Fabric para todo mundo | Siga este guia para habilitar o Copilot no Fabric para todas as pessoas da sua organização. Para obter mais informações, confira Visão geral do Copilot para Microsoft Fabric (preview). |
Janeiro de 2024 | O Copilot no Fabric está disponível em todo o mundo | Agora, o Copilot no Fabric está disponível para todos os clientes, incluindo o Copilot para Power BI, para Data Factory e para Ciência de Dados e Engenharia de Dados. Leia mais na nossa Visão geral do Copilot no Fabric. |
novembrod e 2023 | Capacitar os usuários do Power BI com o Microsoft Fabric e o Copilot | É com grande satisfação que anunciamos a disponibilidade geral do Microsoft Fabric e o preview do Copilot no Microsoft Fabric, incluindo a experiência para o Power BI. |
novembrod e 2023 | Copilot para Power BI no Microsoft Fabric (preview) | Estamos entusiasmados em anunciar o preview do Copilot no Microsoft Fabric, incluindo a experiência do Power BI, que ajuda os usuários a começar rapidamente, ajudando-os a criar relatórios na experiência Web do Power BI. Para obter mais informações, confira Copilot para Power BI. |
Outubro de 2023 | Converse com seus dados no Microsoft Fabric com Kernel Semântico | Saiba como construir ferramentas do Copilot com base em dados comerciais no Microsoft Fabric. |
Data Factory no Microsoft Fabric
Esta seção resume os novos recursos e funcionalidades arquivadas do Data Factory no Microsoft Fabric. Acompanhe os problemas e comentários por meio do Fórum da Comunidade do Data Factory.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Atualizações de conector certificado Dataflow Gen2 | Conectores Dataflow Gen2 novos e atualizados foram lançados. Para obter mais informações, confira as atualizações do conector certificado de junho de 2024. |
Junho de 2024 | Novas atualizações do conector de pipeline de dados | Mais conectores agora estão disponíveis para pipelines de dados. Para obter mais informações, consulte a atualização do Fabric de junho de 2024. |
Junho de 2024 | Recurso de esquemas Lakehouse | O recurso de esquemas lakehouse (preview) introduz suporte ao pipeline de dados para a leitura de informações de esquema de tabelas lakehouse e é compatível com a gravação de dados em tabelas sob esquemas especificados. Esquemas de lakehouse permitem agrupar as tabelas para melhorar a descoberta de dados, o controle de acesso e muito mais. |
Junho de 2024 | Mover dados pelo espaço de trabalho por meio do pipeline de dados Obtenha experiência de dados moderna | Agora, você pode mover dados entre Lakehouses, armazéns, etc. em diferentes espaços de trabalho. Em Pipeline Modern Get Data, selecione um item de malha de outro espaço de trabalho em Explorer no lado esquerdo do hub de dados OneLake. |
Junho de 2024 | Criar um novo Armazém como destino no pipeline de dados | Agora, você pode criar um novo Warehouse como um destino no Data Pipeline, em vez de selecionar apenas um existente. |
Maio de 2024 | Anúncios do Data Factory na recapitulação do Microsoft Build | Não perca nenhum dos anúncios do Data Factory no Fabric. Confira uma recapitulação de todos os novos recursos do Data Factory no Fabric usando o Build 2024. |
Maio de 2024 | Novos conectores certificados | O SDK do Power Query e o processo de Certificação do Conector do Power Query introduziram vários novos conectores do Power Query, incluindo conectores para Oracle Database, MySQL, Oracle Cloud Storage, IA do Azure, Arquivos do Azure, Dynamics AX, Google Bigquery, Snowflake ADBC e muitos outros que serão liberados em breve. |
Maio de 2024 | API para GraphQL no Microsoft Fabric (versão prévia) | A nova API para GraphQL é uma camada de acesso a dados que nos permite consultar várias fontes de dados de forma rápida e eficiente no Fabric. Para obter mais informações, consulte O que é a API do Microsoft Fabric para GraphQL? |
Maio de 2024 | SDK do Fluxo de Dados do Power Query Gen2 para GA do VS Code | O SDK do Power Query agora está disponível para o público geral no Visual Studio Code! Para começar a usar o SDK do Power Query no Visual Studio Code, instale-o por meio do Visual Studio Code Marketplace. |
Maio de 2024 | Atualizar a caixa de diálogo Atualizar histórico | A janela pop-up Atualizar detalhes do histórico agora tem um botão Atualizar. |
Maio de 2024 | Conectores certificados novos e atualizados | O SDK do Power Query e o processo de Certificação do Conector do Power Query introduziram quatro conectores novos e atualizados do Power Query. |
Maio de 2024 | Fluxos de trabalho de dados na versão prévia do Data Factory | Os fluxos de trabalho de dados (versão prévia) no Data Factory, desenvolvidos pelo Apache Airflow, oferecem experiência perfeita de criação, agendamento e monitoramento para processos de dados baseados em Python definidos como DAGs (Grafos Direcionados Acíclicos). Para obter mais informações, confira Início Rápido: Criar um fluxo de trabalho de dados. |
Maio de 2024 | Versão prévia do acesso confiável a espaço de trabalho em pipelines de dados do Fabric | Use a identidade do espaço de trabalho para estabelecer uma conexão segura e ininterrupta entre o Fabric e suas contas de armazenamento. Agora você pode criar pipelines de dados para acessar suas contas do Azure Data Lake Storage Gen2 (ADLS Gen2) habilitadas para firewall usando acesso confiável ao espaço de trabalho (versão prévia) em seus pipelines de dados do Fabric. |
Maio de 2024 | Versão prévia de gatilhos de eventos de armazenamento de blobs para pipelines de dados | Os gatilhos de eventos de armazenamento de Blobs do Azure (versão prévia) em pipelines de dados do Data Factory do Fabric usam alertas do Reflex do Fabric e fluxos de eventos para criar assinaturas de eventos para suas contas de armazenamento do Azure. |
Maio de 2024 | Atividade do Azure HDInsight para pipelines de dados | A atividade do Azure HDInsight permite executar consultas do Hive, invocar um programa MapReduce, executar consultas Pig, executar um programa Spark ou um programa Hadoop Stream. |
Maio de 2024 | Assistente para cópia de dados | Comece a usar a experiência moderna do recurso Obter Dados selecionando Assistente para cópia de dados na página de aterrissagem do pipeline ou Usar assistente para cópia na lista suspensa Copiar dados. Você pode se conectar facilmente a itens do Fabric usados recentemente com uma maneira intuitiva de ler fontes de dados de exemplo e novas conexões. |
Maio de 2024 | Editar o tipo de coluna da tabela de destino ao copiar dados | Você pode editar tipos de coluna de tabela de destino ao copiar dados para uma tabela de destino nova ou criada automaticamente para muitos armazenamentos de dados. Para obter mais informações, consulte Configurar o Lakehouse em uma atividade de cópia. |
Abril de 2024 | Atividade de definição de trabalho do Spark | Com a nova atividade de definição de trabalho do Spark, você poderá executar uma definição de trabalho do Spark em seu pipeline. |
Abril de 2024 | Warehouse do Fabric na atividade Copy do ADF | Você agora pode se conectar ao Warehouse do Fabric em um pipeline do Azure Data Factory/Synapse. Você pode encontrar esse novo conector ao criar uma nova origem ou destino de coletor em sua atividade Copy, na atividade Pesquisa, na atividade Procedimento Armazenado, na atividade Script e na atividade Obter Metadados. |
Abril de 2024 | Edição do tipo de coluna para compatibilidade com a tabela de destino adicionada ao Warehouse do Fabric e a outros armazenamentos de dados do SQL | Ao mover dados de qualquer fonte de dados compatível com o Warehouse do Fabric ou outros armazenamentos de dados do SQL (SQL Server, Banco de Dados SQL do Azure, Instância Gerenciada de SQL do Azure ou Azure Synapse Analytics) por meio de pipelines de dados, os usuários agora podem especificar o tipo de dados para cada coluna. |
Abril de 2024 | Melhorias de desempenho ao gravar dados no SFTP | O conector SFTP foi melhorado para oferecer melhor desempenho ao gravar no SFTP como destino. |
Abril de 2024 | Suporte ao método de autenticação de nome da entidade de serviço para gateways de dados locais e de rede virtual | As SPN (Nome da entidade de serviço) agora têm suporte para gateways de dados locais e gateways de dados de rede virtual. Saiba como usar o método de autenticação da entidade de serviço no Azure Data Lake Storage, no Dataverse, no Banco de Dados SQL do Azure, no conector da Web e muito mais. |
Abril de 2024 | Conectores certificados novos e atualizados | O SDK do Power Query e o processo de Certificação do Conector do Power Query introduziram 11 conectores personalizados novos e atualizados do Power Query. |
Abril de 2024 | Nova experiência do Construtor de Expressões | Uma nova experiência na atividade de scripts em pipelines do Data Factory do Fabric para facilitar ainda mais a criação de expressões usando a linguagem de expressão de pipeline. |
Abril de 2024 | O Data Factory aumenta o máximo de atividades por pipeline para 80 | Dobramos o limite do número de atividades que é possível definir em um pipeline de 40 para 80. |
Abril de 2024 | APIs REST para visualização de pipelines de Data Factory do Fabric (preview) | As APIs REST para visualização de pipelines de Data Factory do Fabric estão em preview. As APIs REST para pipelines do Data Factory permitem estender o recurso interno do Fabric para criar, ler, atualizar, excluir e listar pipelines. |
Março de 2024 | Cópia rápida no Dataflows Gen2 | Com a Cópia rápida, você pode ingerir terabytes de dados com a experiência fácil de fluxos de dados, mas com o back-end escalável da atividade Copy do pipeline. |
Março de 2024 | Integração de dados locais com o Microsoft Fabric usando pipeline de dados do Data Factory (preview) | Com o gateway de dados local (versão prévia), os clientes podem se conectar a fontes de dados locais usando fluxos de dados e pipelines de dados com o Data Factory. Para obter mais informações, consulte Como acessar fontes de dados locais no Data Factory para o Microsoft Fabric. |
Março de 2024 | Preview de CI/CD para pipelines de dados do Fabric | A integração do Git e a integração de pipelines de implantação incorporados com pipelines de dados do Data Factory estão agora em preview. Para obter mais informações, confira Data Factory Adds CI/CD to Fabric Data Pipelines. |
Março de 2024 | Procurar recursos do Azure com Obter Dados | Saiba como procurar e conectar a todos os recursos do Azure com a funcionalidade 'procurar Azure' em Obter Dados. Você pode procurar recursos do Azure e conectar facilmente aos recursos do Synapse, do armazenamento de blob ou do ADLS Gen2. |
Março de 2024 | Suporte ao Dataflow Gen2 para gateways VNet agora com disponibilidade geral | O suporte do Gateway de Dados VNet para Dataflows Gen2 no Fabric está agora com disponibilidade geral. O gateway de dados VNet ajuda você a se conectar de Dataflows Gen2 do Fabric aos serviços de dados do Azure em uma VNet, sem a necessidade de um gateway de dados local. |
Março de 2024 | Suporte a níveis de privacidade no Dataflows | Agora você pode definir níveis de privacidade para suas conexões no Dataflow Gen2. Os níveis de privacidade são fundamentais para configurar corretamente para que os dados confidenciais sejam visualizados apenas por usuários autorizados. |
Março de 2024 | Copiar dados para o S3 compatível usando o pipeline de dados do Data Factory do Fabric | A cópia de dados para o S3 compatível agora está disponível no pipeline de dados do Data Factory do Fabric! Você pode usar o assistente Copiar e a atividade Copiar no pipeline de dados para realizar essa movimentação de dados. |
Fevereiro de 2024 | Destinos de dados do Dataflows Gen2 e configurações gerenciadas | Novos recursos para o Dataflows Gen2 incluem destinos, configurações gerenciadas e tópicos avançados. |
Fevereiro de 2024 | Copilot para Data Factory no Microsoft Fabric | O Copilot para Data Factory no Microsoft Fabric agora está disponível em preview e está incluído na experiência do Dataflow Gen2. Para obter mais informações, confira Copilot para Data Factory. |
Fevereiro de 2024 | Atualizações do Conector certificado | O SDK do Power Query permite que você crie novos conectores tanto para o Power BI quanto para o fluxo de dados. Novos conectores certificados do Power Query estão disponíveis para a lista de Conectores Certificados no Power Query. |
Fevereiro de 2024 | Atualizações do conector de pipeline de dados | Novos conectores estão disponíveis em seus pipelines de dados do Data Factory, incluindo fontes de dados compatíveis com o S3 e do Google Cloud Storage. Para obter mais informações, consulte Conectores de pipeline de dados no Microsoft Fabric. |
Janeiro de 2024 | Automatizar consultas e comandos de data warehouse do Fabric com o Data Factory | No Data Factory do Fabric, há muitas maneiras de consultar e recuperar dados, além de executar comandos do depósito usando atividades de pipeline que podem ser facilmente automatizadas. |
Janeiro de 2024 | Usar pipelines de dados do Data Factory do Fabric para orquestrar fluxos de trabalho baseados em Notebook | Diretrizes e boas práticas ao criar fluxos de trabalho do Notebook do Spark no Fabric usando o Data Factory no Fabric com pipelines de dados. |
Dezembro de 2023 | Ler e gravar no Fabric Lakehouse usando o Azure Data Factory (ADF) | Agora você pode ler e gravar dados no Microsoft Fabric Lakehouse a partir do ADF (Azure Data Factory). Usando a atividade Copy ou os fluxos de dados de mapeamento, você pode ler, gravar, transformar e processar dados usando o ADF ou o Synapse Analytics, atualmente em preview. |
Dezembro de 2023 | Definir o estado da atividade para facilitar a depuração do pipeline | Nos pipelines de dados do Fabric Data Factory, agora você pode definir o estado de uma atividade como inativo para que possa salvar seu pipeline mesmo com configurações incompletas e inválidas. Pense nisso como "comentar" parte do código do seu pipeline. |
Dezembro de 2023 | Edição de conexão no editor do pipeline | Agora você pode editar suas conexões de dados existentes enquanto estiver projetando seu pipeline sem sair do editor do pipeline! Ao configurar sua conexão, selecione Editar e um pop-up aparece. |
Dezembro de 2023 | Execuções do Azure Databricks Notebook no Fabric Data Factory | Agora você pode criar poderosos fluxos de trabalho do pipeline de dados que incluem execuções do Notebook a partir dos seus clusters do Azure Databricks usando o Fabric Data Factory. Adicione uma atividade do Databricks ao pipeline, aponte para o cluster existente ou solicite um novo cluster. O Data Factory executará o código do Notebook para você. |
novembrod e 2023 | Implementar a arquitetura de lakehouse medallion no Fabric | Uma introdução à arquitetura medallion lake e como você pode implementar um lakehouse no Microsoft Fabric. |
novembrod e 2023 | Disponibilidade Geral do Dataflow Gen2 dos conectores do Fabric | Os conectores para Lakehouse, Warehouse e Banco de dados KQL estão agora em disponibilidade geral. Recomendamos que você use esses conectores ao tentar se conectar aos dados de qualquer uma dessas cargas de trabalho do Fabric. |
novembrod e 2023 | Dataflow Gen2 Cancelamento automático de atualização | Para evitar o consumo de recursos desnecessários, há um novo mecanismo que interrompe a atualização de um fluxo de dados assim que se sabe que os resultados da atualização não têm impacto. Isto é para reduzir o consumo de forma mais proativa. |
novembrod e 2023 | Propagação de mensagem de erro do Dataflow Gen2 através do gateway | Aprimoramos o diagnóstico para fornecer mensagens de erro significativas quando a atualização do fluxo de dados falhar para os fluxos de dados executados através do Gateway de Dados Enterprise. |
novembrod e 2023 | Suporte do Dataflow Gen2 para associação de colunas para o conector SAP HANA | O suporte à associação de colunas está habilitado para o SAP HANA. Esse parâmetro opcional resulta em um desempenho significativamente melhor. Para obter mais informações, confira Suporte para associação de colunas para o conector SAP HANA. |
novembrod e 2023 | Artefatos do processo de preparo do Dataflow Gen2 ocultos | Quando estiverem usando um Dataflow Gen2 no Fabric, o sistema criará automaticamente um conjunto de artefatos de processo de preparo. Agora, esses artefatos de processo de preparo serão abstraídos da experiência do Dataflow Gen2 e ficarão ocultos na lista de espaços de trabalho. Nenhuma ação é requerida pelo usuário e essa alteração não tem impacto sobre os fluxos de dados existentes. |
novembrod e 2023 | Suporte do Dataflow Gen2 para versão prévia de Gateways de VNet | O suporte do Gateway de Dados da VNet para Dataflows Gen2 no Fabric está agora em preview. O gateway de dados VNet ajuda você a se conectar de Dataflows Gen2 do Fabric aos serviços de dados do Azure em uma VNet, sem a necessidade de um gateway de dados local. |
novembrod e 2023 | "Salvar como" entre espaços de trabalho | Agora é possível clonar seus pipelines de dados entre espaços de trabalho usando o botão "Salvar como". |
novembrod e 2023 | Integração de submenus de conteúdo dinâmico com atividades de Email e Equipes | Nas atividades de Email e Equipes, agora é possível adicionar conteúdo dinâmico com facilidade. Com essa nova integração de expressão de pipeline, agora você verá um submenu para ajudar você a selecionar e criar o conteúdo da mensagem rapidamente, sem precisar aprender a linguagem de expressão de pipeline. |
novembrod e 2023 | A atividade Copy agora dá suporte para tolerância a falhas para o conector Fabric Data Warehouse | A atividade Copy nos pipelines de dados agora apresenta suporte para tolerância a falhas no Fabric Warehouse. A tolerância a falhas permite que você trate certos erros sem interromper a movimentação de dados. Ao habilitar a tolerância a falhas, você pode continuar a copiar os dados enquanto ignora dados incompatíveis, como linhas duplicadas. |
novembrod e 2023 | Conectores do MongoDB e do MongoDB Atlas | Os conectores do MongoDB e do MongoDB Atlas agora estão disponíveis para uso nos pipelines de dados do Data Factory como origens e destinos. |
novembrod e 2023 | O conector do Microsoft 365 agora dá suporte à ingestão de dados no seu Lakehouse (preview) | O conector do Microsoft 365 agora dá suporte à ingestão de dados nas tabelas do Lakehouse. |
novembrod e 2023 | Suporte multitarefa para editar pipelines no designer | Agora você pode abrir e editar pipelines de dados de diferentes espaços de trabalho e navegar entre eles usando as funcionalidades de várias tarefas no Fabric. |
novembrod e 2023 | Interpolação da cadeia de caracteres adicionada ao valor de retorno do pipeline | Agora é possível editar suas conexões de dados nos seus pipelines de dados. Anteriormente, uma nova guia era aberta quando as conexões precisavam ser editadas. Agora, você pode permanecer no seu pipeline e atualizar suas conectividades sem problemas. |
Outubro de 2023 | Reprojetar atividades por categoria | Reprojetamos a maneira como as atividades são categorizadas para facilitar a localização das atividades que você está procurando, com novas categorias como Fluxo de controle, Notificações e muito mais. |
Outubro de 2023 | Aprimoramento no desempenho de runtime de Copy | Fizemos aprimoramentos no desempenho do runtime de Copy. Segundo os resultados de nossos testes, com os aprimoramentos, os usuários podem esperar que a duração da cópia de arquivos parquet/csv para a tabela Lakehouse melhore em cerca de 25% a 35%. |
Outubro de 2023 | Tipo de dados Integer disponível para variáveis | Agora damos suporte a variáveis como inteiros! Ao criar uma nova variável, agora você pode optar por definir o tipo de variável como Integer, facilitando o uso de funções aritméticas com suas variáveis. |
Outubro de 2023 | O nome do pipeline agora tem suporte para variáveis do sistema. | Adicionamos uma nova variável de sistema chamada Nome do Pipeline para que você possa inspecionar e passar o nome do pipeline dentro do editor de expressões de pipeline, permitindo um fluxo de trabalho mais avançado no Data Factory do Fabric. |
Outubro de 2023 | Suporte para edição de Tipo em mapeamentos de atividade Copy | Agora você pode editar tipos de coluna ao colocar dados em suas tabelas do Lakehouse. Isso facilita a personalização do esquema de seus dados no destino. Basta navegar até a guia Mapeamento, importar seus esquemas, se você não vir nenhum mapeamento e usar a lista suspensa para fazer alterações. |
Outubro de 2023 | Novo conector certificado: Métricas do Emplifi | Anunciando a versão do novo conector de Métricas do Emplifi. O Conector do Power BI é uma camada entre a API Pública do Emplifi e o próprio Power BI. Para obter mais informações, confira Documentação da API Pública do Emplifi. |
Outubro de 2023 | SAP HANA (Atualização do Conector) | A atualização aprimora o conector do SAP HANA com a capacidade de consumir Exibições de Cálculo do HANA implantadas no SAP Datasphere, levando em conta os conceitos de segurança adicionais do SAP Datasphere. |
Outubro de 2023 | Definir o Estado da Atividade para "Comentar" Parte do Pipeline | O estado da atividade agora está disponível nos pipelines de dados do Data Factory do Fabric, dando a você a capacidade de comentar parte do seu pipeline sem excluir a definição. |
Agosto de 2023 | Rótulos de preparo | O conceito de dados de preparo foi introduzido no Dataflows Gen2 para o Microsoft Fabric e agora você tem a capacidade de definir quais consultas em seu fluxo de dados devem usar os mecanismos de preparo ou não. |
Agosto de 2023 | Entrada/saída segura para logs | Adicionamos configurações avançadas para a atividade Definir Variável chamada Entrada segura e Saída segura. Ao habilitar a entrada ou saída segura, você pode evitar que informações confidenciais sejam capturadas em logs. |
Agosto de 2023 | Status de execução de pipeline adicionado ao painel Saída | Recentemente, adicionamos Status de pipeline para que os desenvolvedores possam ver facilmente o status da execução do pipeline. Agora você pode exibir o status de execução do seu pipeline no painel Saída. |
Agosto de 2023 | Conector FTP de pipelines de dados | O conector FTP agora está disponível para uso em seus pipelines de dados do Data Factory no Microsoft Fabric. Procure-o no menu Nova conexão. |
Agosto de 2023 | Número máximo de entidades em um fluxo de dados | O novo número máximo de entidades que podem fazer parte de um fluxo de dados foi elevado para 50. |
Agosto de 2023 | Gerenciar recurso de conexões | A opção Gerenciar Conexões agora permite exibir as conexões vinculadas ao fluxo de dados, desvincular uma conexão ou editar credenciais e gateway de conexão. |
Agosto de 2023 | Conector de Lakehouses do Power BI | Uma atualização para o conector de Lakehouses na versão de agosto do Power BI Desktop e Gateway inclui melhorias significativas de desempenho. |
Julho de 2023 | Nova experiência moderna de conectividade e descoberta de dados nos Fluxos de dados | Uma experiência aprimorada tem como objetivo agilizar o processo de descoberta dos dados no Fluxo de Dados, no Fluxo de Dados Gen2 e no Datamart. |
Maio de 2023 | Apresentando o Data Factory no Microsoft Fabric | O Data Factory permite que você desenvolva soluções de integração de dados de escala empresarial com fluxos de dados de última geração e pipelines de dados. |
Exemplos e diretrizes do Data Factory no Microsoft Fabric
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Um mapa mental do Data Factory Pipeline Navigator | O melhor Mapa Mental do Pipeline do Data Factory ajuda você a navegar pelos pipelines do Data Factory em sua jornada do Data Factory para criar um projeto de integração de dados bem-sucedido. |
Maio de 2024 | Atividade de atualização do modelo semântico | Saiba como usar a atividade de atualização de modelo semântico muito solicitada em pipelines de dados e como agora você pode criar uma solução completa de ponta a ponta que abrange todo o ciclo de vida do pipeline. |
Fevereiro de 2024 | Pipelines de dados do Fabric – técnicas avançadas de agendamento | Esta série de postagens no blog aborda técnicas avançadas de agendamento em pipelines de dados do Microsoft Fabric. |
Dezembro de 2023 | Ler dados de tabelas do Delta Lake com a função DeltaLake.Table em M | O DeltaLake.Table é uma nova função na linguagem M do Power Query para leitura de dados de tabelas do Delta Lake. Essa função agora está disponível no Power Query no Power BI Desktop e nos Dataflows Gen1 e Gen2. Assim, você não precisa usar a solução desenvolvida pela comunidade. |
Outubro de 2023 | Série de webinars sobre o Microsoft Fabric Data Factory - outubro de 2023 | Você está convidado a ingressar em nossa série de webinars de outubro, na qual mostraremos como usar o Data Factory para transformar e orquestrar seus dados em vários cenários. |
Setembro de 2023 | Notificar canal/grupo do Outlook e do Teams a partir de um pipeline do Microsoft Fabric | Saiba como enviar notificações para canais/grupos do Teams e emails do Outlook. |
Setembro de 2023 | Série de webinars sobre o Microsoft Fabric Data Factory - setembro de 2023 | Ingresse em nossa série webinar do Data Factory em que mostraremos como usar o Data Factory para transformar e orquestrar seus dados em vários cenários. |
Agosto de 2023 | Pipelines controlados por metadados para o Microsoft Fabric – Parte 2, estilo Data Warehouse | Uma visão geral de um pipeline controlado por metadados no Microsoft Fabric que segue a arquitetura de medalhão com o Data Warehouse servindo como a camada Ouro. |
Agosto de 2023 | Pipelines controlados por metadados para o Microsoft Fabric | Uma visão geral de um Pipeline controlado por metadados no Microsoft Fabric que segue a arquitetura de medalhão (Bronze, Prata, Ouro). |
Agosto de 2023 | Usar pipelines de dados para copiar dados de/para bancos de dados KQL e criar fluxos de trabalho com a atividade de Pesquisa | O BD KQL da inteligência em tempo real tem suporte como um destino e uma fonte com pipelines de dados, permitindo que você crie e gerencie várias atividades de ETL (extração, transformação e carregamento), aproveitando a potência e as funcionalidades dos BDs KQL. |
Agosto de 2023 | Acumular dados incrementalmente | Com os Fluxo de dados Gen2 que vêm com suporte para destinos de dados, você pode configurar seu próprio padrão para carregar novos dados incrementalmente, substituir alguns dados antigos e manter seus relatórios atualizados com seus dados de origem. |
Agosto de 2023 | Parte 3 da Melhoria de desempenho do pipeline de dados: melhoria de mais de 50% para cargas históricas | Saiba como levar em conta a paginação, considerando o estado atual do Fabric Data Pipelines em preview. Esse pipeline tem alto desempenho quando o número de páginas paginadas não é muito grande. Leia mais em Obter mais de 50% de melhoria para cargas históricas. |
Agosto de 2023 | Parte 2 da Melhoria de desempenho do pipeline de dados: criar uma matriz de JSONs | Exemplos dessa série de blog incluem como mesclar duas matrizes em uma matriz de objetos JSON e como usar um intervalo de datas e criar vários subintervalos e armazená-los como uma matriz de JSONs. Leia mais em Criar uma matriz de JSONs. |
Julho de 2023 | Melhorias de desempenho do pipeline dos dados Parte 1: como converter um intervalo de tempo (dd.hh:mm:ss) em segundos | Parte um de uma série de blogs sobre como mover dados com várias Atividades de Cópia movendo volumes menores em paralelo: Como converter um intervalo de tempo (dd.hh:mm:ss) em segundos. |
Julho de 2023 | Construir um fluxo de trabalho de análise de dados com um pipeline de dados do Fabric Data Factory | Um blog que abrange pipelines de dados no Data Factory e as vantagens que você encontra usando pipelines para orquestrar seus projetos e atividades de análise de dados do Fabric. |
Julho de 2023 | Tutorial de Pipelines de Dados: inserir arquivos em um Lakehouse de uma API REST com ft de paginação. Hub dos Dados AVEVA | Neste blog, atuaremos na persona de um cliente AVEVA que precisa recuperar dados de operações do Hub de Dados AVEVA em um Lakehouse do Microsoft Fabric. |
Julho de 2023 | Destaque do Data Factory: Fluxo de dados Gen2 | Este destaque do blog aborda os dois principais recursos de alto nível que o Data Factory implementa: fluxos de dados e pipelines. |
Engenharia de Dados do Synapse no Microsoft Fabric
Esta seção resume os novos recursos e funcionalidades arquivados da engenharia de dados, incluindo o Data Factory no Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Conector Fabric Spark para Fabric Synapse Data Warehouse em tempo de execução do Spark (visualização) | O conector do Fabric Spark para Synapse Data Warehouse (preview) permite que um desenvolvedor do Spark ou um cientista de dados acesse e trabalhe em dados de um armazém ou ponto de extremidade de análise SQL do lakehouse (de dentro do mesmo espaço de trabalho ou de todos os espaços de trabalho) com uma API simplificada do Spark. |
Junho de 2024 | Visualização da API pública de compartilhamento de dados externos | As APIs REST para compartilhamento de dados externos do OneLake agora estão disponíveis em preview. Os usuários agora podem dimensionar seus casos de uso de compartilhamento de dados automatizando a criação de compartilhamentos com a API pública. |
Junho de 2024 | Preview dos pools de capacidade | Administradores de capacidade agora podem criar pools personalizados (preview) com base em seus requisitos de carga de trabalho, fornecendo controle granular sobre os recursos de computação. Pools personalizados para Engenharia de Dados e Ciência de Dados podem ser definidos como opções do Pool do Spark nas Configurações do Spark do Espaço de Trabalho e nos itens de ambiente. |
Junho de 2024 | Mecanismo de execução nativo para o Apache Spark | O Mecanismo de execução nativo para Apache Spark em Fabric Engenharia de dados e ciência de dados for Fabric Runtime 1.2 agora está em preview. Para obter mais informações, consulte Mecanismo de execução nativo para o Fabric Spark. |
Junho de 2024 | API de funções de acesso a dados do OneLake | Após a liberação das funções de acesso a dados do OneLake em preview, novas APIs estão disponíveis para o gerenciamento de funções de acesso a dados. Essas APIs podem ser usadas para gerenciar programaticamente o acesso a dados granulares para os seus lakehouses. |
Maio de 2024 | Runtime 1.3 (Apache Spark 3.5, Delta Lake 3.1, R 4.3.3, Python 3.11) (versão prévia) | As melhorias no Fabric Runtime 1.3 incluem a incorporação do Delta Lake 3.1, a compatibilidade com Python 3.11, o suporte para Pools Iniciais, a integração com o Ambiente e as funcionalidades de gerenciamento da biblioteca. Além disso, o Runtime d Fabric agora enriquece a experiência de ciência de dados, oferecendo suporte à linguagem R e integração com o Copilot. |
Maio de 2024 | Preview da análise de séries de execuções do Spark e do recurso de Autotune | Os recursos da análise de séries de execuções de monitoramento do Spark permitem analisar a tendência de duração da execução e a comparação de desempenho para instâncias de execução recorrentes de atividades de pipeline do Spark e para atividades de execução repetitivas do Spark usando a mesma Definição de Trabalho do Notebook ou do Spark. |
Maio de 2024 | Atalhos do OneLake para fontes de dados locais e restritas à rede (preview) | Realize a conexão com fontes de dados locais ao usar um gateway de dados local do Fabric em um computador em seu ambiente, com visibilidade de rede da fonte de dados compatível com o S3, com o Amazon S3 ou com o Google Cloud Storage. Em seguida, você cria o atalho e realiza a seleção desse gateway. Para obter mais informações, confira Criar atalhos para dados locais. |
Maio de 2024 | Comentar @tagging no Notebook | O Notebook agora oferece suporte à capacidade de marcar outras pessoas nos comentários, assim como a funcionalidade familiar de usar produtos do Office. |
Maio de 2024 | Atualizações da faixa de opções do Notebook | Novos recursos na faixa de opções do Notebook do Fabric, incluindo o controle de Conexão de sessão e o botão Data Wrangler na guia Página Inicial, Sessões de alta simultaneidade, novo controle Exibir informações da sessão, incluindo o tempo limite da sessão. |
Maio de 2024 | Engenharia de Dados: GA do Ambiente | O Ambiente no Fabric agora está disponível para o público geral. O Ambiente é um item centralizado permite definir todas as configurações requeridas para executar um trabalho do Spark em um só lugar. No GA, adicionamos suporte para Git, pipelines de implantação, APIs REST, pastas de recursos e compartilhamento. |
Maio de 2024 | API pública para Workspace de Engenharia/Ciência de Dados | O suporte à API REST para configurações de espaço de trabalho de Engenharia/Ciência de Dados do Fabric permite que os usuários criem/gerenciem sua computação do Spark, selecionem o runtime padrão/ambiente padrão, habilitem ou desabilitem o modo de alta simultaneidade ou o registro em log automático de ML. |
Abril de 2024 | Admissão otimista de trabalhos no Fabric Spark | A Admissão otimista de trabalhos no Fabric Spark reduz a frequência de erros de limitação (HTTP 430: Capacidade de resposta com limite excedido do Spark) e melhora a experiência de admissão de trabalhos dos nossos clientes, principalmente durante os horários de pico de uso. |
Abril de 2024 | Suporte a nó único para pools iniciais | O recurso Suporte a nó único para pools iniciais permite que você configure seu pool inicial para um máximo de um nó e obtenha tempos de início de sessão super-rápidos para suas sessões do Spark. |
Abril de 2024 | Imagem de contêiner para o VS Code do Synapse | Para simplificar o processo de desenvolvimento, liberamos uma imagem de contêiner para o VS Code do Synapse que contém todas as dependências necessárias para a extensão. |
Abril de 2024 | Definição de trabalho do Spark com integração do Git | As definições de trabalho do Spark com integração do Git permitem que você verifique as alterações de suas definições de trabalho do Spark em um repositório Git, que inclui o código-fonte dos trabalhos do Spark e outras propriedades de itens. |
Abril de 2024 | Nova experiência do Pesquisador de Objetos no notebook | A nova experiência do Pesquisador de Objetos no notebook melhora a flexibilidade e a capacidade de detecção de fontes de dados no pesquisador e melhora a capacidade de detecção de pastas de recursos. |
Abril de 2024 | %Executar seus scripts no Notebook | Agora você pode usar o comando %run magic para executar seus scripts Python e scripts SQL na pasta de recursos do notebook, assim como o comando %run do Jupyter Notebook. |
Abril de 2024 | Prévia dos atalhos do OneLake para fontes de dados compatíveis com o S3 | Os atalhos do OneLake para fontes de dados compatíveis com o S3 estão em preview. Crie um atalho compatível do Amazon S3 para se conectar aos seus dados existentes por meio de um único Namespace agrupado sem precisar copiar ou mover dados. |
Abril de 2024 | Prévia dos atalhos do OneLake para Google Cloud Storage | Os atalhos do OneLake para Google Cloud Storage estão em preview. Crie um atalho do armazenamento em nuvem do Google para se conectar aos seus dados existentes por meio de um único namespace agrupado sem precisar copiar ou mover dados. |
Abril de 2024 | Funções de acesso a dados do OneLake | As funções de acesso a dados OneLake para lakehouse estão em preview. As permissões de função e as atribuições de usuário/grupo podem ser facilmente atualizadas por meio de uma nova interface de usuário de segurança de pasta. |
Março de 2024 | Novo aprimoramento de validação para “Carregar na tabela” | O novo aprimoramento de validação do recurso “Carregar na tabela” ajuda a mitigar quaisquer problemas de validação e tornar sua experiência de carregamento de dados mais suave e rápida. |
Março de 2024 | Enfileiramento para trabalhos de Notebook | Agora, com a Fila de trabalhos para trabalhos no Notebook, os trabalhos acionados por pipelines ou pelo Job Scheduler serão adicionados a uma fila e repetidos automaticamente quando a capacidade for liberada. Para obter mais informações, consulte Enfileiramento de trabalhos no Microsoft Fabric Spark. |
Março de 2024 | Recurso de ajuste de consultas Autotune para Apache Spark | O recurso de ajuste de consultas Autotune para Apache Spark já está disponível. O Autotune aproveita os dados históricos de suas consultas SQL do Spark e algoritmos de aprendizado de máquina para ajustar automaticamente suas configurações, garantindo tempos de execução mais rápidos e maior eficiência. |
Março de 2024 | Explorador de Arquivos OneLake: editar via Excel | Com nossa versão mais recente v1.0.11.0 do Explorador de Arquivos, temos o prazer de anunciar que agora você pode atualizar seus arquivos diretamente usando o Excel, espelhando a experiência amigável disponível no OneDrive. |
Fevereiro de 2024 | Acesso confiável ao espaço de trabalho (preview) para atalhos do OneLake | O acesso confiável ao espaço de trabalho (preview) permite acesso seguro e integrado a contas de armazenamento do ADLS Gen2 dos atalhos do OneLake no Fabric. Para obter mais informações, consulte Acesso confiável ao espaço de trabalho (preview). |
Fevereiro de 2024 | Reduza os custos de saída com os atalhos do S3 no OneLake | Saiba como os atalhos do OneLake para o S3 agora oferecem suporte ao cache, o que pode reduzir consideravelmente os custos de saída. Use a nova configuração Ativar cache para atalhos do S3 com um atalho do S3. |
Fevereiro de 2024 | API de atalhos do OneLake | As novas APIs REST para atalhos do OneLake permitem a criação programática e o gerenciamento de atalhos, atualmente em preview. Agora você pode programaticamente criar, ler e excluir atalhos do OneLake. Por exemplo, consulte Usar APIs REST de atalhos do OneLake. |
Fevereiro de 2024 | Navegar por snippet de código | O novo recurso Procurar notebook de snippet de código permite que você acesse e insira facilmente snippets de código para trechos de código comumente usados com vários idiomas suportados. |
Fevereiro de 2024 | Configurar tempo limite da sessão | Os Notebooks agora oferecem suporte à configuração do tempo limite da sessão para a sessão ao vivo atual. Ele pode ajudá-lo a evitar o desperdício de recursos ou a perda de contexto devido ao tempo limite. Você pode especificar a duração máxima de suas sessões do Spark, de minutos a horas. Além disso, pode receber alertas antes que a sessão expire e estendê-la. |
Fevereiro de 2024 | Atualização da barra de status do notebook do Fabric | A nova barra de status do notebook do Fabric tem três botões de informações persistentes: status da sessão, status de salvamento e status de seleção de célula. Além disso, os recursos de contexto incluem informações sobre o estado da conexão git, um atalho para estender o tempo limite da sessão e um navegador de célula com falha. |
Janeiro de 2024 | Microsoft Fabric Copilot for Data Science and Data Engineering | O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você? |
Janeiro de 2024 | A versão mais recente do OneLake File Explorer inclui integração com o Excel | Com a versão mais recente do OneLake File Explorer (v1.0.11.0), trazemos algumas atualizações para melhorar sua experiência com o OneLake, incluindo a Integração com o Excel. |
Dezembro de 2023 | %%configure – personalize sua sessão do Spark no Notebook | Agora você pode personalizar sua sessão do Spark com o comando mágico %%configure, em atividades do Notebook interativo e de pipeline. |
Dezembro de 2023 | Pré-visualização avançada de dataframe no Notebook | A função display() foi atualizada no Fabric Notebook, agora chamada de visualização avançada do dataframe. Agora, quando você usa display() para visualizar seu dataframe, você pode facilmente especificar o intervalo, exibir o resumo do dataframe e estatísticas de coluna, verificar valores inválidos ou valores ausentes e visualizar a célula longa. |
Dezembro de 2023 | Trabalhando com o OneLake usando o Gerenciador de Armazenamento do Azure | Se você quiser usar um aplicativo que se integre diretamente com o Explorador de Arquivos do Windows, confira o explorador de arquivos OneLake. Porém, se você estiver acostumado a usar o Gerenciador de Armazenamento do Azure nas suas tarefas de gerenciamento de dados, poderá continuar a aproveitar suas funcionalidades com o OneLake e alguns de seus principais benefícios. |
novembrod e 2023 | Acessibilidade de suporte para Lakehouse | Para fornecer uma interação mais inclusiva e amigável, implementamos melhorias até o momento para dar suporte à acessibilidade no Lakehouse, incluindo compatibilidade com leitores de tela, novo fluxo de texto em design responsivo, navegação por teclado, texto alternativo para imagens e campos de formulários e rótulos. |
novembrod e 2023 | Experiência multitarefa aprimorada no Lakehouse | Introduzimos novas funcionalidades para aprimorar a experiência multitarefa no Lakehouse, incluindo a multitarefa durante operações em execução, recarregamento sem bloqueio e notificações mais claras. |
novembrod e 2023 | Funcionalidades aprimoradas do DataGrid no Lakehouse | Um DataGrid atualizado para a versão prévia da tabela do Lakehouse agora apresenta classificação, filtros e redimensionamento de colunas. |
novembrod e 2023 | Ponto de extremidade de análise do SQL provisionado novamente | Agora você pode repetir o provisionamento do ponto de extremidade de Análise do SQL diretamente no Lakehouse. Assim, se a tentativa inicial de provisionamento falhar, você terá a opção de tentar novamente sem a necessidade de criar um Lakehouse totalmente novo. |
novembrod e 2023 | Microsoft Fabric Runtime 1.2 | O Microsoft Fabric Runtime 1.2 é um avanço significativo em nossas funcionalidades de processamento de dados. O Microsoft Fabric Runtime 1.2 inclui o Apache Spark 3.4.1, Mariner 2.0 como sistema operacional, Java 11, Scala 2.12.17, Python 3.10, Delta Lake 2.4 e R 4.2.2, assegurando que você tenha as ferramentas mais avançadas à sua disposição. Além disso, essa versão vem empacotada com pacotes padrão, abrangendo uma instalação completa do Anaconda e bibliotecas essenciais para Java/Scala, Python e R, simplificando seu fluxo de trabalho. |
novembrod e 2023 | Suporte a Vários Runtimes | Com a introdução do Runtime 1.2, o Fabric dá suporte a vários runtimes, oferecendo aos usuários a flexibilidade de alternância perfeita entre eles, minimizando o risco de incompatibilidades ou interrupções. Ao alterar os tempos de execução, todos os itens criados pelo sistema no espaço de trabalho, incluindo Lakehouses, SJDs e Notebooks, funcionarão usando a versão de runtime recém-selecionada no nível do espaço de trabalho, iniciando na próxima Sessão do Spark. |
novembrod e 2023 | Delta como formato de tabela padrão no novo Runtime 1.2 | O parâmetro padrão spark.sql.sources.default da sessão do Spark agora é delta . Todas as tabelas criadas usando o SQL do Spark, PySpark, Scala Spark e Spark R, sempre que o tipo de tabela for omitido, criarão a tabela como Delta por padrão. |
novembrod e 2023 | Cache Inteligente | Por padrão, o recurso Cache Inteligente recém-reformulado e otimizado está habilitado no Spark do Fabric. O cache inteligente funciona perfeitamente nos bastidores e armazena dados em cache para ajudar a acelerar a execução de trabalhos do Spark no Microsoft Fabric à medida que faz a leitura do seu armazenamento do OneLake ou ADLS Gen2 por meio de atalhos. |
novembrod e 2023 | Hub de monitoramento para aprimoramentos do Spark | Os aprimoramentos mais recentes no hub de monitoramento foram projetados para fornecer uma exibição abrangente e detalhada das atividades do Spark e do Lakehouse, incluindo alocações de executores, versão de runtime de um aplicativo do Spark, um link de itens relacionados na página de detalhes. |
novembrod e 2023 | Monitoramento das operações do Lakehouse | Os usuários podem agora exibir o progresso e o status dos trabalhos de manutenção do Lakehouse e das atividades de carregamento de tabelas. |
novembrod e 2023 | Análise do uso de recursos do aplicativo Spark | Atendendo às solicitações dos clientes para o monitoramento de métricas de uso de recursos do Spark para ajuste e otimização do desempenho, temos o prazer de apresentar o recurso Análise de uso de recursos do Spark, agora disponível em preview. Esse recurso recém-lançado permite que os usuários monitorem executores alocados, executores em execução e executores ociosos, juntamente com as execuções do Spark. |
novembrod e 2023 | Suporte da API REST para a versão prévia da Definição de Trabalho do Spark | As APIs públicas REST para a Definição de Trabalho do Spark agora estão disponíveis, facilitando aos usuários gerenciar e manipular os itens do SJD. |
novembrod e 2023 | Suporte da API REST para o Lakehouse, carregamento para tabelas e manutenção de tabelas | Como um requisito fundamental para a integração da carga de trabalho, as APIs Públicas REST para o Lakehouse já estão disponíveis. As APIs REST públicas do Lakehouse facilitam aos usuários gerenciar e manipular os itens do Lakehouse de forma programática. |
novembrod e 2023 | Suporte do Lakehouse para pipelines de implantação e integração do Git (preview) | O Lakehouse agora se integra aos recursos de gerenciamento do ciclo de vida no Microsoft Fabric, fornecendo uma colaboração padronizada entre todos os membros da equipe de desenvolvimento durante toda a vida útil do produto. O gerenciamento do ciclo de vida facilita um processo eficaz de versão e lançamento do produto, fornecendo continuamente recursos e correções de bugs em vários ambientes. |
novembrod e 2023 | Inserir um relatório do Power BI no Notebook | É com grande satisfação que anunciamos que o pacote powerbiclient Python agora tem suporte nativo nos notebooks do Fabric. Assim, você pode facilmente inserir e interagir com os relatórios do Power BI em seus notebooks com apenas algumas linhas de código. Para obter mais informações sobre como usar o pacote powerbiclient para inserir um componente do Power BI. |
novembrod e 2023 | Nova API do mssparkutils: referência para executar vários notebooks em paralelo | Uma nova API runMultiple no mssparkutils chamada mssparkutils.notebook.runMultiple() permite que você execute vários notebooks em paralelo ou com uma estrutura topológica predefinida. Para obter mais informações, confira Utilitários do notebook. |
novembrod e 2023 | Recursos do notebook com suporte para arquivos .JAR | Agora, há suporte para carregar arquivos .jar no explorador de recursos do notebook. Você pode adicionar suas próprias bibliotecas compiladas, usar o recurso de arrastar e soltar para gerar um snippet de código para instalá-las na sessão e carregá-las no código de modo conveniente. |
novembrod e 2023 | Versão prévia da integração do Git com o notebook | Os notebooks do Fabric agora oferecem integração com o Git para controle do código-fonte usando o Azure DevOps. Ele permite que os usuários controlem facilmente as versões do código do notebook e gerenciem as ramificações do Git aproveitando as funções do Git do Fabric e o Azure DevOps. |
novembrod e 2023 | Notebook na Versão Prévia do Pipeline de Implantação | Agora você também pode usar notebooks para implantar seu código em diferentes ambientes, como desenvolvimento, teste e produção. Você também pode usar regras de implantação para personalizar o comportamento dos notebooks quando eles são implantados, como alterar o Lakehouse padrão de um Notebook. Comece com pipelines de implantação e o Notebook aparecerá automaticamente no conteúdo de implantação. |
novembrod e 2023 | Versão prévia da API REST do notebook | Com as APIs Públicas REST para os itens do Notebook, os engenheiros de dados/cientistas de dados podem automatizar seus pipelines e estabelecer a CI/CD de forma conveniente e eficiente. A API Pública Restful do notebook pode facilitar aos usuários gerenciar e manipular itens do notebook do Fabric e integrar o notebook a outras ferramentas e sistemas. |
novembrod e 2023 | Versão prévia do ambiente | É com grande satisfação que anunciamos a versão prévia de O Ambiente no Fabric. O Ambiente é um item centralizado permite definir todas as configurações requeridas para executar um trabalho do Spark em um só lugar. |
novembrod e 2023 | Extensão VS Code do Synapse na versão prévia do vscode.dev | Com suporte para a extensão VS Code do Synapse no vsocde.dev, os usuários agora podem editar e executar o Fabric Notebooks sem sair da janela do navegador. Além disso, todos os recursos nativos para desenvolvedores profissionais do VS Code agora estão acessíveis aos usuários finais nesse ambiente. |
Outubro de 2023 | Criar vários atalhos do OneLake ao mesmo tempo | A criação de vários atalhos do OneLake ficou mais fácil. Em vez de criar atalhos um de cada vez, agora você pode navegar até o local desejado e selecionar vários destinos ao mesmo tempo. Todos os destinos selecionados são criados como novos atalhos em uma única operação. |
Outubro de 2023 | Delta-RS apresenta suporte nativo para o OneLake | A equipe do OneLake trabalho com a comunidade do Delta-RS para ajudar a introduzir suporte para reconhecer URLs do OneLake no Delta-RS e no Rust Object Store. |
Setembro de 2023 | Importar notebook para sua Área de Trabalho | A nova entrada "Importar Notebook" no Espaço de Trabalho -> menu Novo permite que você importe facilmente novos itens do Notebook do Fabric no espaço de trabalho alvo. Você pode fazer upload de um ou mais arquivos, incluindo os formatos de arquivo .ipynb , .py , .sql , .scala e .r . |
Setembro de 2023 | Suporte ao sistema de arquivos de notebook na extensão VS Code do Synapse | A extensão VS Code do Synapse agora aceita o Sistema de Arquivos de notebook para Engenharia de Dados e Ciência de Dados no Microsoft Fabric. A extensão do VS Code do Synapse capacita os usuários a desenvolver seus itens de notebook diretamente no ambiente do Visual Studio Code. |
Setembro de 2023 | Modo de execução apenas para compartilhamento do notebook | Agora, damos suporte à verificação da operação "Executar" separadamente ao compartilhar um notebook. Se você selecionasse apenas a operação "Executar", o destinatário veria um notebook "Somente execução". |
Setembro de 2023 | Resolução de conflitos de salvamento do notebook | Agora suportamos a exibição e a comparação das diferenças entre duas versões do mesmo notebook quando há conflitos de salvamento. |
Setembro de 2023 | Nova API mssparkutils para cópia rápida de dados | Agora suportamos um novo método em mssparkutils que pode permitir a movimentação/cópia de grandes volumes de dados muito mais rápido, Mssparkutils.fs.fastcp() . Você pode usar mssparkutils.fs.help("fastcp") para verificar o uso detalhado. |
Setembro de 2023 | Suporte ao arquivo .whl de recursos do notebook | Agora suportamos o upload de arquivos .whl no Gerenciador de Recursos do Notebook. |
Agosto de 2023 | Introdução ao modo de alta simultaneidade em notebooks para cargas de trabalho de engenharia de dados e ciência de dados no Microsoft Fabric | O Modo de alta simultaneidade permite que você execute notebooks simultaneamente no mesmo cluster sem comprometer o desempenho ou a segurança ao pagar por uma única sessão. O modo de alta simultaneidade oferece vários benefícios aos usuários do Fabric Spark. |
Agosto de 2023 | Suporte à entidade de serviço para se conectar aos dados em Fluxo de dados, Datamart, Conjunto de dados e Fluxo de dados Gen 2 | A entidade de serviço do Azure foi adicionada como um tipo de autenticação para um conjunto de fontes de dados que podem ser usadas em Conjunto de dados, Fluxo de dados, Fluxo de dados Gen2 e Datamart. |
Agosto de 2023 | Anúncio do suporte de gravação XMLA para conjuntos de dados do Direct Lake | Agora, os conjuntos de dados do Direct Lake dão suporte a operações de gravação XMLA. Agora você pode usar suas ferramentas e scripts favoritos do BI Pro para criar e gerenciar conjuntos de dados do Direct Lake usando pontos de extremidade XMLA. |
Julho de 2023 | Gerenciamento das Permissões de Acesso e Compartilhamento do Lakehouse | Compartilhe um Lakehouse e gerencie as permissões para que os usuários possam acessar os dados do Lakehouse através do Hub de Dados, do Ponto de Extremidade SQL de Análise e do modelo semântico padrão. |
Junho de 2023 | Virtualize seus dados existentes no OneLake com atalhos | Conecte silos de dados sem mover ou copiar dados com o OneLake, o que permite criar pastas especiais chamadas atalhos que apontam para outros locais de armazenamento. |
Maio de 2023 | Apresentando a Engenharia de Dados no Microsoft Fabric | Com a Engenharia de Dados do Synapse, uma das principais experiências do Microsoft Fabric, os engenheiros de dados se sentem em casa, capazes de aproveitar o poder do Apache Spark para transformar seus dados em escala e criar uma arquitetura robusta do Lakehouse. |
Exemplos e diretrizes de Engenharia de Dados do Synapse
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Desmistificando a ingestão de dados na malha: componentes fundamentais para a ingestão de dados em uma casa de lago de malha usando pipelines de dados de malha | Saiba mais sobre uma estrutura de ingestão de dados em lote com base na experiência de trabalho com diferentes clientes durante a construção de uma casa de lago no Fabric. |
Junho de 2024 | Aumente o desempenho e reduza custos com a Cópia Rápida nos Fluxos de Dados Gen2 | Saiba mais sobre como o recurso Cópia Rápida ajuda a aprimorar o desempenho e o custo-benefício dos Fluxos de Dados Gen2. |
Maio de 2024 | Copiar dados do Lakehouse em outro espaço de trabalho usando o pipeline de dados | Saiba como copiar dados entre Lakehouse que cruzam diferentes espaços de trabalho por meio do pipeline de dados. |
Maio de 2024 | Criação de perfil dos Notebooks do Microsoft Fabric Spark com Sparklens | Neste blog, você aprenderá a aproveitar o Sparklens, uma ferramenta de criação de perfil do Spark de código aberto, para criar o perfil dos Notebooks do Microsoft Fabric Spark e melhorar o desempenho do seu código spark. |
Março de 2024 | Criando pontes entre Lakehouses do Fabric: feed de dados de alteração do Delta para ETL perfeito | Saiba como usar o feed de dados de alteração do Delta para facilitar a sincronização de dados entre diferentes lakehouses em sua arquitetura de medalhão. |
Janeiro de 2024 | Usar pipelines de dados do Data Factory do Fabric para orquestrar fluxos de trabalho baseados em Notebook | Diretrizes e boas práticas ao criar fluxos de trabalho do Notebook do Spark no Fabric usando o Data Factory no Fabric com pipelines de dados. |
novembrod e 2023 | O Fabric muda a situação: usando sua própria biblioteca com o Microsoft Fabric | Um guia passo a passo para usar sua própria biblioteca Python no Lakehouse. É muito simples criar sua própria biblioteca com o Python e ainda mais simples reutilizá-la no Fabric. |
Agosto de 2023 | O Fabric está mudando o jogo: registrar sua carga de trabalho usando notebooks | Saiba mais sobre como registrar sua carga de trabalho no OneLake usando notebooks, por meio do Caminho da API do OneLake dentro do notebook. |
Ciência de Dados do Synapse no Microsoft Fabric
Esta seção resume os aprimoramentos e recursos arquivados para a Experiência de Ciência de Dados no Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Preview dos pools de capacidade | Administradores de capacidade agora podem criar pools personalizados (preview) com base em seus requisitos de carga de trabalho, fornecendo controle granular sobre os recursos de computação. Pools personalizados para Engenharia de Dados e Ciência de Dados podem ser definidos como opções do Pool do Spark nas Configurações do Spark do Espaço de Trabalho e nos itens de ambiente. |
Junho de 2024 | Mecanismo de execução nativo para o Apache Spark | O Mecanismo de execução nativo para Apache Spark em Fabric Engenharia de dados e ciência de dados for Fabric Runtime 1.2 agora está em preview. Para obter mais informações, consulte Mecanismo de execução nativo para o Fabric Spark. |
Junho de 2024 | Desmistificando a ingestão de dados na malha: componentes fundamentais para a ingestão de dados em uma casa de lago de malha usando pipelines de dados de malha | Saiba mais sobre uma estrutura de ingestão de dados em lote com base na experiência de trabalho com diferentes clientes durante a construção de uma casa de lago no Fabric. |
Junho de 2024 | Aumente o desempenho e reduza custos com a Cópia Rápida nos Fluxos de Dados Gen2 | Saiba mais sobre como o recurso Cópia Rápida ajuda a aprimorar o desempenho e o custo-benefício dos Fluxos de Dados Gen2. |
Maio de 2024 | API pública para Workspace de Engenharia/Ciência de Dados | O suporte à API REST para configurações de espaço de trabalho de Engenharia/Ciência de Dados do Fabric permite que os usuários criem/gerenciem sua computação do Spark, selecionem o runtime padrão/ambiente padrão, habilitem ou desabilitem o modo de alta simultaneidade ou o registro em log automático de ML. |
Abril de 2024 | Link semântico GA | Os links semânticos estão agora com disponibilidade geral! O pacote vem com nosso VHD padrão. Agora, é possível usar o link semântico no Fabric imediatamente sem a necessidade de instalação de pipelines. |
Abril de 2024 | Representação de nível de capacidade para IA e o Copilot | Os administradores de locatários agora podem habilitar a IA e o Copilot no Fabric para toda a organização, determinados grupos de segurança ou para uma capacidade específica. |
Março de 2024 | Clientes da UE podem usar a IA e o Copilot sem configurações geográficas cruzadas | Desde meados de março, os clientes da UE podem usar a IA e o Copilot sem ligar as configurações geográficas cruzadas. Suas solicitações de IA e do Copilot serão processadas segundo o Limite de Dados da UE. |
Março de 2024 | Preview do ajuste de hiperparâmetros do Code-First | O FLAML agora está integrado para ajuste de hiperparâmetros, atualmente uma versão prévia do recurso. O recurso flaml.tune do Fabric simplifica esse processo, oferecendo uma abordagem econômica e eficiente para o ajuste de hiperparâmetros. |
Março de 2024 | Preview do AutoML do Code First | Com o novo recurso AutoML, você pode automatizar seu fluxo de trabalho de aprendizado de máquina e obter os melhores resultados com menos esforço. AutoML, ou machine learning automatizado, é um conjunto de técnicas e ferramentas que podem treinar e otimizar automaticamente modelos de machine learning para qualquer dado e tipo de tarefa. |
Março de 2024 | Comparar execuções aninhadas | As execuções pai e filho no modo Exibição de Lista de Execuções para experimentos de ML introduzem uma estrutura hierárquica, permitindo que os usuários visualizem sem esforço várias execuções pai e filho em um único modo de exibição e interajam facilmente com eles para comparar visualmente os resultados. |
Março de 2024 | Suporte para imposição obrigatória de rótulos de MIP | Os itens de experimento e de modelo de ML no Fabric agora oferecem suporte aprimorado para rótulos de Proteção de Informações da Microsoft (MIP). |
Janeiro de 2024 | Microsoft Fabric Copilot for Data Science and Data Engineering | O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você? |
Dezembro de 2023 | Atualização do Semantic Link | Temos o prazer de anunciar a última atualização do Semantic Link! Além de muitas melhorias, adicionamos muitos novos recursos para a nossa comunidade de engenharia do Power BI que você pode usar em notebooks do Fabric para satisfazer todas as suas necessidades de automação. |
Dezembro de 2023 | Serviços de IA do Azure pré-criados na visualização do Fabric | A visualização de serviços de IA pré-criados no Fabric é uma integração com os Serviços de IA do Azure, anteriormente conhecidos como Serviços Cognitivos do Azure. Os serviços de IA do Azure pré-criados permitem aprimorar facilmente os dados com modelos de IA pré-criados sem nenhum pré-requisito. Atualmente, os serviços de IA pré-criados estão em versão prévia e incluem suporte para o Serviço OpenAI do Azure da Microsoft, a Linguagem de IA do Azure e o Tradutor de IA do Azure. |
novembrod e 2023 | Copilot em notebooks (preview) | O Copilot nos notebooks Data Science e Data Engineering do Fabric foi projetado para acelerar a produtividade, fornecer respostas e diretrizes úteis e gerar código para tarefas comuns, como exploração de dados, preparação de dados e aprendizado de máquina. É possível interagir e se envolver com a IA no painel de chats ou até mesmo nas células dos notebooks usando comandos mágicos para obter insights dos dados mais rapidamente. Para obter mais informações, confira Copilot em notebooks. |
novembrod e 2023 | Operações Personalizadas em Python no Data Wrangler | O Data Wrangler, uma ferramenta baseada em notebook para análise exploratória de dados, sempre permitiu que os usuários navegassem e aplicassem operações comuns de limpeza de dados, gerando o código correspondente em tempo real. Agora, além de gerar código a partir da interface do usuário, os usuários também podem escrever seu próprio código com operações personalizadas no Data Wrangler. |
novembrod e 2023 | Data Wrangler para Versão prévia do DataFrames do Spark | O Data Wrangler agora dá suporte ao DataFrames do Spark em preview. Até agora, os usuários podiam explorar e transformar os DataFrames do pandas usando operações comuns que podem ser convertidas em código Python em tempo real. A nova versão permite que os usuários editem os DataFrames do Spark além dos DataFrames do pandas com o Data Wrangler. |
novembrod e 2023 | Widget do Notebook MLFlow | O widget de criação em linha MLflow habilita os usuários a acompanhar sem esforço as execuções de suas experiências, juntamente com métricas e parâmetros, tudo diretamente de dentro de seu notebook. |
Novembro de 2023 | Novos aprimoramentos na usabilidade de itens de modelo e experimento | Novos aprimoramentos no nosso modelo e recursos de acompanhamento de experiências são baseados em comentários valiosos dos usuários. O novo controle de árvore na exibição de detalhes da execução facilita o acompanhamento, mostrando qual execução está selecionada. Aprimoramos o recurso de comparação, permitindo ajustar facilmente o painel de comparação para uma experiência mais amigável do usuário. Agora você pode selecionar o nome da execução para obter a exibição Detalhes da Execução. |
novembrod e 2023 | Execuções de Experimentos Recentes | Agora é mais simples para os usuários fazerem check-out das execuções recentes de uma experiência diretamente na exibição da lista de espaços de trabalho. Essa atualização facilita o acompanhamento das atividades recentes, o acesso rápido ao aplicativo Spark relacionado e a aplicação de filtros com base no status de execução. |
novembrod e 2023 | Modelos renomeados para Modelos de ML | A Microsoft renomeou "Modelos" para "Modelos de ML" para garantir a clareza e evitar qualquer confusão com outros elementos do Fabric. Para obter mais informações, consulte Experimentos de machine learning no Microsoft Fabric. |
novembrod e 2023 | SynapseML v1.0 | SynapseML v1.0 foi liberado. O SynapseML v1.0 facilita a compilação de sistemas de aprendizado de máquina prontos para produção no Fabric e está em uso na Microsoft há mais de seis anos. |
novembrod e 2023 | Treine Explainable Boosting Machines Interpretáveis com o SynapseML | Introduzimos uma implementação escalonável de e Explainable Boosting Machines (EBM) da plataforma Apache Spark no SynapseML. EBMs são uma técnica avançada de aprendizado de máquina que combina a precisão do gradient boosting com um forte foco na interpretabilidade do modelo. |
novembrod e 2023 | Modelos de IA predefinidos na versão prévia do Microsoft Fabric | Temos o prazer de anunciar a versão prévia de modelos de IA predefinidos no Fabric. Serviço OpenAI do Azure, Análise de Texto e Tradutor de IA do Azure são modelos predefinidos disponíveis no Fabric, com suporte para API REST e SynapseML. Você também pode usar a Biblioteca do OpenAI Python para acessar o serviço Azure OpenAI no Fabric. |
novembrod e 2023 | Reutilizando a Sessão Spark existente no sparklyr | Adicionamos suporte para um novo método de conexão chamado "synapse" no sparklyr, que permite que você se conecte a uma sessão do Spark existente. Além disso, contribuímos com esse método de conectividade para o projeto sparklyr da OSS. Agora, os usuários podem usar o sparklyr e o SparkR na mesma sessão e facilmente compartilhar dados entre eles. |
novembrod e 2023 | Suporte à API REST para Experimentos e Modelos de ML | As APIs REST para o Experimento de ML e o Modelo de ML já estão disponíveis. Essas APIs REST para experimentos de ML e modelos de ML começam a capacitar os usuários a criar e gerenciar itens de aprendizado de máquina de forma programática, um requisito-chave para a automação de pipeline e a integração de cargas de trabalho. |
Outubro de 2023 | Link semântico (preview) | O link semântico, um recurso inovador que conecta perfeitamente os modelos semânticos do Power BI com A Ciência de Dados do Synapse no Microsoft Fabric. Como a camada de ouro em uma arquitetura de medalhão, os modelos semânticos do Power BI contêm os dados mais refinados e valiosos de sua organização. |
Outubro de 2023 | Link semântico no Microsoft Fabric: Ponte do BI e Ciência de Dados | Temos o prazer de apresentar a versão prévia do recurso de link semântico, um recurso inovador que conecta perfeitamente os modelos semânticos do Power BI com a Ciência de Dados do Synapse no Microsoft Fabric. |
Outubro de 2023 | Introdução ao link semântico (preview) | Explore como o link semântico conecta perfeitamente os modelos semânticos do Power BI com a Ciência de Dados do Synapse no Microsoft Fabric. Saiba mais em Link semântico no Microsoft Fabric: conectando BI e Ciência de Dados. Você também pode conferir os blocos de anotações de exemplo de link semântico que agora estão disponíveis no repositório do GitHub de amostras de malha. Esses notebooks mostram o uso da biblioteca Python do link semântico, SemPy, no Microsoft Fabric. |
Agosto de 2023 | Aproveitar o poder do LangChain no Microsoft Fabric para um resumo avançado de documentos | Aproveitar o potencial dos recursos do Microsoft Fabric e do SynapseML LLM para resumir e organizar seus próprios documentos com eficiência. |
Julho de 2023 | Liberando o poder do SynapseML e do Microsoft Fabric: um guia de P e R sobre documentos em PDF | Nesta postagem no blog, nos aprofundamos nas interessantes funcionalidades e recursos do Microsoft Fabric e do SynapseML para demonstrar como aproveitar os modelos de IA generativa ou grandes modelos de linguagem (LLMs) para realizar tarefas de perguntas e respostas (P e R) em qualquer documento em PDF. |
Maio de 2023 | Apresentando a Ciência de Dados do Synapse no Microsoft Fabric | Com a ciência de dados no Microsoft Fabric, você pode usar o poder dos recursos de aprendizado de máquina para enriquecer perfeitamente os dados como parte dos seus fluxos de trabalho de análise e dados. |
Exemplos e diretrizes da Ciência de Dados do Synapse
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Criando aplicativos de IA personalizados com o Microsoft Fabric: Implementando a geração aumentada de recuperação para modelos de linguagem aprimorados | Este guia explica como implementar um sistema RAG (Recuperação Aumentada de Geração) no Microsoft Fabric usando o OpenAI do Azure e a Pesquisa de IA do Azure. |
Março de 2024 | Novos exemplos de IA | Novos exemplos de AutoML, Ajuste de Modelo e Link Semântico aparecem na categoria Tutorial Rápido dos exemplos do Data Science no Microsoft Fabric. |
Dezembro de 2023 | Usar os dados do lakehouse do Microsoft Fabric e o prompt flow no Serviço do Azure Machine Learning para criar aplicativos RAG | Um aplicativo RAG etapa a etapa por meio de prompt flow no Serviço do Azure Machine Learning combinado com os dados do lakehouse do Microsoft Fabric. |
Novembro de 2023 | Novo tutorial do caminho feliz da ciência de dados no Microsoft Fabric | Atualizamos o tutorial Caminho Feliz da Ciência de Dados para o Microsoft Fabric. Este novo tutorial abrangente demonstra todo o fluxo de trabalho de ciência de dados, usando um problema de rotatividade de clientes de um banco como contexto. |
novembrod e 2023 | Novos ciência de dados de amostras | Expandimos nossa coleção de amostras de ciência de dados para incluir novas amostras de R de ponta a ponta e novas amostras de tutoriais rápidos para "Explicabilidade das saídas do modelo" e "Visualização do comportamento do modelo.". |
novembrod e 2023 | Nova amostra de previsão de ciência de dados | Os novos dados de amostra de Ciência de Dados sobre previsão de vendas foram desenvolvidos em colaboração com a Sonata Software. Essa nova amostra abrange todo o fluxo de trabalho da ciência de dados, desde a limpeza dos dados até a visualização no Power BI. O notebook aborda as etapas para desenvolver, avaliar e pontuar um modelo de previsão de vendas de superlojas, aproveitando o poder do algoritmo SARIMAX. |
Agosto de 2023 | Novas amostras de falha do computador e rotatividade de clientes | Mais exemplos foram adicionados ao usar um exemplo da Ciência de Dados do Synapse. Para verificar esses exemplos da Ciência de Dados, selecione Ciência de Dados do Synapse e, em seguida, Usar um exemplo. |
Agosto de 2023 | Usar o Kernel Semântico com o Lakehouse no Microsoft Fabric | Saiba como o Fabric permite que os cientistas de dados usem o Kernel Semântico com o Lakehouse no Microsoft Fabric. |
Data Warehouse do Synapse
Esta seção resume as melhorias e recursos arquivados para o Data Warehouse do Synapse do Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Restaurar a experiência do portal in-loco | Agora você pode criar pontos de restauração criados pelo usuário no depósito por meio do portal do Fabric. Para obter mais informações, confira Restauração in-loco de um depósito no Microsoft Fabric. |
Junho de 2024 | Conector do Fabric Spark para Fabric Data Warehouse no tempo de execução do Spark (visualização) | O conector do Fabric Spark para Fabric Data Warehouse (preview) permite que um desenvolvedor do Spark ou um cientista de dados acesse e trabalhe em dados do Fabric DW e do ponto de extremidade de análise SQL do lakehouse (de dentro do mesmo espaço de trabalho ou de todos os espaços de trabalho) com uma API simplificada do Spark. |
Maio de 2024 | Monitorar ferramentas de data warehouse | Você pode monitorar a atividade do Synapse Data Warehouse com uma variedade de ferramentas, incluindo: os relatórios de cobrança e de utilização no Synapse Data Warehouse, o monitoramento de conexões, sessões e solicitações usando DMVs, a consulta de insights e, agora, a consulta de atividades. Para obter mais informações, realize a leitura Query activity: A one-stop view to monitor your running and completed T-SQL queries. |
Maio de 2024 | Copilot para Data Warehouse | Copilot para Data Warehouse (versão prévia) agora está disponível em versão prévia limitada, oferecendo o Copilot painel de chat, ações rápidas e conclusões do código. |
Maio de 2024 | Consultas do Warehouse com viagem no tempo (preview) | O Warehouse no Microsoft Fabric oferece a capacidade de consultar os dados históricos conforme existiam anteriormente no nível da instrução. A capacidade de consultar dados de um carimbo de data/hora específico é conhecida no setor de data warehousing como viagem no tempo. |
Maio de 2024 | Melhorias COPY INTO | COPY INTO agora oferece suporte à autenticação do Microsoft Entra ID e ao acesso ao armazenamento protegido por firewall por meio da funcionalidade de espaço de trabalho confiável. Para obter mais informações, confira Melhorias COPY INTO e COPY INTO (Transact-SQL). |
Abril de 2024 | Warehouse do Fabric na atividade Copy do ADF | Você agora pode se conectar ao Warehouse do Fabric em um pipeline do Azure Data Factory/Synapse. Você pode encontrar esse novo conector ao criar uma nova origem ou destino de coletor em sua atividade Copy, na atividade Pesquisa, na atividade Procedimento Armazenado, na atividade Script e na atividade Obter Metadados. |
Abril de 2024 | Integração do Git | A integração do Git para o Warehouse permite que você verifique as alterações do seu Warehouse em um repositório Git do Azure DevOps como um projeto de banco de dados do SQL. |
Abril de 2024 | Eliminação de partição | A eliminação de partições é uma melhoria de desempenho para tabelas com um número grande de arquivos. O ponto de extremidade de análise SQL de um Lakehouse usa a eliminação de partição para ler dados somente das partições que são relevantes para a consulta. Melhorias recentes aumentaram ainda mais o desempenho quando as consultas são direcionadas a algumas partições em uma tabela que tem muitos arquivos. |
Março de 2024 | Espelhamento no Microsoft Fabric (preview) | Com o Espelhamento no Fabric, você pode facilmente trazer seus bancos de dados para o OneLake no Microsoft Fabric, permitindo insights sem interrupções de ETL zero quase em tempo real sobre seus dados e desbloqueando armazenamento, BI, IA e muito mais. Para obter mais informações, confira O que é o espelhamento no Fabric?. |
Março de 2024 | Melhorias no desempenho do cache frio | O Fabric armazena dados em tabelas Delta e, quando os dados não são armazenados em cache, ele precisa transcodificar dados de estruturas de formato de arquivo parquet para estruturas na memória para processamento de consultas. Melhorias recentes no desempenho do cache frio otimizam ainda mais a transcodificação. Observamos consultas até 9% mais rápidas em nossos testes quando os dados não são armazenados em cache anteriormente. |
Março de 2024 | Extrair e publicar um projeto de banco de dados SQL diretamente por meio do editor DW | A extensão de projetos de bancos de dados SQL cria um arquivo (.sqlproj ) de projeto, uma representação local de objetos SQL que compõem o esquema de um banco de dados individual, como tabelas, procedimentos armazenados ou funções. Agora você pode extrair e publicar um projeto de banco de dados SQL diretamente por meio do editor DW. |
Março de 2024 | Alterar proprietário do item de depósito | A nova API Takeover permite que você altere o proprietário do depósito do proprietário atual para um novo proprietário, que pode ser um SPN ou uma conta institucional. |
Março de 2024 | Clonar tabela RLS e CLS | Uma tabela de clones agora herda a segurança em nível de linha (RLS) e a máscara dinâmica de dados da origem da tabela de clones. |
Fevereiro de 2024 | Experimente melhorias de desempenho | Os aprimoramentos recentes de conectividade e desempenho incluem uma experiência aprimorada para a criação de depósitos, execução T-SQL, descoberta automática de metadados e mensagens de erro. |
Dezembro de 2023 | Automatic Log Checkpointing for Fabric Warehouse | O Automatic Log Checkpointing é um dos agentes que ajuda o Data Warehouse a apresentar um ótimo desempenho. E a melhor notícia: você não precisa fazer tarefas adicionais para isso! |
Dezembro de 2023 | Pontos de restauração e restauração no local | Agora você pode criar pontos de restauração e executar uma restauração no local de um depósito para um ponto no tempo no passado. Os recursos de pontos de restauração e restauração no local estão atualmente em preview. A restauração in-loco é uma parte essencial da recuperação do data warehouse, que permite restaurar o data warehouse para um estado conhecido anterior confiável, substituindo o data warehouse existente a partir do qual o ponto de restauração foi criado. |
Novembro de 2023 | Suporte do TRIM T-SQL | Agora você pode usar o comando TRIM para remover espaços ou caracteres específicos de cadeias de caracteres usando as palavras-chave LEADING, TRAILING ou BOTH em TRIM (Transact-SQL). |
novembrod e 2023 | Suporte ao T-SQL GENERATE_SERIES | Gera uma série de números em um determinado intervalo com GENERATE_SERIES (Transact-SQL). O intervalo e a etapa entre os valores da série são definidos pelo usuário. |
novembrod e 2023 | Cache de metadados do disco SSD | Agora, os metadados de arquivos e grupos de linhas também são armazenados em cache na memória e em cache no SSD, melhorando ainda mais o desempenho. |
novembrod e 2023 | Melhorias no PARSER 2.0 para ingerir CSV | O analisador de arquivos CSV versão 2.0 para COPY INTO cria uma inovação do grupo Plataforma de Dados e Análise da Microsoft Research para tornar a ingestão de dados de arquivos CSV extremamente rápida no Fabric Warehouse. Para obter mais informações, confira COPY INTO (Transact-SQL). |
novembrod e 2023 | Atribuição de recursos de computação rápida habilitada | Todas as execuções de consultas no Fabric Warehouse agora são da plataforma da nova tecnologia recentemente implantada como parte do componente de Governança Global de Recursos que atribui recursos de computação em milissegundos. |
novembrod e 2023 | Suporte da API REST para o Warehouse | Com as APIs públicas do Warehouse, os desenvolvedores de SQL agora podem automatizar seus pipelines e estabelecer a CI/CD de forma conveniente e eficiente. As APIs públicas REST do Warehouse facilitam o gerenciamento e a manipulação dos itens do Fabric Warehouse pelos usuários. |
novembrod e 2023 | SQLPackage com suporte para o Fabric Warehouse | O SQLPackage agora dá suporte para o Fabric Warehouse. O SqlPackage é um utilitário de linha de comando que automatiza as seguintes tarefas de desenvolvimento de banco de dados, expondo algumas das APIs públicas do Estrutura do Aplicativo da Camada de Dados (DacFx). A ferramenta linha de comando SqlPackage permite que você especifique essas ações com propriedades e parâmetros específicos da ação. |
Novembro de 2023 | Modelos semânticos do Power BI | A Microsoft renomeou o tipo de conteúdo do conjunto de dados do Power BI para modelo semântico. Isso também se aplica aos modelos semânticos do Microsoft Fabric. Para obter mais informações, confira Novo nome para os conjuntos de dados do Power BI. |
Novembro de 2023 | Ponto de extremidade de análise do SQL | A Microsoft renomeou o ponto de extremidade SQL de um Lakehouse como o ponto de extremidade de análise SQL de um Lakehouse. |
Novembro de 2023 | Mascaramento de dados dinâmicos | DDM (Máscara Dinâmica de Dados) para o Fabric Warehouse e o ponto de extremidade de análise do SQL no Lakehouse. Para obter mais informações e exemplos, confira Máscara Dinâmica de Dados no armazenamento de dados do Fabric e Como implementar a máscara dinâmica de dados no Data Warehouse do Synapse. |
Novembro de 2023 | Clonar tabelas com viagem no tempo | Agora você pode usar clones de tabela para criar um clone de uma tabela com base em dados de até sete dias de calendário no passado. |
Novembro de 2023 | Atualizações da experiência do usuário | Chegaram várias experiências do usuário no Warehouse. Para obter mais informações, consulte atualizações de experiência do usuário do Fabric Warehouse. |
Novembro de 2023 | Compactação automática de dados | A compactação automática de dados regenera muitos arquivos de parquet menores em alguns arquivos parquet maiores, o que melhorará o desempenho da leitura da tabela. A Compactação de Dados é uma das maneiras pelas quais ajudamos seu Warehouse a fornecer a você um ótimo desempenho sem nenhum esforço de sua parte. |
Outubro de 2023 | Suporte para sp_rename | O suporte para a sintaxe sp_rename T-SQL já está disponível para Warehouse e ponto de extremidade de análise do SQL. Para obter mais informações, confira Suporte do Fabric Warehouse para sp_rename. |
Outubro de 2023 | Insights de consulta | O recurso insights de consulta é uma solução escalonável, sustentável e extensível para aprimorar a experiência de análise de SQL. Com dados de consulta históricos, insights agregados e acesso ao texto de consulta real, você pode analisar e ajustar o desempenho da consulta. |
Outubro de 2023 | Logs completos de DML para o Delta Lake | O Warehouse do Fabric agora publica todas as inserções, atualizações e exclusões de cada tabela no Log do Delta Lake no OneLake. |
Outubro de 2023 | Otimização de gravação de V-Order | O V-Order otimiza arquivos parquet para permitir leituras ultrarrápidas nos mecanismos de computação do Microsoft Fabric, como Power BI, SQL, Spark e outros. As consultas de Warehouse em geral se beneficiam dos tempos de leitura mais rápidos para consultas com essa otimização, garantindo ainda que os arquivos parquet sejam 100% compatíveis com sua especificação de código aberto. A partir deste mês, todos os dados ingeridos nos Fabric Warehouses usam a otimização V-Order. |
Outubro de 2023 | Capacidade de intermitência | A capacidade de intermitência permite que as cargas de trabalho usem mais recursos para obter um melhor desempenho. A capacidade de intermitência é finita, com um limite aplicado aos recursos de computação de back-end para reduzir consideravelmente o risco de limitação. Para obter mais informações, confira Guardrails da SKU do Warehouse para a Funcionalidade com Capacidade de Intermitência. |
Outubro de 2023 | Limitação e suavização no Data Warehouse do Synapse | Um novo artigo detalha o comportamento de limitação e suavização no Data Warehouse do Synapse, em que quase toda atividade é classificada como em segundo plano para aproveitar a janela de suavização de 24 horas antes que a limitação entre em vigor. Saiba mais sobre como observar a utilização no Data Warehouse do Synapse. |
Setembro de 2023 | Melhorias no modelo semântico padrão | O modelo semântico padrão não adiciona mais novos objetos automaticamente. Isso pode ser habilitado nas configurações de item do Warehouse. |
Setembro de 2023 | Os pipelines de implantação agora suportam warehouses | Os pipelines de implantação permitem que os criadores desenvolvam e testem o conteúdo no serviço antes que ele chegue aos usuários. Os tipos de conteúdo suportados incluem relatórios, relatórios paginados, painéis, modelos semânticos, fluxos de dados e agora warehouses. Saiba como implantar conteúdo programaticamente utilizando APIs REST e DevOps. |
Setembro de 2023 | Suporte a Projetos SQL para Warehouse no Microsoft Fabric | O Data Warehouse do Microsoft Fabric agora é suportado na extensão de Projetos de Banco de Dados SQL disponível dentro do Azure Data Studio e doVisual Studio Code. |
Setembro de 2023 | Anúncio: segurança em nível de coluna e em nível de linha para o ponto de extremidade do Fabric Warehouse e análise SQL | A segurança em nível de Coluna e em nível de Linha no Fabric Warehouse e ponto de extremidade de análise do SQL já está em preview, com um comportamento semelhante ao dos mesmos recursos no SQL Server. |
Setembro de 2023 | Relatório de uso | Os relatórios de utilização e faturamento estão disponíveis para o armazenamento de dados do Fabric no aplicativo Microsoft Fabric Métricas de Capacidade. Para obter mais informações, leia sobre Relatórios de utilização e faturamento Armazenamento de dados de Fabric. |
Agosto de 2023 | Cache SSD habilitado | O cache SSD local armazena dados acessados com frequência em discos locais em formato altamente otimizado, reduzindo significativamente a latência de E/S. Isso beneficia você imediatamente, sem a necessidade de nenhuma ação ou configuração necessária. |
Julho de 2023 | Compartilhamento | Qualquer Administração ou Membro em um espaço de trabalho pode compartilhar um Warehouse com outro destinatário na sua organização. Você também pode conceder essas permissões usando a experiência "Gerenciar permissões". |
Julho de 2023 | Clone da tabela | Um clone de cópia zero cria uma réplica da tabela copiando os metadados, enquanto faz referência aos mesmos arquivos de dados no OneLake. Isso evita a necessidade de armazenar várias cópias de dados, economizando assim nos custos de armazenamento quando você clona uma tabela no Microsoft Fabric. Para obter mais informações, confira os tutoriais para Clonar uma tabela com T-SQL ou Clonar tabelas no portal do Fabric. |
Maio de 2023 | Apresentando a Data Warehouse do Synapse no Microsoft Fabric | O Data Warehouse do Synapse é a próxima geração de armazenamento de dados no Microsoft Fabric que é o primeiro armazenamento de dados transacional a dar suporte nativo a um formato de dados aberto, Delta-Parquet. |
Exemplos e diretrizes do Data Warehouse do Synapse
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Dominando o T-SQL ETL/ELT corporativo: um guia com data warehouse e pipelines de malha | Saiba mais sobre os elementos fundamentais de uma estrutura de ETL/ELT de escala empresarial usando Pipelines de Malha e um Data Warehouse para executar nossas transformações em T-SQL. Além disso, examinaremos um script SQL dinâmico projetado para processar tabelas incrementalmente em toda a empresa. |
Abril de 2024 | O Fabric muda o panorama: espelhamento do Banco de Dados SQL do Azure no Microsoft Fabric | Um guia passo a passo para espelhar seu Banco de Dados SQL do Azure no Microsoft Fabric. |
Fevereiro de 2024 | Mapeando pools de SQL dedicados do Azure Synapse para computação de data warehouse do Fabric | Leia para obter orientação sobre o mapeamento de Unidades de Data Warehouse (DWU) do pool SQL dedicado do Azure Synapse Analytics para um número equivalente aproximado de Unidades de Capacidade de Malha (CU). |
Janeiro de 2024 | Automatizar consultas e comandos de data warehouse do Fabric com o Data Factory | No Data Factory do Fabric, há muitas maneiras de consultar e recuperar dados, além de executar comandos do warehouse usando atividades de pipeline que podem ser facilmente automatizadas. |
novembrod e 2023 | Migrar de pools dedicados de SQL do Azure Synapse | Um guia detalhado com um runbook de migração está disponível para migrações dos pools de SQL dedicados do Data Warehouse do Azure Synapse para o Microsoft Fabric. |
Agosto de 2023 | Particionamento eficiente de dados com o Microsoft Fabric: guia de melhores práticas e implementação | Uma proposta de método para o particionamento de dados usando notebooks do Fabric. O particionamento de dados é uma técnica de gerenciamento de dados usada para dividir um grande conjunto de dados em subconjuntos menores e mais gerenciáveis chamados de partições ou fragmentos. |
Maio de 2023 | Microsoft Fabric – Como um usuário do SQL ou DBA pode se conectar | Este blog examina como se conectar a um ponto de extremidade de análise do SQL do Lakehouse ou Warehouse por meio do protocolo TDS ou ponto de extremidade do TDS, conhecido para todos os aplicativos Web modernos que interagem com um ponto de extremidade do SQL Server. |
Inteligência em Tempo Real no Microsoft Fabric
Esta seção resume os aprimoramentos e recursos arquivados para Inteligência em Tempo Real no Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Semântica de Grafos no Eventhouse | A Semântica de Grafos no Eventhouse permite que os usuários modelem seus dados como gráficos e realizem consultas e análises avançadas de gráficos usando a Kusto Query Language (KQL). |
Junho de 2024 | Definir alertas em painéis em tempo real com gatilhos do Data Activator | Os elementos visuais do Painel em Tempo Real agora oferecem suporte a alertas, para estender o suporte ao monitoramento com o Data Activator. Com a integração com o Data Activator, você receberá alertas oportunos à medida que suas principais métricas mudam em tempo real. |
Junho de 2024 | Disponibilidade do Eventhouse no OneLake no formato Delta Lake em GA (disponibilidade geral) | Como parte da promessa de uma cópia lógica, temos o prazer de anunciar que a disponibilidade do Eventhouse no OneLake no formato Delta Lake está disponível ao público em geral. |
Junho de 2024 | Dashboards em Tempo Real | Os Dashboards em Tempo Real interagem com os dados de forma dinâmica e em tempo real. Os Dashboards em Tempo Real realizam a visualização de forma nativa para os dados armazenados em Eventhouses. Os dashboards em tempo real são compatíveis com taxas de atualização ultrabaixas de apenas 1 ou 10 segundos. Para obter mais informações, confira Visualize and Explore Data with Real-Time Dashboards. |
Maio de 2024 | Eventhouse em GA (disponibilidade geral) | O Eventhouse é um espaço de trabalho novo e dinâmico que hospeda diversos bancos de dados KQL, disponível ao público em geral como parte da Inteligência em Tempo Real do Fabric. Um Eventhouse oferece uma solução robusta para gerenciar e analisar volumes substanciais de dados em tempo real. Comece com um guia para Criar e gerenciar um Eventhouse. |
Maio de 2024 | Copilot para Inteligência em Tempo Real | O Copilot para Inteligência em Tempo Real está em preview! Para as pessoas que já estão familiarizadas com a KQL ou que estão começando a explorar o potencial dela, o Copilot pode ajudar na introdução à ferramenta e pode auxiliar a navegar pelos dados com facilidade. |
Maio de 2024 | Automatização de itens do Fabric com a Inteligência em Tempo Real | Saiba mais sobre como realizar a interação com pipelines de dados, notebooks e trabalhos do Spark de uma maneira mais orientada a eventos. |
Maio de 2024 | Inteligência em tempo real | Este mês inclui o anúncio da Inteligência em Tempo Real, a próxima evolução do Análise em Tempo Real e do Data Activator. |
Maio de 2024 | Versão prévia dos novos recursos da Inteligência em Tempo Real | No Build 2024, uma dúzia de novos recursos e capacidades foram anunciados para Inteligência em Tempo Real, organizados em categorias de Ingerir e Processar, Analisar e Transformar e Visualizar e Agir. |
Maio de 2024 | Pré-visualização do Hub em Tempo Real | O hub em tempo real é um local único, para todos os locatários, unificado e lógico para streaming de dados em movimento. Ele permite que você descubra, ingira, gerencie e consuma facilmente dados em movimento de uma ampla variedade de fontes. Ele lista todos os fluxos e tabelas em Linguagem de Consulta Kusto (KQL) em que você pode atuar diretamente. Além disso, oferece uma maneira fácil de ingerir dados de streaming de produtos Microsoft e eventos do Fabric. Para obter mais informações, confira Visão Geral do Hub em Tempo Real. |
Maio de 2024 | Versão prévia de Obter Eventos | A experiência Obter Eventos permite que os usuários se conectem a uma ampla variedade de fontes diretamente do hub em tempo real, Eventstreams, Eventhouse e Data Activator. Ao usar Obter Eventos, traga dados de streaming de fontes da Microsoft diretamente para o Fabric com uma experiência de primeira classe. |
Maio de 2024 | Versão prévia dos recursos avançados do Eventstream | Com os recursos avançados do Eventstream, você já pode transmitir dados não apenas de fontes da Microsoft, mas também de outras plataformas, como Google Cloud, Amazon Kinesis, fluxos de captura de dados de alteração de banco de dados e muito mais, usando nossos novos conectores de mensagens. |
Maio de 2024 | Fluxos de eventos - visualização de recursos aprimorados | A visualização dos recursos aprimorados oferece suporte a muitas novas fontes - Google Cloud Pub/Sub, Amazon Kinesis Data Streams, Kafka no Confluent Cloud, Captura de Dados de Alterações (CDA) do Banco de Dados SQL do Azure, CDA do Banco de Dados PostgreSQL, CDA do Banco de Dados MySQL, CDA do Azure Cosmos DB, eventos do Armazenamento de Blobs do Azure e eventos de item do espaço de trabalho do Fabric e um novo destino de fluxo. É compatível com dois modos distintos, o modo de edição e o de exibição ao vivo no designer visual. Além disso, oferece suporte ao roteamento com base no conteúdo em fluxos de dados. Para obter mais informações, consulte O que são fluxos de eventos do Fabric?. |
Abril de 2024 | Visualização do consumo do Kusto Cache | No preview do consumo do Kusto Cache, você verá o consumo faturável do medidor de dados armazenados em cache do OneLake do banco de dados KQL e de itens do Eventhouse. Para obter mais informações, consulte Consumo do banco de dados KQL. |
Abril de 2024 | Pausar e retomar a versão prévia do Eventstream | O recurso Pausar e Retomar permite pausar o fluxo de dados de várias origens e destinos no Eventstream. Em seguida, você pode retomar o fluxo de dados tranquilamente a partir do tempo em que pausou ou de um tempo personalizado, garantindo que não haja perda de dados. |
Março de 2024 | Novas expressões "Changes by", "Increases by" e "Decreases by" | No Data Activator, ao definir condições em um gatilho, adicionamos sintaxe para permitir que você detecte quando houve uma alteração em seus dados por número absoluto ou porcentagem. Confira Novas expressões "Changes by", "Increases by" e "Decreases by". |
Março de 2024 | A Inteligência em Tempo Real do Fabric se integra ao recém-anunciado Database Watcher para SQL do Azure | Os usuários do SQL do Azure podem usar a solução de monitoramento do Observador de Banco de Dados com o Microsoft Fabric. O Database Watcher para SQL do Azure (preview) fornece recursos avançados de monitoramento e pode se integrar ao banco de dados KQL do Eventhouse. |
Março de 2024 | Atualizar registros em um banco de dados KQL (preview) | O comando .update agora está disponível como uma visão prévia do recurso. Saiba mais sobre como atualizar registros em um banco de dados Kusto. |
Março de 2024 | Consultar dados do Azure Data Explorer no Queryset | A conexão e o uso de dados no cluster do Azure Data Explorer do Queryset KQL do Fabric já estão disponíveis. |
Fevereiro de 2024 | Visão geral do Eventhouse: manipulando dados em tempo real com o Microsoft Fabric | O Eventhouse (preview) é um espaço de trabalho dinâmico que hospeda vários bancos de dados KQL, parte da Inteligência em Tempo Real do Fabric. Um Eventhouse oferece uma solução robusta para gerenciar e analisar volumes substanciais de dados em tempo real. Comece com um guia para Criar e gerenciar um Eventhouse. |
Fevereiro de 2024 | O atalho KQL BD para tabelas Delta Lake oferece suporte ao mapeamento de colunas baseado em nome | O KQL BD agora suporta a leitura de tabelas Delta com mapeamentos de nome de coluna. O recurso de mapeamento de colunas permite que as colunas da tabela Delta e as colunas do arquivo Parquet subjacentes usem nomes diferentes. Isso permite operações de evolução de esquema Delta como em uma tabela Delta sem a necessidade de reescrever os arquivos Parquet subjacentes e permite que os usuários nomeiem colunas de tabela Delta usando caracteres que não são permitidos pelo Parquet. |
Fevereiro de 2024 | O atalho do KQL BD para tabelas Delta Lake suporta vetores de exclusão | O BD KQL agora pode ler tabelas delta com vetores de exclusão, resolvendo o estado atual da tabela aplicando as exclusões anotadas pelos vetores de exclusão à versão mais recente da tabela. |
Fevereiro de 2024 | Obter dados no KQL BD agora suporta o processamento de eventos antes da ingestão via Eventstream | A opção Processar evento antes da ingestão no Eventstream permite processar os dados antes de serem ingeridos na tabela de destino. Ao selecionar essa opção, o processo de obtenção de dados continua sem interrupções no Eventstream. A tabela de destino e os detalhes da fonte de dados são preenchidos automaticamente. |
Fevereiro de 2024 | KQL BD agora suporta a ingestão de dados usando Apache Flink | Usando o conector Flink de código aberto, você pode enviar dados do Flink para sua tabela. Usando o Azure Data Explorer e o Apache Flink, você pode criar aplicativos rápidos e escalonáveis direcionados a cenários baseados em dados. |
Fevereiro de 2024 | Encaminhe dados do Splunk Universal Forwarder para o KQL BD usando o Kusto Splunk Universal Connector | Agora você pode usar o Kusto Splunk Universal Connector para enviar dados do Splunk Universal Forwarder para uma tabela em seu KQL BD. |
Dezembro de 2023 | Calcular contagens distintas no Power BI executando relatórios em bancos de dados KQL | As novas funções dcount e dcountif do banco de dados KQL do Fabric usam um algoritmo especial para retornar uma estimativa de contagens distintas, mesmo em conjuntos de dados extremamente grandes. As novas funções count_distinct e count_distinctif calculam contagens distintas com exatidão. |
Dezembro de 2023 | Crie um Notebook com conexão pré-configurada ao seu BD do KQL | Agora você pode simplesmente criar um novo Notebook a partir do editor do banco de dados KQL com uma conexão pré-configurada com seu banco de dados KQL e explorar os dados usando o PySpark. Essa opção cria um Notebook do PySpark com uma célula de código pronta para execução, para ler dados do BD do KQL selecionado. |
Dezembro de 2023 | Validação de esquema do banco de dados KQL | O novo comando .show database schema violations do Kusto foi projetado para validar o estado atual do esquema do banco de dados e encontrar inconsistências. Você pode usar violações de esquema de banco de dados .show para uma verificação pontual em seu banco de dados ou na automação de CI/CD. |
Dezembro de 2023 | Habilitar a disponibilidade de dados do banco de dados KQL no OneLake | Com a disponibilidade de dados do banco de dados KQL no OneLake, você aproveita o melhor dos dois mundos. Você pode consultar os dados com alto desempenho e baixa latência no banco de dados KQL e os mesmos dados no Delta Parquet por meio do modo Direct Lake do Power BI, Warehouse, Lakehouse, Notebooks e muito mais. |
Dezembro de 2023 | O Fabric vira o jogo: Inteligência em Tempo Real | A Inteligência em Tempo Real é uma ferramenta formidável, que diminui a complexidade e agiliza os processos de integração de dados. O Microsoft Fabric permite que você crie análises de streaming em tempo real com o eventstream ou o Spark Stream. |
novembrod e 2023 | Comunicado sobre o suporte do Delta Lake no Banco de Dados KQL da Análise em Tempo Real | Agora é possível habilitar a disponibilidade do Banco de Dados KQL no formato Delta Lake. O Delta Lake é o formato de tabela unificado do data lake escolhido para obter acesso contínuo aos dados em todos os mecanismos de computação no Microsoft Fabric. |
novembrod e 2023 | Análise em Tempo Real na GA (disponibilidade geral) do Microsoft Fabric | Anunciando a disponibilidade geral da Análise em Tempo Real no Microsoft Fabric! A Análise em Tempo Real oferece inúmeros recursos que visam tornar sua análise de dados mais eficiente e eficaz. |
novembrod e 2023 | Suporte ao Delta Parquet no banco de dados KQL | Como parte da promessa de uma cópia lógica, temos o prazer de anunciar que os dados do banco de dados KQL agora podem ser disponibilizados no OneLake no formato delta parquet. Agora é possível acessar essa tabela Delta com a criação de um atalho do OneLake a partir do Lakehouse, Warehouse ou diretamente pelo modo Direct Lake do Power BI. |
novembrod e 2023 | Conectores de código aberto para o banco de dados KQL | Vários conectores de código aberto para análise em tempo real agora têm suporte para permitir que os usuários ingiram dados de várias fontes e os processem usando o BD KQL. |
novembrod e 2023 | Suporte da API REST para Banco de Dados KQL | Temos o prazer de anunciar o lançamento das APIs públicas REST para o BD KQL. As APIs REST públicas do BD KQL permitem que os usuários gerenciem e automatizem seus fluxos de forma programática. |
novembrod e 2023 | O Eventstream agora está em disponibilidade geral | O Eventstream está agora em disponibilidade geral, adicionando aprimoramentos que visam levar sua experiência de processamento de dados para o próximo nível. |
novembrod e 2023 | Transformação de Dados do Eventstream para o banco de dados KQL | Agora, você pode transformar seus fluxos de dados em tempo real dentro do Eventstream antes que eles sejam enviados ao seu banco de dados KQL. Quando você cria um destino de Banco de Dados KQL no fluxo de eventos, pode definir o modo de ingestão como "Processamento de eventos antes da ingestão" e adicionar logicas de processamento de eventos, como filtragem e agregação, para transformar seus fluxos de dados. |
novembrod e 2023 | Versão prévia do complemento do Splunk | O complemento Microsoft Fabric para Splunk permite que os usuários ingiram logs da plataforma Splunk em um BD KQL do Microsoft Fabric usando o SDK do Python Kusto. |
novembrod e 2023 | Obter dados do Eventstream em qualquer lugar no Fabric | Se estiver trabalhando em outros itens do Fabric e quiser ingerir dados do Eventstream, nosso novo recurso "Obter Dados do Eventstream" simplifica o processo; você pode Obter dados do Eventstream enquanto trabalha com um banco de dados KQL e o Lakehouse. |
novembrod e 2023 | Dois modos de ingerir o Destino do Lakehouse | Apresentamos dois modos distintos de ingestão para seu Destino do Lakehouse: linhas por arquivo e Duração. |
novembrod e 2023 | Otimizar as tabelas antes de ingerir dados no Lakehouse | O atalho de otimização de tabela agora está disponível no destino do Eventstream Lakehouse para compactar vários arquivos pequenos de streaming gerados em uma tabela do Lakehouse. O atalho de otimização de tabela funciona abrindo um notebook com o trabalho do Spark que compactaria pequenos arquivos de streaming na tabela do Lakehouse de destino. |
novembrod e 2023 | Criar uma conexão com a nuvem no Eventstream | Simplificamos o processo de estabelecimento de conexões de nuvem com seus serviços do Azure no Eventstream. Ao adicionar um recurso do Azure, como o Hub IoT do Azure e os Hubs de Eventos do Azure, ao seu Eventstream, agora é possível criar a conexão do Azure com a nuvem e inserir as credenciais do recurso do Azure diretamente no Eventstream. Esse aprimoramento melhora significativamente o processo de adicionar novas fontes de dados ao seu Eventstream, economizando tempo e esforço. |
novembrod e 2023 | Obter Dados em Análise em Tempo Real: uma experiência nova e aprimorada | A nova experiência Obter Dados simplifica o processo de ingestão de dados no seu banco de dados KQL. |
Outubro de 2023 | Conexões expandidas de aplicativo personalizado | As novas conexões de aplicativo personalizado fornecem mais flexibilidade quando se trata de trazer seus fluxos de dados para o Eventstream. |
Outubro de 2023 | UX aprimorada no processador de eventos | Os novos aprimoramentos de UX no processador de eventos sem código fornecem uma experiência intuitiva, permitindo que você adicione ou exclua facilmente operações na tela. |
Outubro de 2023 | Código de Exemplo e Pontos de Extremidade do Eventstream Kafka | O recurso Aplicativo Personalizado tem novos pontos de extremidade em origens e destinos, incluindo exemplos de código Java para sua conveniência. Basta adicioná-lo ao seu aplicativo e você poderá transmitir seu evento em tempo real para o Eventstream. |
Outubro de 2023 | Aprimoramentos de UX do editor de processamento de eventos | Os aprimoramentos recentes de UX introduzem um modo de tela inteira, fornecendo um espaço de trabalho mais espaçoso para projetar seus fluxos de trabalho de processamento de dados. A inserção e a exclusão de operações de fluxo de dados tornaram-se mais intuitivas, tornando mais fácil arrastar e soltar e conectar suas transformações de dados. |
Outubro de 2023 | Aprimoramentos do algoritmo de dimensionamento automático do Banco de Dados KQL | Os usuários não precisam se preocupar com quantos recursos são necessários para dar suporte a suas cargas de trabalho em um banco de dados KQL. O Banco de Dados KQL tem um algoritmo sofisticado de dimensionamento automático, multidimensional e integrado. Recentemente, implementamos algumas otimizações que tornam algumas análises de séries temporais mais eficientes. |
Outubro de 2023 | Entendendo a Capacidade do BD KQL do Fabric | Saiba mais sobre como um banco de dados de KQL é cobrado no mundo SaaS do Microsoft Fabric. |
Setembro de 2023 | Atalho do OneLake para tabelas delta do BD KQL | Agora você pode criar um atalho do BD KQL para tabelas delta no OneLake, permitindo consultas de dados no local. Agora você consulta as tabelas delta em seu Lakehouse ou Warehouse diretamente do BD KQL. |
Setembro de 2023 | Modelar e Consultar os dados como grafos utilizando a KQL | A Linguagem de Consulta Kusto (KQL) agora permite modelar e consultar dados como grafos. Esse recurso está atualmente em preview. Saiba mais em Introdução à semântica de grafo no KQL e em Operadores e funções do Graph. |
Setembro de 2023 | Conecte-se facilmente ao Banco de Dados de KQL a partir do Power BI desktop | O Power BI desktop lançou duas novas maneiras de se conectar facilmente a um banco de dados KQL, no diálogo Obter Dados e nos menus hub de dados do OneLake. |
Setembro de 2023 | Eventstream agora tem suporte para cadeias de conexão no formato AMQP para ingestão de dados | A sigla AMQP representa Advanced Message Queuing Protocol, um protocolo que suporta uma ampla gama de padrões de mensagens. No Eventstream, você pode agora criar uma origem ou destino de Aplicativo Personalizado e selecionar um cadeia de conexão no formato AMQP para ingerir dados no Fabric ou consumir os dados do Fabric. |
Setembro de 2023 | O Eventstream dá suporte à ingestão de dados do Hub IoT do Azure | O Hub IoT do Azure é uma solução hospedada na nuvem que fornece canais de comunicação seguros para enviar e receber dados de dispositivos de IoT. No Eventstream, você pode agora transmitir seus dados do Hub IoT do Azure para o Fabric e realizar processamento em tempo real antes de armazená-lo em um Banco de Dados Kusto ou Lakehouse. |
Setembro de 2023 | Compartilhamento de dados em tempo real no Microsoft Fabric | Um atalho de banco de dados em Inteligência em Tempo real é uma referência incorporada em um banco de dados KQL a um banco de dados de origem no Azure Data Explorer (ADX), permitindo o compartilhamento de dados no local. O comportamento exibido pelo atalho do banco de dados é semelhante ao de um banco de dados seguidor do Azure Data Explorer. |
Agosto de 2023 | Otimização de provisionamento | O processo de provisionamento do Banco de Dados KQL foi otimizado. Agora você pode criar um banco de dados KQL em alguns segundos. |
Agosto de 2023 | Suporte ao Banco de Dados KQL para Python embutido | O Banco de dados KQL do Fabric dá suporte à execução de código Python inserido na linguagem de consulta Kusto (KQL) usando o plug-in python(). O plug-in está desabilitado por padrão. Antes de começar, habilite o plug-in do Python no banco de dados KQL. |
Julho de 2023 | Eventstreams do Microsoft Fabric: gerando insights em tempo real com Python, KQL e Power BI | Os fluxos de eventos do Microsoft Fabric são um serviço de ingestão e transformação de dados de alta taxa de transferência e baixa latência. |
Julho de 2023 | Transmita eventos em tempo real para o Microsoft Fabric com os fluxos de eventos de um aplicativo personalizado | Os fluxos de eventos em Inteligência em Tempo real são uma plataforma centralizada no Fabric, permitindo capturar, transformar e rotear eventos em tempo real para vários destinos sem esforço, tudo isso através de uma experiência amigável e sem código. |
Junho de 2023 | Revelando a Oportunidade Épica: um jogo divertido para explorar a Inteligência Em Tempo Real | Como parte da 2ª temporada da Kusto Detective Agency, estamos entusiasmados em introduzir uma oportunidade épica para todos os investigadores e entusiastas de dados aprenderem sobre o novo portfólio de forma divertida e envolvente. Recrutando agora em https://detective.kusto.io/! |
Maio de 2023 | Novidades no Kusto – Build 2023! | Anunciando o Análise em Tempo Real do Synapse no Microsoft Fabric! |
Amostras e orientações de Inteligência em Tempo Real
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Desativação do painel de métricas de uso do portal de administração do Power BI | A partir de julho de 2024, o painel de métricas de uso do portal de administração do Power BI foi removido. Agora, há suporte imediato para insights comparáveis por meio do espaço de trabalho de monitoramento de administrador (preview). O espaço de trabalho Monitoramento de administrador fornece vários relatórios e modelos semânticos do Power BI, incluindo o relatório Uso e Adoção de Recursos, que se concentra no inventário de locatários de malha e no monitoramento de atividades de auditoria. |
Maio de 2024 | Alertas e ações sobre os dados no Hub em Tempo Real | O novo Hub em Tempo Real e o Data Activator do Microsoft Fabric fornecem uma experiência no-code para a execução automática de ações quando padrões ou condições são detectados em dados alterados e incorporados ao Hub em Tempo Real para realizar a criação de alertas sempre acessível. |
Maio de 2024 | Uso de APIs com a Inteligência em Tempo Real do Fabric: Eventhouse e BD KQL | Saiba mais sobre como criar, atualizar e excluir itens no Fabric com as APIs do KQL ao acessar o plano de dados de um recurso. |
Maio de 2024 | Conexão e streaming de eventos com a experiência Obter eventos | A experiência Obter eventos simplifica o processo de navegação e de pesquisa para origens e fluxos. |
Maio de 2024 | Aquisição de Dados em Tempo Real de novas origens com o Eventstream avançado | Saiba como realizar a conexão com novas origens no Eventstream. Comece com a criação de um Eventstream e com a escolha de “Funcionalidades Avançadas (preview)”. |
Março de 2024 | Procurar recursos do Azure com Obter Dados | Saiba como procurar e conectar a todos os recursos do Azure com a funcionalidade 'procurar Azure' em Obter Dados. Você pode procurar recursos do Azure e conectar facilmente aos recursos do Synapse, do armazenamento de blob ou do ADLS Gen2. |
novembrod e 2023 | Link semântico: validação de dados usando Great Expectations | A Great Expectations Open Source (GX OSS) é uma biblioteca do Python popular que fornece uma estrutura para descrever e validar o estado aceitável dos dados. Agora, após a recente integração do vínculo semântico do Microsoft Fabric, a GX pode acessar modelos semânticos, permitindo ainda mais a colaboração contínua entre cientistas de dados e analistas de negócios. |
novembrod e 2023 | Explorar a transformação de dados no Eventstream para integração de Banco de Dados KQL | Aprofunde-se em um cenário prático usando dados de compartilhamento de bicicletas do mundo real e aprenda a calcular o número de bicicletas alugadas a cada minuto em cada rua, usando o poderoso processador de eventos da Eventstream, dominando transformações de dados em tempo real e direcionando sem esforço os dados processados para seu Banco de Dados KQL. |
Outubro de 2023 | Do RabbitMQ aos relatórios do PowerBI com a Análise em Tempo Real do Microsoft Fabric | Um passo a passo de um cenário de ponta a ponta que envia dados do RabbitMQ para um Banco de Dados KQL no Microsoft Fabric. |
Outubro de 2023 | Transmitir Dados do Hub IoT do Azure para o Fabric Eventstream para Alertas de Email | Uma demonstração do uso do Fabric Eventstream para ingerir e transformar diretamente os fluxos de dados em tempo real antes que eles cheguem a vários destinos do Fabric, como Lakehouse, Banco de Dados KQL e Reflex. Em seguida, configure alertas de email no Reflex com gatilhos do Data Activator. |
Setembro de 2023 | Galeria de amostras de Inteligência em Tempo Real | Agora, a Inteligência em Tempo Real oferece uma galeria de amostras abrangente com vários conjuntos de dados, permitindo explorar, aprender e começar rapidamente. Acesse as amostras selecionando Usar uma amostra da página inicial da experiência de Inteligência em Tempo Real. |
Setembro de 2023 | Início Rápido: enviando dados para Inteligência em Tempo Real no Fabric a partir dos Ecossistemas Apache Kafka usando Java | Saiba como enviar dados do Kafka para Inteligência em Tempo Real no Fabric. |
Junho de 2023 | De dados brutos a insights: como ingerir dados de Hubs de Eventos do Azure em um banco de dados KQL | Saiba mais sobre a integração entre Hubs de Eventos do Azure e seu banco de dados KQL. |
Junho de 2023 | De dados brutos a insights: instruções sobre como ingerir dados de fluxos de eventos em um banco de dados KQL | Saiba mais sobre a integração entre fluxos de eventos e um banco de dados KQL, que fazem parte da experiência de Inteligência em Tempo Real. |
Junho de 2023 | Descobrir as melhores maneiras de obter dados em um banco de dados KQL | Este blog aborda diferentes opções para levar dados para um banco de dados KQL. |
Junho de 2023 | Introdução à exploração dos seus dados com o KQL – uma ferramenta criada para análise de dados de escala petabyte | Neste blog, concentramo-nos nas diferentes maneiras de consultar os dados na Inteligência em Tempo Real. |
Maio de 2023 | Ingerir, transformar e rotear eventos em tempo real com fluxos de eventos do Microsoft Fabric | Agora você pode ingerir, capturar, transformar e rotear eventos em tempo real para vários destinos no Microsoft Fabric com uma experiência sem código usando fluxos de eventos do Microsoft Fabric. |
Principais recursos do Microsoft Fabric
Notícias e comunicados de recursos arquivados essenciais à experiência do Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Maio de 2024 | Links Privados do Microsoft Fabric em GA (disponibilidade geral) | O Azure Private Link para Microsoft Fabric protege o acesso aos seus dados confidenciais no Microsoft Fabric fornecendo isolamento de rede e aplicando os controles necessários ao tráfego de rede de entrada. Para obter mais informações, confira Announcing General Availability of Fabric Private Links. |
Maio de 2024 | Acesso confiável ao espaço de trabalho em GA (disponibilidade geral) | Agora, o acesso confiável ao espaço de trabalho nos atalhos do OneLake está disponível ao público em geral. Agora você pode criar pipelines de dados para acessar suas contas do Azure Data Lake Storage Gen2 (ADLS Gen2) habilitadas para firewall usando acesso confiável ao espaço de trabalho (versão prévia) em seus pipelines de dados do Fabric. Use a identidade do espaço de trabalho para estabelecer uma conexão segura e ininterrupta entre o Fabric e suas contas de armazenamento. O acesso confiável ao espaço de trabalho também habilita o acesso seguro e sem complicações a contas de armazenamento do ADLS Gen2 usando atalhos do OneLake no Fabric. |
Maio de 2024 | Passo a passo das APIs do Fabric | Saiba mais sobre como usar APIs REST no Fabric, incluindo a criação de espaços de trabalho, a adição de permissões, o descarte, a criação e a execução de pipelines de dados, e as ações de pausar e retomar atividades do Fabric usando a API de gerenciamento. |
Maio de 2024 | Pontos de extremidade privados gerenciados em GA (disponibilidade geral) | Os pontos de extremidade privados gerenciados para Microsoft Fabric permitem conexões seguras por redes virtuais gerenciadas para fontes de dados que estão atrás de um firewall ou que não podem ser acessadas pela Internet pública. Para obter mais informações, confira Announcing General Availability of Fabric Private Links, Trusted Workspace Access, and Managed Private Endpoints. |
Maio de 2024 | Fabric UX System | O Fabric UX System representa um avanço em termos de consistência e de extensibilidade no design do Microsoft Fabric. |
Maio de 2024 | Principais APIs REST do Microsoft Fabric | As principais APIs do Microsoft Fabric agora estão disponíveis para o público geral. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade. |
Maio de 2024 | Pré-visualização das APIs de Administração do Microsoft Fabric | As APIs de administração do Fabric são projetadas para simplificar as tarefas administrativas. Agora, você pode gerenciar o Power BI e os novos itens do Fabric (anteriormente chamados de artefatos) usando o mesmo conjunto de APIs. Antes dessa melhoria, você tinha que navegar usando duas APIs diferentes: uma para itens do Power BI e outra para novos itens do Fabric. |
Maio de 2024 | Kit de desenvolvimento de carga de trabalho do Fabric (versão prévia) | O kit de desenvolvimento de carga de trabalho do Microsoft Fabric se estende a cargas de trabalho adicionais e oferece um kit de ferramentas de desenvolvedor robusto para projetar, desenvolver e interoperar com o Microsoft Fabric usando SDKs de front-end e APIs REST de back-end. |
Maio de 2024 | Introdução ao compartilhamento de dados externos (versão prévia) | O compartilhamento de dados externos (versão prévia) é um novo recurso que permite que os usuários do Fabric compartilhem dados de dentro de seus locatários do Fabric com usuários em outro locatário do Fabric. |
Maio de 2024 | Fluxos de tarefas no Microsoft Fabric (versão prévia) | A versão prévia de fluxos de tarefas no Microsoft Fabric está habilitada para todos os usuários do Microsoft Fabric. Com os fluxos de tarefas do Fabric, ao criar um projeto de dados, você não precisa mais usar um quadro de comunicações para esboçar as diferentes partes do projeto e suas inter-relações. Em vez disso, você pode usar um fluxo de tarefas para criar e trazer essas informações importantes para o próprio projeto. |
Maio de 2024 | Power BI: assinaturas, licenças e avaliações | Informações sobre o planejamento de implementação do Power BI e as principais considerações para planejar assinaturas, licenças e avaliações do Power BI e do Fabric. |
Maio de 2024 | Inscreva-se no Microsoft Build: Microsoft Fabric Cloud Skills Challenge | A partir de 21 de maio de 2024, inscreva-se no Microsoft Build: Microsoft Fabric Cloud Skills Challenge e prepare-se para o Exame DP-600 e qualifique-se para a certificação Fabric Analytics Engineer Associate. |
Março de 2024 | O Microsoft Fabric agora é compatível com HIPAA | Temos o prazer de anunciar que o Microsoft Fabric, nossa solução de análise tudo em um para empresas, obteve novas certificações para HIPAA e ISO 27017, ISO 27018, ISO 27001, ISO 27701. |
Março de 2024 | Pasta no espaço de trabalho (preview) | Como uma unidade organizacional no espaço de trabalho, a pasta aborda esse problema encontrado fornecendo uma estrutura hierárquica para organizar e gerenciar seus itens. Para obter mais informações, confira Criar pastas em espaços de trabalho (preview). |
Março de 2024 | Preços do Copilot no Fabric: um exemplo completo | O Copilot no Fabric iniciará a cobrança em 1.º de março de 2024 como parte da sua capacidade atual do Power BI Premium ou Fabric. Saiba como o uso do Copilot no Fabric é calculado. |
Março de 2024 | Atualizações da plataforma de capacidade para pausa/retomada, métricas de capacidade, itens virtualizados e espaços de trabalho para o Copilot e Gateways VNet | A plataforma de capacidade do Fabric agora é compatível com relatórios de uso para pausa/retomada, itens virtualizados e espaços de trabalho dando suporte ao Copilot, às métricas de capacidade e ao Gateway VNet. Para ver mais informações, leia Atualização da capacidade da plataforma para retomar a pausa e novas métricas de capacidade para Copilot e Gateways VNet. |
Fevereiro de 2024 | Pontos de extremidade privados gerenciados para o Microsoft Fabric (preview) | Os pontos de extremidade privados gerenciados para Microsoft Fabric (preview) permitem conexões seguras com fontes de dados que estão atrás de um firewall ou não podem ser acessadas pela Internet pública. Os espaços de trabalho com pontos de extremidade privados gerenciados têm isolamento de rede por meio de uma rede virtual gerenciada criada pelo Microsoft Fabric. Para obter mais informações, consulte Introdução a pontos de extremidade privados gerenciados para o Microsoft Fabric em preview. |
Fevereiro de 2024 | Suporte de Link Privado do Azure para Microsoft Fabric (preview) | O Azure Private Link para Microsoft Fabric protege o acesso aos seus dados confidenciais no Microsoft Fabric fornecendo isolamento de rede e aplicando os controles necessários ao tráfego de rede de entrada. Para obter mais informações, confira Announcing Azure Private Link Support for Microsoft Fabric in Preview. |
Fevereiro de 2024 | Domínios no OneLake (preview) | Os domínios no OneLake ajudam você a organizar seus dados em uma malha lógica de dados, permitindo a governança federada e otimizando para as necessidades dos negócios. Agora você pode criar subdomínios, domínios padrão para usuários e mover espaços de trabalho entre domínios. Para obter mais informações, confira Domínios do Fabric. |
Fevereiro de 2024 | Barra de navegação do Fabric personalizável | Agora você pode personalizar seus pontos de entrada preferidos na barra de navegação, incluindo fixar pontos de entrada comuns e desafixar opções raramente usadas. |
Fevereiro de 2024 | Filtros persistentes no espaço de trabalho | Agora você pode salvar filtros selecionados no modo de exibição de lista do espaço de trabalho e eles serão aplicados automaticamente na próxima vez que você abrir o espaço de trabalho. |
Dezembro de 2023 | Pré-visualização das APIs de Administração do Microsoft Fabric | As APIs de administração do Fabric são projetadas para simplificar as tarefas administrativas. O conjunto inicial de APIs de Administração do Fabric é adaptado para simplificar a descoberta de espaços de trabalho, itens do Fabric e detalhes de acesso do usuário. |
Dezembro de 2023 | Alterações de retenção de espaço de trabalho no Fabric e no Power BI | O período de retenção para espaços de trabalho colaborativos é configurável de 7 a 90 dias. A configuração de retenção do espaço de trabalho é habilitada por padrão e o período de retenção padrão será de sete dias. |
Novembro de 2023 | As cargas de trabalho do Fabric estão agora em disponibilidade geral! | O Microsoft Fabric está agora em disponibilidade geral! O Data Warehouse do Synapse do Microsoft Fabric, a Engenharia de Dados e Ciência de Dados, a Análise em Tempo Real, o Data Factory, o OneLake e a plataforma Fabric estão com disponibilidade geral. |
novembrod e 2023 | Prévia das APIs de Usuário do Microsoft Fabric | Temos o prazer de anunciar a versão prévia das APIs de Usuário do Microsoft Fabric. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade. |
Outubro de 2023 | Ícones de tipo de item | Nossa equipe de design concluiu uma reformulação dos ícones de tipo de item em toda a plataforma para melhorar a análise visual. |
Outubro de 2023 | Filtragem Baseada em Palavras-Chave das Definições do Locatário | O Microsoft Fabric apresentou recentemente a filtragem baseada em palavras-chave para a página de configurações do locatário no portal do administrador. |
Setembro de 2023 | Hub de monitoramento: opções de coluna | As opções de coluna dentro do hub de monitoramento fornecem aos usuários uma experiência de personalização melhor e mais espaço para operar. |
Setembro de 2023 | Explorador de Arquivos do OneLake v1.0.10 | O explorador de arquivos do OneLake sincroniza automaticamente todos os itens do Microsoft OneLake aos quais você tem acesso no Explorador de Arquivos do Windows. Com a versão mais recente, você pode alternar sem problemas entre o uso do aplicativo explorador de arquivos OneLake e o portal Web do Fabric. Você também pode clicar com o botão direito no ícone do OneLake na área de notificação do Windows e selecionar as Operações de Diagnóstico para a exibição de logs do lado do cliente. Saiba mais sobre o acesso fácil para abrir espaços de trabalho e itens online. |
Agosto de 2023 | Melhoria da navegação multitarefa | Agora, todos os itens do Fabric são abertos em uma única guia do navegador na painel de navegação, mesmo no caso de atualização da página. Isso garante que você possa atualizar a página sem a preocupação de perder o contexto. |
Agosto de 2023 | Suporte do Hub de Monitoramento para opções de coluna personalizadas | Atualizamos o Hub de Monitoramento para permitir que os usuários personalizem colunas específicas da atividade. Agora você tem a flexibilidade de exibir colunas relevantes para as atividades nas quais você está focado. |
Julho de 2023 | Nova atualização do explorador de arquivos do OneLake com suporte para alternar as contas organizacionais | Com o Explorador de arquivos do OneLake v1.0.9.0, é simples escolher e alternar entre diferentes contas da ID do Microsoft Entra (anteriormente Azure Active Directory). |
Julho de 2023 | Painel de ajuda | O painel Ajuda tem reconhecimento de recursos e exibe artigos sobre as ações e os recursos disponíveis na tela atual do Fabric. Para obter mais informações, confira o painel de Ajuda do Fabric na atualização mensal do Fabric. |
Integração contínua e entrega contínua (CI/CD) no Microsoft Fabric
Esta seção inclui diretrizes e atualizações de documentação do processo de desenvolvimento, ferramentas e controle de versão no espaço de trabalho do Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Apresentando novos recursos de branches na integração do Fabric Git | Os novos recursos de branch na integração entre o Fabric e o Git incluem um painel Controle do código-fonte redesenhado, a capacidade de criar rapidamente um novo espaço de trabalho e branches conectados e branches contextuais relacionadas para localizar conteúdo relacionado ao espaço de trabalho atual. |
Maio de 2024 | APIs de pipelines de implantação para CI/CD | As APIs de pipelines de implantação do Fabric foram introduzidas, começando com a API 'Deploy', que permitirá implantar todo o espaço de trabalho ou apenas itens selecionados. |
Maio de 2024 | Novos itens de CI/CD do Fabric | Pipelines de dados, Warehouse, Spark e trabalhos do Spark agora estão disponíveis para CI/CD em pipelines de integração e implantação do git. |
Abril de 2024 | Introdução ao acesso confiável a espaço de trabalho em pipelines de dados do Fabric | Crie pipelines de dados no Fabric para acessar suas contas de armazenamento ADLS Gen2 habilitadas para firewall com facilidade e segurança. Esse recurso aproveita a identidade do espaço de trabalho para estabelecer uma conexão segura e ininterrupta entre o Fabric e suas contas de armazenamento. |
Março de 2024 | Preview de CI/CD para pipelines de dados do Fabric | A integração do Git e a integração de pipelines de implantação incorporados com pipelines de dados do Data Factory estão agora em preview. Para obter mais informações, confira Data Factory Adds CI/CD to Fabric Data Pipelines. |
Março de 2024 | Atualizações de arquivos do sistema para integração com o Git | Os arquivos do sistema item.metadata.json e item.config.json gerados automaticamente foram consolidados em um único arquivo do sistema .platform . Para obter mais informações, confira Arquivos de sistema geradas automaticamente. |
Fevereiro de 2024 | APIs REST para integração com o Fabric Git | As APIs REST para integração do Fabric Git permitem a incorporação perfeita da integração do Fabric Git no pipeline de CI/CD de ponta a ponta da sua equipe, eliminando a necessidade de acionamento manual de ações do Fabric. |
Fevereiro de 2024 | Delegação para configurações de integração do Git | Para permitir mais controle sobre as configurações relacionadas ao Git, um administrador de locatários agora pode delegar essas configurações a administradores de capacidade e administradores de espaço de trabalho por meio do O que é o portal de administração? |
novembrod e 2023 | APIs de usuário do Microsoft Fabric | As APIs de usuário do Microsoft Fabric agora estão disponíveis. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade. |
novembrod e 2023 | Notebook na Versão Prévia do Pipeline de Implantação | Agora você também pode usar notebooks para implantar seu código em diferentes ambientes, como desenvolvimento, teste e produção. Você também pode usar regras de implantação para personalizar o comportamento dos notebooks quando eles são implantados, como alterar o Lakehouse padrão de um Notebook. Comece com pipelines de implantação e o Notebook aparecerá automaticamente no conteúdo de implantação. |
novembrod e 2023 | Versão prévia da integração do Git com o notebook | Os notebooks do Fabric agora oferecem integração com o Git para controle do código-fonte usando o Azure DevOps. Ele permite aos usuários controlar as versões do código do notebook com facilidade, bem como gerenciar os Git branches aproveitando as funções do Fabric Git e do Azure DevOps. |
Novembro de 2023 | Versão prévia da API REST do notebook | Com as APIs Públicas REST para os itens do Notebook, os engenheiros de dados/cientistas de dados podem automatizar seus pipelines e estabelecer a CI/CD de forma conveniente e eficiente. A API Pública Restful do notebook pode facilitar aos usuários gerenciar e manipular itens do notebook do Fabric e integrar o notebook a outras ferramentas e sistemas. |
novembrod e 2023 | Suporte do Lakehouse para pipelines de implantação e integração do Git (preview) | O item do Lakehouse agora se integra às capacidades de gerenciamento do ciclo de vida no Microsoft Fabric, fornecendo uma colaboração padronizada entre todos os membros da equipe de desenvolvimento durante toda a vida útil do produto. O gerenciamento do ciclo de vida facilita um processo eficaz de versão e lançamento do produto, fornecendo continuamente recursos e correções de bugs em vários ambientes. |
novembrod e 2023 | SQLPackage com suporte para o Fabric Warehouse | O SQLPackage agora dá suporte para o Fabric Warehouse. O SqlPackage é um utilitário de linha de comando que automatiza as seguintes tarefas de desenvolvimento de banco de dados, expondo algumas das APIs públicas do Estrutura do Aplicativo da Camada de Dados (DacFx). A ferramenta linha de comando SqlPackage permite que você especifique essas ações com propriedades e parâmetros específicos da ação. |
Setembro de 2023 | Suporte a Projetos SQL para Warehouse no Microsoft Fabric | O Data Warehouse do Microsoft Fabric agora é suportado na extensão de Projetos de Banco de Dados SQL disponível dentro do Azure Data Studio e doVisual Studio Code. |
Setembro de 2023 | Suporte ao sistema de arquivos de notebook na extensão VS Code do Synapse | A extensão VS Code do Synapse agora aceita o Sistema de Arquivos de notebook para Engenharia de Dados e Ciência de Dados no Microsoft Fabric. A extensão do VS Code do Synapse capacita os usuários a desenvolver seus itens de notebook diretamente no ambiente do Visual Studio Code. |
Setembro de 2023 | Os pipelines de implantação agora suportam warehouses | Os pipelines de implantação permitem que os criadores desenvolvam e testem o conteúdo no serviço antes que ele chegue aos usuários. Os tipos de conteúdo suportados incluem relatórios, relatórios paginados, painéis, modelos semânticos, fluxos de dados e agora warehouses. Saiba como implantar conteúdo programaticamente utilizando APIs REST e DevOps. |
Setembro de 2023 | Integração do Git com relatórios paginados no Power BI | Você pode agora publicar um relatório paginado do Power BI e mantê-lo sincronizado com seu espaço de trabalho do Git. Os desenvolvedores podem aplicar seus processos de desenvolvimento, ferramentas e práticas recomendadas. |
Agosto de 2023 | Apresentando o adaptador dbt do Data Warehouse do Synapse no Microsoft Fabric | O adaptador dbt permite que você conecte e transforme dados em Data Warehouse do Synapse. A Ferramenta de Build de Dados (dbt) é uma estrutura de software livre que simplifica a transformação dos dados e a engenharia de análise. |
Maio de 2023 | Introdução à integração do git no Microsoft Fabric para gerenciamento contínuo de controle do código-fonte | Durante o desenvolvimento no Fabric, os desenvolvedores podem efetuar backup e a versão do trabalho, reverter conforme necessário, colaborar ou trabalhar no isolamento usando GIT branches. Leia mais sobre como conectar o espaço de trabalho a um repositório do Azure. |
Integração contínua e entrega contínua (CI/CD) (exemplos)
Mês | Recurso | Saiba mais |
---|---|---|
Junho de 2024 | Introdução ao desenvolvimento isolado usando um Espaço de Trabalho Privado | Neste passo a passo, falaremos sobre como configurar o git para um espaço de trabalho privado de um branch principal, que está conectado a um espaço de trabalho de equipe de desenvolvimento compartilhado e, em seguida, como confirmar alterações do espaço de trabalho privado no branch principal do espaço de trabalho compartilhado. |
Março de 2024 | Gerenciamento do ciclo de vida do Microsoft Fabric – Introdução aos pipelines de integração e implantação do Git | Aprenda os fundamentos do gerenciamento do ciclo de vida por meio de um cenário de demonstração e explore o que é o gerenciamento do ciclo de vida e o que ele representa no Fabric. |
Ativador de Dados do Fabric
Esta seção resume os novos recursos e capacidades arquivados do Data Activator no Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Outubro de 2023 | Comunicados sobre a versão prévia do Data Activator | Temos o prazer de anunciar que o Data Activator está agora em preview e está habilitado para todos os usuários existentes no Microsoft Fabric. |
Agosto de 2023 | Experiência de visualização atualizada para design de gatilho | Estamos trabalhando em uma nova experiência para criar gatilhos e agora ela está disponível em nossa versão prévia! Agora você vê três cartões em cada gatilho: Selecionar, Detectar e Agir. |
Maio de 2023 | Como conduzir ações dos seus dados com o Ativador de Dados | O Ativador de Dados é uma nova experiência sem código do Microsoft Fabric que capacita o analista de negócios a conduzir ações automaticamente dos seus dados. Para saber mais, inscreva-se na visualização limitada do Ativador de Dados. |
Fabric e Microsoft 365
Esta seção inclui artigos e comunicados sobre a integração do Microsoft Fabric com o Microsoft Graph e o Microsoft 365.
Mês | Recurso | Saiba mais |
---|---|---|
Março de 2024 | Analisar tabelas do Dataverse do Microsoft Fabric | Ao criar um atalho no Fabric, agora você verá uma opção para o Dataverse. Ao escolher esse tipo de atalho e especificar os detalhes do ambiente do Dataverse, você pode ver e trabalhar rapidamente com as tabelas desse ambiente. |
novembrod e 2023 | Fabric + dados do Microsoft 365: melhores juntos | O Microsoft Graph é o gateway para dados e inteligência em Microsoft 365. A Integração de Dados do Microsoft 365 para Microsoft Fabric permite que você gerencie seu Microsoft 365 junto com suas outras fontes de dados em um só lugar com um conjunto de experiências analíticas. |
novembrod e 2023 | O conector do Microsoft 365 agora dá suporte à ingestão de dados no seu Lakehouse (preview) | O conector do Microsoft 365 agora dá suporte à ingestão de dados nas tabelas do Lakehouse. |
Outubro de 2023 | O Microsoft OneLake adiciona suporte a atalhos ao Power Platform e ao Dynamics 365 | Agora você pode Criar atalhos diretamente para seus dados do Dynamics 365 e do Power Platform no Dataverse e analisá-los com o Microsoft Fabric juntamente com o restante dos dados do OneLake. Não há necessidade de exportar dados, criar pipelines ETL ou utilizar ferramentas de integração de parceiros. |
Maio de 2023 | Guia passo a passo para habilitar o Microsoft Fabric na conta de desenvolvedor do Microsoft 365 | Este blog analisa como habilitar o Microsoft Fabric com uma Conta de Desenvolvedor do Microsoft 365 e a Avaliação Gratuita do Fabric. |
Maio de 2023 | Microsoft 365 Data + Microsoft Fabric são melhor juntos | A Integração de Dados do Microsoft 365 para Microsoft Fabric permite que você gerencie seu Microsoft 365 junto com suas outras fontes de dados em um só lugar com um conjunto de experiências analíticas. |
Migração
Esta seção inclui diretrizes e atualizações de documentação sobre migração do Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Fevereiro de 2024 | Mapeando pools de SQL dedicados do Azure Synapse para computação de data warehouse do Fabric | Leia para obter orientação sobre o mapeamento de Unidades de Data Warehouse (DWU) do pool SQL dedicado do Azure Synapse Analytics para um número equivalente aproximado de Unidades de Capacidade de Malha (CU). |
novembrod e 2023 | Migrar de pools dedicados de SQL do Azure Synapse | Um guia detalhado com um runbook de migração está disponível para migrações dos pools de SQL dedicados do Data Warehouse do Azure Synapse para o Microsoft Fabric. |
novembrod e 2023 | Migrando do Azure Synapse Spark para o Fabric | Um conjunto detalhado de artigos sobre a migração do Spark do Azure Synapse para o Microsoft Fabric, incluindo um processo de migração que pode envolver vários cenários e fases. |
Julho de 2023 | Alterando o jogo do Fabric – Integração do OneLake | Esta postagem no blog aborda integrações do OneLake e vários cenários para ingerir os dados dentro do Fabric OneLake, incluindo ADLS, ADF, OneLake Explorer, Databricks. |
Junho de 2023 | Alterando o jogo do Microsoft Fabric: Exportando dados e criando o Lakehouse | Esta postagem no blog aborda o cenário de exportação de dados do Banco de dados SQL do Azure para o OneLake. |
Junho de 2023 | Copiar os dados no SQL do Azure em escala com o Microsoft Fabric | Você sabia que pode usar o Microsoft Fabric para copiar dados em escala de fontes de dados com suporte para SQL do Azure Banco de Dados ou Instância Gerenciada do SQL do Azure em poucos minutos? |
Junho de 2023 | Traga seus dados do mainframe DB2 z/OS para o Microsoft Fabric | Neste blog, examinamos a conveniência e a facilidade de abrir o DB2 nos dados z/SO no Microsoft Fabric. |
Monitor
Esta seção inclui diretrizes e atualizações de documentação sobre como monitorar a capacidade e o uso do Microsoft Fabric, incluindo o Hub de monitoramento.
Mês | Recurso | Saiba mais |
---|---|---|
Março de 2024 | Compatibilidade com métricas de capacidade para Pausar e Retomar | As métricas de capacidade do Fabric foram atualizadas com novos eventos do sistema e lógica de reconciliação para simplificar a análise de capacidades pausadas. O Fabric Pause and Resume é um recurso de gerenciamento de capacidade que permite pausar as capacidades de SKU F para gerenciar custos. Quando sua capacidade não estiver operacional, você poderá pausá-la para permitir a redução de custos e, mais tarde, quando quiser retomar o trabalho em sua capacidade, poderá reativá-la. |
Outubro de 2023 | Limitação e suavização no Data Warehouse do Synapse | Um novo artigo ajuda você a entender a limitação da capacidade do Fabric. A limitação ocorre quando a capacidade de um locatário consome mais recursos de capacidade do que comprou ao longo de um período. |
Setembro de 2023 | Hub de monitoramento - opções de coluna | Os usuários podem selecionar e reordenar as colunas conforme suas necessidades personalizadas no Hub de Monitoramento. |
Setembro de 2023 | Capacidades do Fabric – Tudo o que você precisa saber sobre as novidades e o que está por vir | Saiba mais sobre as melhorias que estamos fazendo na plataforma de Gerenciamento da Capacidade do Fabric para usuários do Fabric e Power BI. |
Setembro de 2023 | Métricas de capacidade do Microsoft Fabric | O aplicativo Métricas de Capacidade do Microsoft Fabric está disponível na Fonte do Aplicativo para uma variedade de relatórios de cobrança e utilização. |
Agosto de 2023 | Suporte do Hub de Monitoramento para opções de coluna personalizadas | O Hub de Monitoramento para permitir que os usuários personalizem colunas específicas da atividade. Agora você tem a flexibilidade de exibir colunas relevantes para as atividades nas quais você está focado. |
Maio de 2023 | Métricas de capacidade no Microsoft Fabric | Saiba mais sobre as capacidades de computação universal e os recursos de governança de métricas de capacidade do Fabric que os administradores podem usar para monitorarem o uso e tomarem decisões de expansão controladas por dados. |
Microsoft Purview
Esta seção resume os comunicados arquivados sobre recursos de governança e conformidade com o Microsoft Purview no Microsoft Fabric. Saiba mais sobre a Proteção de informações no Microsoft Fabric.
Mês | Recurso | Saiba mais |
---|---|---|
Maio de 2023 | Administração, Segurança e Governança no Microsoft Fabric | O Microsoft Fabric fornece funcionalidades internas de governança e conformidade de nível empresarial, da plataforma Microsoft Purview. |
Conteúdo relacionado
- Blog de Práticas Recomendadas de Modernização e Ativos Reusáveis
- Blog do Azure Data Explorer
- Introdução ao Microsoft Fabric
- Roteiros de Aprendizagem do Treinamento Microsoft para Fabric
- tutoriais de ponta a ponta no Microsoft Fabric.T
- Problemas Conhecidos do Fabric
- Blog do Microsoft Fabric
- Terminologia do Microsoft Fabric
- O que há de novo no Power BI?
- Novidades no Microsoft Fabric