Espelhando o Catálogo do Unity do Azure Databricks (versão prévia)

Muitas organizações hoje registram seus dados no Catálogo do Unity no Azure Databricks. Um catálogo espelhado do Unity no Fabric permite que o cliente leia dados gerenciados pelo catálogo do Unity a partir de cargas de trabalho do Fabric. O Azure Databricks e o Fabric são melhores juntos.

Para obter um tutorial sobre como configurar seu workspace do Azure Databricks para espelhar o Catálogo do Unity no Fabric, consulte Tutorial: Configurar bancos de dados espelhados do Microsoft Fabric do Azure Databricks (versão prévia).

Os bancos de dados espelhados no Fabric permitem que os usuários desfrutem de um produto altamente integrado, de ponta a ponta e fácil de usar, projetado para simplificar suas necessidades de análise. Você pode desfrutar de um produto fácil de usar projetado para simplificar suas necessidades de análise e criado para abertura e colaboração entre o Microsoft Fabric e o Azure Databricks,

Quais experiências de análise são criadas

Os catálogos espelhados são um item no Data Warehouse do Fabric distinto do ponto de extremidade de análise do Warehouse e do SQL.

Quando você espelha um Catálogo do Unity do Azure Databricks, o Fabric cria três itens:

Você pode acessar seus dados espelhados do Azure Databricks de várias maneiras:

  • Cada item espelhado do Azure Databricks tem um ponto de extremidade de análise SQL gerado automaticamente que fornece uma experiência analítica avançada criada pelo processo de espelhamento. Use comandos T-SQL para definir e consultar objetos de dados do ponto de extremidade de análise SQL somente leitura.
  • Use o Power BI com o modo Direct Lake para criar relatórios no item do Azure Databricks.

Sincronização de metadados

Quando você cria um novo banco de dados espelhado do Azure Databricks no Fabric, por padrão, a opção Sincronizar automaticamente alterações futuras do catálogo para o esquema selecionado é habilitada. As seguintes alterações de metadados são refletidas do workspace do Azure Databricks para o Fabric se a sincronização automática estiver habilitada:

  • Adição de esquemas a um catálogo.
  • Exclusão de esquemas de um catálogo.
  • Adição de tabelas a um esquema.
  • Exclusão de tabelas de um esquema.

Seleção de esquema/tabela:

  • Por padrão, todo o catálogo é selecionado quando o usuário adiciona o catálogo.
  • O usuário pode excluir determinadas tabelas dentro do esquema.
  • Desmarcar um esquema desmarca todas as tabelas dentro do esquema.
  • Se o usuário voltar e selecionar o esquema, todas as tabelas dentro do esquema serão selecionadas novamente.
  • O mesmo comportamento de seleção se aplica a esquemas em um catálogo.

Há outras condições de filtragem que são aplicadas a catálogos/esquemas/tabelas:

  • Exibições materializadas e tabelas de streaming não serão exibidas.
  • As tabelas externas que não dão suporte ao formato Delta não serão exibidas.