Importando e exportando dados do Dataverse

O Microsoft Dataverse é uma plataforma de dados SaaS que ajuda a criar e gerenciar facilmente os dados, os eventos e a lógica, além de gerar análises** e insights para oferecer suporte a aplicativos interconectados criados na plataforma do Dataverse. Os aplicativos incluem aplicativos de terceiros, como Dynamics 365 Sales, Service, Marketing, Customer Insights, Customer Journey Orchestration, bem como aplicativos e processos personalizados de terceiros, todos operando de maneira segura e compatível. O Dataverse, sendo um armazenamento poliglota em hiperescala, pode armazenar quaisquer tipos de dados (relacional, de arquivo, observacional e assim por diante) para todos os seus aplicativos transacionais e analíticos. Por isso, é a plataforma de dados para todos os produtos da Power Platform e aplicativos do Dynamics 365. O Dataverse é um elemento crítico da Microsoft Power Platform, suportando todos os dados, eventos, análises e processamento relacionado, além de gerar insights para criadores de aplicativos cidadãos e desenvolvedores profissionais para criar, armazenar e gerenciar dados de seus aplicativos.

Os dados exigidos por aplicativos e processos geralmente não se originam ou residem dentro dele Dataverse. A combinação de dados externos com o Dataverse é um componente essencial na criação de aplicativos, adicionando dados a aplicativos existentes e criando insights valiosos. Com a proliferação de big data e a multiplicação constante de tipos de fontes de dados, como IA, ML, IoT, comércio eletrônico, API da web, serviços, ERP e aplicativos de linha de negócios, os clientes precisam ser ágeis ao usar essa variedade de dados. Dataverse

Existem várias maneiras de importar e exportar dados para o Microsoft Dataverse. Você pode usar fluxos de dados, Power Query, Azure Synapse Link, Azure Data Factory, Azure Logic Apps e Power Automate.

Por onde começar?

A primeira consideração é começar com os dados externos, que já existem fora do Dataverse e que são necessários para criar um aplicativo, formulário ou outro componente. Não é necessário persistir esses dados no Dataverse para começar a usá-los. Muitas vezes, é melhor continuar deixando o outro sistema gerenciar os dados enquanto usa os dados conforme necessário no Dataverse. O recurso de mesa virtual no Dataverse fornece esse recurso. Mais informações: Criar tabelas virtuais usando conectores virtuais.

Com as tabelas virtuais, você pode criar um aplicativo que usa os dados externos como se fosse uma tabela do Dataverse. Para facilitar a criação de tabelas virtuais, use o assistente de criação de tabelas virtuais agora em versão preliminar pública | Microsoft Power Apps

Importar dados externos para o Dataverse

Os resultados desejados podem orientar a decisão de persistir os dados em Dataverse versus usar tabelas virtuais para exibir dados externos Dataverse. Se você deseja que seus dados sejam gerenciados por conceitos de segurança no Dataverse e recursos de gerenciamento do ciclo de vida de aplicativos ou se você estiver interessado em combinar dados externos com dados nativos do Dataverse , considere mover os dados para o Dataverse. Além disso, se estiver interessado em usar o fluxo de trabalho e regras de negócios do Dataverse, considere migrar esses dados para o Dataverse. Você também deve considerar o impacto econômico do carregamento de dados em Dataverse, o que pode aumentar os custos de armazenamento. Se os dados devem continuar a ser gerenciados por um sistema externo, pode ser benéfico deixá-los lá e interagir com eles no Dataverse usando tabelas virtuais.

Fluxos de dados, Power Query e arquivos Excel

Os fluxos de dados permitem que você se conecte aos dados corporativos de várias fontes, limpe-os dados, transforme-os e carregue-os no Dataverse. Os fluxos de dados são compatíveis com dezenas de fontes de dados populares no local, da nuvem e do software como serviço (SaaS).

O Power Query é uma tecnologia de conexão de dados que você pode usar para descobrir, conectar, combinar e refinar fontes de dados para atender às suas necessidades de análise. Os recursos no Power Query estão disponíveis em Excel e no Power BI Desktop.

Durante a fase de previsão do projeto, você deve pesar todas as opções e decidir se os dados externos precisam fazer parte dos dados transacionais. Depois que a abordagem é finalizada, alterá-la durante a implementação e após o go-live pode causar interrupções na experiência dos usuários finais. Uma vez tomada a decisão de carregar dados externos no Dataverse, uma ótima ferramenta são os fluxos de dados. Os fluxos de dados são uma ótima opção quando você precisa transformar e preparar os dados enquanto os move. O ambiente de design de fluxo de dados, Power Query, tem funcionalidade robusta pronta para uso para ajudar na transformação intuitiva e na preparação de dados.

Mais Informações: Criar e usar fluxos de dados no Power Apps e Adicionar dados a uma tabela no Dataverse usando o Power Query

Observe que o carregamento de dados por meio de fluxos de dados está sujeito aos limites de proteção do serviço do Dataverse. Saiba mais

O Power Query oferece suporte a vários conectores disponíveis, conforme descrito aqui: Lista de todos os conectores do Power Query

Se seus dados se originam no Excel, como o de muitos clientes do Dataverse, use o conector do Excel existente, por exemplo, entre vários outros conectores disponíveis, para criar um pipeline de dados no Dataverse. Além de cargas pontuais de dados, sincronize sua fonte de dados do Excel com o Dataverse usando um fluxo de dados. Considere as limitações de tamanho de arquivo do Excel com a orientação reduzir o tamanho de uma pasta de trabalho do Excel para visualizá-la no Power BI

Além disso, se você tiver vários arquivos do Excel em uma pasta que deseja carregar Dataverse, você pode usar o Power Query conector de pasta para combinar, transformar e carregar dados.

Os profissionais de TI também podem liberar os usuários corporativos das complexidades da criação de pipelines de dados criando modelos de fluxo de dados da Power Platform. Crie uma consulta complexa combinando dados de várias fontes, salve-a e compartilhe com usuários empresariais. Esse arquivo pode ser usado no recurso Novo fluxo de dados > Importar modelo no Dataverse. Tudo o que o usuário precisa fazer é verificar as credenciais de acesso aos dados para começar a carregar os dados nas tabelas do Dataverse. Saiba mais em Criar fluxos de dados de consultas da Power Platform no Microsoft Excel.

Você também pode realizar uma importação única de dados diretamente de um único arquivo do Excel para uma Dataverse tabela. Mais informações: Importar dados do Excel e exportar dados para CSV

Azure Data Factory

O Data Factory é um serviço de integração de dados que fornece uma abordagem que usa pouco ou nenhum código para criar processos de extração, transformação e carregamento (ETL) em um ambiente visual ou escrevendo seu próprio código.

Dependendo das suas necessidades de dados, em algum momento você pode precisar de mais envolvimento engenharia de dados para trazer os dados de fontes externas para Dataverse. Não se trata apenas do volume de dados, mas também da quantidade e complexidade das transformações de dados necessárias para que os dados de origem atendam aos seus requisitos de dados no Dataverse. Uma consideração adicional é que os recursos de TI estão disponíveis para auxiliar no esforço. Esses cenários de dados mais complexos podem ser abordados com os fluxos de dados da Power Platform, Azure Data Factory e API Web. >Os padrões de integração do Data Factory e da API Web se destacam na construção de pipelines que exigem fluxo de trabalho envolvido e transformações ricas em algoritmos. Por outro lado, os fluxos de dados são mais rápidos para começar e mais fáceis de usar.

Com o Data Factory, você pode integrar visualmente o Dataverse e outras fontes de dados usando mais de 90 conectores nativos e sem manutenção.

Além de trazer dados para o Dataverse, o Data Factory também pode ser usado para preparar, transformar e enriquecer dados com o Azure Databricks e mover dados para o Azure Synapse Analytics.

Exportação de dados do Dataverse

A exportação de dados, seja para outra tecnologia de dados ou para outro ambiente, pode usar qualquer uma das mesmas tecnologias mencionadas para importação de dados, como fluxos de dados, Data Factory, Power Query e Power Automate.

Os clientes do Dynamics que estão visando o SQL Server ou o Banco de dados SQL do Azure podem usar o Azure Synapse Link. O Azure Synapse Link for Dataverse conecta-se com o Azure Synapse Analytics para permitir que você tenha insights em quase tempo real dos dados do Microsoft Dataverse. Com uma integração perfeita entre o Dataverse e o Azure Synapse Analytics, o Azure Synapse Link permite que você execute cenários de análises, business intelligence e aprendizado de máquina em seus dados. Mais informações: O que é o Azure Synapse Link for Dataverse

Confira também

Trabalhar com qualquer tipo de aplicativo