Serviços OSDU® M23 disponíveis no Azure Data Manager for Energy

  • Artigo

O Azure Data Manager for Energy está atualmente em conformidade com a versão da etapa M23 OSDU®. Abaixo, você encontrará uma visão geral dos serviços OSDU® que estão atualmente disponíveis no Azure Data Manager for Energy. Esta página será atualizada regularmente à medida que as versões e a disponibilidade do serviço evoluem.

Serviços principais e auxiliares

  • Catálogo CRS: Fornece pontos de extremidade de API para trabalhar com dados de referência geodésica, permitindo que os desenvolvedores recuperem definições de CRS, selecionem CRSs apropriados para ingestão de dados e pesquisem CRSs com base em várias restrições.
  • Conversão CRS: Permite a conversão de coordenadas de um sistema de referência de coordenadas (CRS) para outro.
  • Conjunto de dados: fornece pontos de extremidade de API internos e externos para permitir instruções de armazenamento/recuperação de aplicativos ou usuários para vários tipos de conjuntos de dados.
  • Direitos: Usado para habilitar a autorização no OSDU Data Ecosystem. O serviço permite a criação de grupos. Um nome de grupo define uma permissão. Os usuários que são adicionados a esse grupo obtêm essa permissão. A principal motivação para o serviço de direitos é a autorização de dados, mas a funcionalidade permite três casos de uso: Grupos de dados usados para autorização de dados, Grupos de serviços usados para autorização de serviço, Grupos de usuários usados para agrupamento hierárquico de identidades de usuários e serviços.
  • Arquivo: fornece pontos de extremidade de API internos e externos para permitir que o aplicativo ou usuário busque quaisquer registros do sistema ou solicite dados de localização de arquivos.
  • Indexador: fornece um mecanismo para indexar documentos que contêm dados estruturados ou não estruturados. Os documentos e índices são salvos em um armazenamento persistente separado otimizado para operações de pesquisa. A API do indexador pode indexar qualquer número de documentos.
  • Fila do indexador: fornece um conjunto de APIs que ajudam no encaminhamento das mensagens de e para o serviço de armazenamento para o serviço de indexador.
  • Legal: Gerenciando LegalTags associadas a conjuntos de dados. Uma LegalTag é a entidade que representa o estatuto jurídico dos dados no Ecossistema de Dados. É uma coleção de propriedades que governa como os dados podem ser consumidos e ingeridos.
  • Notificação: Permite que os consumidores interessados subscrevam alterações de dados e metadados utilizando um padrão de publicação/assinante.
  • Python SDK: Oferece ferramentas e bibliotecas para desenvolvedores interagirem com serviços OSDU usando Python.
  • Registrar: Permite que um aplicativo registre uma ação (a função a ser acionada). Ele espera que os dados (contexto) venham do OSDU para habilitar a ação, e o aplicativo pode registrar um filtro (habilitar/desabilitar) para dizer quais dados podem ser usados com essa ação.
  • Esquema: Permite uma governança centralizada e gerenciamento de esquema no ecossistema de dados. Ele oferece uma implementação do padrão de esquema. O Serviço de Esquema fornece todas as APIs necessárias para Buscar, criar, atualizar e marcar um esquema obsoleto.
  • Pesquisa: Fornece um mecanismo para pesquisar índices. Suporta pesquisa de texto completo em campos de cadeia de caracteres, consultas de intervalo em datas, campos numéricos ou de cadeia de caracteres, etc., juntamente com pesquisa geoespacial.
  • Segredo (visualização): Facilita o armazenamento e a recuperação de vários tipos de segredos em um repositório especificado para que os segredos possam ser seguros, separados dos segredos no repositório de infraestrutura e ser gerenciados facilmente por aplicativos de interface.
  • Metadados de arquivos sísmicos: gerencia metadados associados a dados sísmicos. Ele anota dimensões, canais de valor e pares genéricos de chave/valor.
  • Armazenamento: fornece um conjunto de APIs para gerenciar todo o ciclo de vida dos metadados, como ingestão (persistência), modificação, exclusão, controle de versão e esquema de dados.
  • Unidade: Fornece definições de dimensão/medida e unidade.

Serviços de gerenciamento de dados de domínio (DDMS)

  • DDMS sísmico: Permite o acesso seguro e o tratamento eficiente de conjuntos de dados sísmicos.
  • Wellbore DDMS: Permite o acesso seguro e o tratamento de dados relacionados ao poço.
  • DDMS de Entrega de Poços: Permite acesso, armazenamento e interação seguros de dados de Entrega de Poços (planejamento e execução).

Serviços de ingestão

  • EDS DMS [Preview]: Extrai dados especificados (metadados) de fontes de dados compatíveis com OSDU por meio de trabalhos agendados, deixando os arquivos de conjunto de dados associados (LAS, SEG-Y, etc.) armazenados na fonte externa para recuperação sob demanda.
    • EDS Fetch & Ingest DAG: Facilita a busca de dados de provedores externos e a sua ingestão na plataforma OSDU. Envolve etapas como registrar-se com provedores, criar trabalhos de dados e acionar a ingestão. Com a versão M23, o EDS Fetch and Ingest DAG inclui novos recursos, como mapeamento de dados pai e de referência.
    • EDS Scheduler DAG: automatiza a busca de dados com base em agendas predefinidas e envia e-mails para os destinatários conforme necessário. Ele garante que os dados permaneçam atualizados sem intervenção manual
  • Fluxo de trabalho de ingestão: Inicia processos de negócios dentro do sistema. Durante a fase de protótipo, ele facilita as operações CRUD nos metadados do fluxo de trabalho e aciona fluxos de trabalho no Apache Airflow. Além disso, o serviço gerencia os registros de inicialização do processo, atuando como um wrapper em torno das funções de fluxo de ar.
  • DAG de ingestão de manifesto: usado para ingerir artefatos de metadados únicos ou múltiplos sobre conjuntos de dados no Azure Data Manager for Energy por exemplo. Saiba mais sobre a ingestão baseada em manifesto.
  • CSV Parser DAG: Ajuda na análise de arquivos CSV em um formato para ingestão e processamento.
  • osdu-airflow-lib: uma biblioteca que permite a ingestão de contexto do usuário nos fluxos de trabalho do Airflow.
  • osdu-ingestion-lib: Uma biblioteca que suporta a ingestão de contexto do usuário e inclui várias correções relacionadas ao versionamento do Python e substituição de autoridade.
  • SegY-to-oVDS DAG: Converte formatos de arquivo SegY para oVDS.
  • SegY-to-oZGY DAG: Converte formatos de arquivo SrgY para ZGY.

Serviços OSDU® indisponíveis no Azure Data Manager for Energy

Nota: Os seguintes serviços OSDU® estão atualmente indisponíveis no Azure Data Manager for Energy.

  • Reservatório DDMS
  • EDS Naturalização DAG
  • Ingestão de manifesto por DAG de referência
  • APIs sísmicas DDMS v4
  • Amostra de rocha e fluido DDMS
  • Produção DDMS - Historiadora
  • DAG do analisador WITSML
  • Energistcs Parser DAG (WITSML Parser v2, Resqml Parser, ProdML Parser)
  • Zona de Consumo Geoespacial
  • Observação de partição : as operações ainda podem ser executadas usando as APIs de partição de dados disponíveis ou por meio do portal do Azure.
  • Serviço de Políticas
  • Atualização de esquema
  • Trabalhador dos Serviços de Domínio Wellbore