Como montar o Armazenamento de Blobs do Azure como um sistema de arquivos com o BlobFuse v1

BlobFuse é um driver de sistema de arquivos virtual para o Armazenamento de Blobs do Azure. O BlobFuse permite que você acesse seus dados de blob de bloco existentes em sua conta de armazenamento através do sistema de arquivos Linux. BlobFuse usa o esquema de diretório virtual com a barra '/' como um delimitador.

Este guia mostra como usar o BlobFuse v1 e montar um contêiner de Armazenamento de Blob no Linux e acessar dados. Para saber mais sobre o BlobFuse v1, consulte o readme e o wiki.

Instale o BlobFuse v1 no Linux

Os binários BlobFuse estão disponíveis nos repositórios de software da Microsoft para Linux para distribuições Ubuntu, Debian, SUSE, Oracle Linux e RHEL. Para instalar o BlobFuse nessas distribuições, configure um dos repositórios da lista. Você também pode criar os binários a partir do código-fonte seguindo as etapas de instalação do Armazenamento do Azure se não houver binários disponíveis para sua distribuição.

BlobFuse é publicado no repositório Linux para as versões do Ubuntu: 16.04, 18.04 e 20.04, versões RHEL: 7.5, 7.8, 7.9, 8.0, 8.1, 8.2, versões Debian: 9.0, 10.0, versão SUSE: 15, Oracle Linux 8.1. Execute este comando para certificar-se de que você tem uma dessas versões implantadas:

cat /etc/*-release

Configurar o repositório de pacotes da Microsoft

Configure o repositório de pacotes Linux para produtos Microsoft.

sudo rpm -Uvh https://packages.microsoft.com/config/rhel/8/packages-microsoft-prod.rpm

sudo wget https://packages.microsoft.com/config/ubuntu/20.04/packages-microsoft-prod.deb
sudo dpkg -i packages-microsoft-prod.deb
sudo apt-get update

sudo rpm -Uvh https://packages.microsoft.com/config/sles/15/packages-microsoft-prod.rpm

Instalar o BlobFuse v1

sudo yum install blobfuse

sudo apt-get install blobfuse

sudo zypper install blobfuse

Prepare-se para a montagem

O BlobFuse fornece um desempenho semelhante ao nativo ao exigir um caminho temporário no sistema de arquivos para armazenar em buffer e armazenar em cache todos os arquivos abertos. Para esse caminho temporário, escolha o disco com melhor desempenho ou use um ramdisk para obter o melhor desempenho.

(Opcional) Usar um ramdisk para o caminho temporário

O exemplo a seguir cria um ramdisk de 16 GB e um diretório para BlobFuse. Escolha o tamanho com base nas suas necessidades. Este ramdisk permite que o BlobFuse abra ficheiros até 16 GB de tamanho.

sudo mkdir /mnt/ramdisk
sudo mount -t tmpfs -o size=16g tmpfs /mnt/ramdisk
sudo mkdir /mnt/ramdisk/blobfusetmp
sudo chown <youruser> /mnt/ramdisk/blobfusetmp

Usar um SSD como caminho temporário

No Azure, você pode usar os discos efêmeros (SSD) disponíveis em suas VMs para fornecer um buffer de baixa latência para BlobFuse. Dependendo do agente de provisionamento usado, o disco efêmero seria montado em '/mnt' para cloud-init ou '/mnt/resource' para VMs waagent.

Verifique se o usuário tem acesso ao caminho temporário:

sudo mkdir /mnt/resource/blobfusetmp -p
sudo chown <youruser> /mnt/resource/blobfusetmp

Autorizar o acesso à sua conta de armazenamento

Você pode autorizar o acesso à sua conta de armazenamento usando a chave de acesso da conta, uma assinatura de acesso compartilhado, uma identidade gerenciada ou uma entidade de serviço. As informações de autorização podem ser fornecidas na linha de comando, em um arquivo de configuração ou em variáveis de ambiente. Para obter detalhes, consulte Configurações de autenticação válidas no Leiame BlobFuse.

Por exemplo, suponha que você esteja autorizando com as chaves de acesso da conta e armazenando-as em um arquivo de configuração. O arquivo de configuração deve ter o seguinte formato:

accountName myaccount
accountKey storageaccesskey
containerName mycontainer
authType Key

O accountName é o nome da sua conta de armazenamento e não o URL completo. Você precisa atualizar myaccount, storageaccesskeye mycontainer com suas informações de armazenamento.

Crie este arquivo usando:

sudo touch /path/to/fuse_connection.cfg

Depois de criar e editar esse arquivo, certifique-se de restringir o acesso para que nenhum outro usuário possa lê-lo.

sudo chmod 600 /path/to/fuse_connection.cfg

Criar um diretório vazio para montagem

sudo mkdir ~/mycontainer

Montagem

Para montar o BlobFuse, execute o seguinte comando com seu usuário. Este comando monta o contêiner especificado em '/path/to/fuse_connection.cfg' no local '/mycontainer'.

sudo blobfuse ~/mycontainer --tmp-path=/mnt/resource/blobfusetmp  --config-file=/path/to/fuse_connection.cfg -o attr_timeout=240 -o entry_timeout=240 -o negative_timeout=120

Agora você deve ter acesso aos seus blobs de bloco por meio das APIs regulares do sistema de arquivos. O usuário que monta o diretório é a única pessoa que pode acessá-lo, por padrão, o que protege o acesso. Para permitir o acesso a todos os usuários, você pode montar através da opção -o allow_other.

sudo cd ~/mycontainer
sudo mkdir test
sudo echo "hello world" > test/blob.txt

Persistir a montagem

Para saber como persistir a montagem, consulte Persistindo no wiki BlobFuse.

Suporte de funcionalidades

O suporte para esse recurso pode ser afetado pela habilitação do Data Lake Storage Gen2, do protocolo NFS (Network File System) 3.0 ou do SSH File Transfer Protocol (SFTP). Se você habilitou qualquer um desses recursos, consulte Suporte ao recurso de Armazenamento de Blob nas contas de Armazenamento do Azure para avaliar o suporte para esse recurso.

Próximos passos

• Página inicial do BlobFuse
• Relatar problemas de BlobFuse