Bant genişliği orta veya yüksek olduğunda büyük veri kümeleri için veri aktarımı

Bu makalede, ortamınızda orta ve yüksek ağ bant genişliğine sahip olduğunuzda ve büyük veri kümelerini aktarmayı planlıyorsanız veri aktarımı çözümlerine genel bir bakış sağlanır. Makalede ayrıca bu senaryo için önerilen veri aktarımı seçenekleri ve ilgili anahtar yetenek matrisi açıklanır.

Tüm kullanılabilir veri aktarımı seçeneklerine genel bir bakış sağlamak için Azure veri aktarımı çözümü seçme bölümüne gidin.

Senaryo açıklaması

Büyük veri kümeleri, TB'lardan PB'lere sırasıyla veri boyutlarına başvurur. Orta ve yüksek ağ bant genişliği 100 Mb/sn ile 10 Gb/sn'yi ifade eder.

Önerilen seçenekler

Bu senaryoda ağ bant genişliğinizin orta veya yüksek olması durumuna göre farklı seçenekler önerilmiştir.

Orta ağ bant genişliği (100 Mb/sn-1 Gb/sn)

Orta ağ bant genişliğiyle, ağ üzerinden veri aktarımı süresini yansıtmanız gerekir.

Zamanı tahmin etmek için aşağıdaki tabloyu kullanın ve buna bağlı olarak çevrimdışı aktarım veya ağ aktarımı arasında seçim yapın. Tabloda, kullanılabilir çeşitli ağ bant genişlikleri için (%90 kullanım varsayılarak) ağ veri aktarımı için öngörülen süre gösterilir.

• Ağ aktarımının çok yavaş olacağı tahmin edilirse fiziksel bir cihaz kullanmanız gerekir. Bu durumda önerilen seçenekler, Azure Data Box ailesinden çevrimdışı aktarım cihazları veya kendi disklerinizi kullanarak Azure İçeri/Dışarı Aktarma'dır.

  • Çevrimdışı aktarımlar için Azure Data Box ailesi – Zaman, ağ kullanılabilirliği veya maliyetlerle sınırlı olduğunuzda büyük miktarda veriyi Azure'a taşımak için Microsoft tarafından sağlanan Data Box cihazlarından cihazları kullanın. Robocopy gibi araçlarla şirket içindeki verileri kopyalayın. Aktarmak istediğiniz verilerin boyutuna göre Data Box Disk, Data Box veya Data Box Heavy çözümlerinden birini seçebilirsiniz.
  • Azure İçeri/Dışarı Aktarma – Büyük miktarda veriyi Azure Blob depolama alanına ve Azure Dosyalar güvenli bir şekilde içeri aktarmak için kendi disk sürücülerinizi göndererek Azure İçeri/Dışarı Aktarma hizmetini kullanın. Bu hizmeti ayrıca Azure Blob depolama alanınızdaki verileri disk sürücülerine aktarıp şirket içi ortamınıza göndermek için de kullanabilirsiniz.

• Ağ aktarımının makul olacağı tahmin edilirse , Yüksek ağ bant genişliği bölümünde ayrıntılarıyla belirtilen aşağıdaki araçlardan herhangi birini kullanabilirsiniz.

Yüksek ağ bant genişliği (1 Gb/sn-100 Gb/sn)

Kullanılabilir ağ bant genişliği yüksekse aşağıdaki araçlardan birini kullanın.

• AzCopy - En iyi performansla Azure Blobları, Dosyalar ve Tablo depolama alanına kolayca veri kopyalamak için bu komut satırı aracını kullanın. AzCopy eşzamanlılık ve paralellik desteğine ek olarak kesintiye uğrayan kopyalama işlemlerini sürdürme olanağı sunar.
• Azure Depolama REST API'leri/SDK'ları – Uygulama oluştururken uygulamayı Azure Depolama REST API'lerine karşı geliştirebilir ve birden çok dilde sunulan Azure SDK'larını kullanabilirsiniz.
• Çevrimiçi aktarımlar için Azure Data Box ailesi : Azure Stack Edge ve Data Box Gateway, Azure'a ve Azure'a veri taşıyabilen çevrimiçi ağ cihazlarıdır. Karşıya yüklemeden önce verilerin sürekli alımı ve önceden işlenmesi için aynı anda ihtiyaç duyulduğunda Azure Stack Edge fiziksel cihazını kullanın. Data Box Gateway, cihazın sanal bir sürümüdür ancak aynı veri aktarımı yeteneklerine sahiptir. İki durumda da veri aktarımı cihaz tarafından yönetilir.
• Azure Data Factory – Data Factory bir aktarım işleminin ölçeğini genişletmek için ve düzenleme ve kurumsal düzeyde izleme özelliklerine ihtiyaç duyulacaksa kullanılmalıdır. Data Factory'yi kullanarak birden çok Azure hizmeti, şirket içi ortam veya ikisinin birleşiminin bulunduğu bir ortamda düzenli dosya aktarımı gerçekleştirebilirsiniz. Data Factory ile farklı veri depolarından veri alan veri odaklı iş akışları (işlem hattı olarak adlandırılır) oluşturabilir ve zamanlayabilir, ayrıca veri taşıma ile veri dönüştürme süreçlerini otomatikleştirebilirsiniz.

Önemli özelliklerin karşılaştırması

Aşağıdaki tablolarda, önerilen seçenekler için temel özellikler arasındaki farklar özetlenmiştir.

Orta ağ bant genişliği

Çevrimdışı veri aktarımı kullanıyorsanız, temel özelliklerdeki farkları anlamak için aşağıdaki tabloyu kullanın.

* Data Box Disk Büyük Dosya Paylaşımlarını desteklemez ve dosya meta verilerini korumaz

Çevrimiçi veri aktarımı kullanıyorsanız, yüksek ağ bant genişliği için aşağıdaki bölümdeki tabloyu kullanın.

Yüksek ağ bant genişliği

Sonraki adımlar

• İçeri/Dışarı Aktarma ile veri aktarmayı öğrenin.

• Nasıl yapılacağını anlama:

  • Data Box Disk ile veri aktarma.
  • Data Box ile veri aktarma.
  • AzCopy ile veri aktarma.
  • Data Box Gateway ile veri aktarma.
  • Azure'a göndermeden önce Azure Stack Edge ile verileri dönüştürme.

• Azure Data Factory ile veri aktarmayı öğrenin.

• Verileri aktarmak için REST API'lerini kullanın:

  • .NET'te
  • Java üzerinde