Premium blok blobu depolama hesapları

Premium blok blobu depolama hesapları, verileri yüksek performanslı donanım aracılığıyla kullanılabilir hale getirir. Veriler, düşük gecikme süresi için iyileştirilmiş katı hal sürücülerinde (SSD) depolanır. SSD'ler geleneksel sabit sürücülere kıyasla daha yüksek aktarım hızı sağlar. Veriler anında erişilebilir bellek yongalarında depolandığından dosya aktarımı çok daha hızlıdır. Bir sürücünün tüm bölümlerine aynı anda erişilebilir. Buna karşılık, bir sabit disk sürücüsünün (HDD) performansı, verilerin okuma/yazma kafalarına yakın olmasına bağlıdır.

Yüksek performanslı iş yükleri

Premium blok blobu depolama hesapları, hızlı ve tutarlı yanıt süreleri gerektiren ve/veya saniyede çok sayıda giriş çıkış işlemine (IOP) sahip iş yükleri için idealdir. Örnek iş yükleri şunlardır:

• Etkileşimli iş yükleri. Yüksek oranda etkileşimli ve gerçek zamanlı uygulamaların hızlı bir şekilde veri yazması gerekir. E-ticaret ve eşleme uygulamaları genellikle anında güncelleştirmeler ve kullanıcı geri bildirimi gerektirir. Örneğin, bir e-ticaret uygulamasında daha az sıklıkta görüntülenen öğeler büyük olasılıkla önbelleğe alınmaz. Ancak, müşterinin isteğe bağlı olarak anında görüntülenmesi gerekir. Etkileşimli düzenleme veya çok oyunculu çevrimiçi oyun uygulamaları, gerçek zamanlı güncelleştirmeler sağlayarak kaliteli bir deneyim sağlar.

• IoT/ akış analizi. IoT senaryosunda, her saniye buluta çok sayıda daha küçük yazma işlemi gönderilebilir. Büyük miktarda veri içeri alınabilir, analiz amacıyla toplanabilir ve ardından hemen silinebilir. Premium blok blobu depolamanın yüksek alım özellikleri, bu iş yükü türü için verimli olmasını sağlar.

• Yapay zeka/makine öğrenmesi (AI/ML). AI/ML; görseller, konuşmalar ve metinler gibi farklı veri türlerinin tüketimi ve işlenmesiyle ilgilidir. Bu yüksek performanslı bilgi işlem türü, veri analizi için hızlı yanıt ve verimli veri alımı süreleri gerektiren büyük miktarda veriyle ilgilenir.

Maliyet uygunluğu

Premium blok blobu depolama hesaplarının depolama maliyeti daha yüksektir ancak işlem maliyeti standart genel amaçlı v2 hesaplarıyla karşılaştırıldığında daha düşüktür. Uygulamalarınız ve iş yükleriniz çok sayıda işlem yürütürse premium blok blobu depolama, özellikle iş yükü yazma açısından yoğun olduğunda uygun maliyetli olabilir.

Çoğu durumda, terabayt başına saniyede 35 ila 40'tan fazla işlem yürüten iş yükleri (TPS/TB) bu hesap türü için iyi adaylardır. Örneğin, iş yükünüz bir ay içinde 500 milyon okuma işlemi ve 100 milyon yazma işlemi yürütürse, TPS/TB'yi aşağıdaki gibi hesaplayabilirsiniz:

• Saniye başına yazma işlemleri = 100.000.000 / (30 x 24 x 60 x 60) = 39 (en yakın tamsayıya yuvarlanmış)

• Saniyedeki okuma işlemleri = 500.000.000 / (30 x 24 x 60 x 60) = 193 (en yakın tamsayıya yuvarlanmış)

• Saniye başına toplam işlem sayısı = 193 + 39 = 232

• Hesabınızda ortalama 5 TB veri olduğunu varsayarsak, TPS/TB 230 / 5 = 46 olur.

Aşağıdaki tabloda premium blok blobu depolama hesaplarının maliyet verimliliği gösterilmektedir. Bu tablodaki sayılar, Azure Data Lake Storage 2. Nesil etkin premium blok blobu depolama hesabını (Azure Data Lake Storage için premium katman olarak da adlandırılır) temel alır. Her sütun, bir ay içindeki işlem sayısını temsil eder. Her satır, okuma işlemi olan işlemlerin yüzdesini temsil eder. Tablodaki her hücre, okuma işlemi yüzdesiyle ilişkili maliyet azaltma yüzdesini ve yürütülen işlem sayısını gösterir.

Örneğin, hesabınızın Doğu ABD 2 bölgesinde olduğunu varsayarsak, hesabınızla yapılan işlem sayısı 90 milyonu aşıyor ve bu işlemlerin %70'i okuma işlemleri, premium blok blobu depolama hesapları daha uygun maliyetlidir.

Premium senaryolar

Bu bölümde, bazı Azure Depolama iş ortaklarımızın premium blok blobu depolamayı nasıl kullandığına dair gerçek dünya örnekleri yer almaktadır. Bazıları, belirli senaryolarda işlem performansını daha da geliştirebilecek hiyerarşik bir dosya yapısı sunan Azure Data Lake Storage 2. Nesil de etkinleştirir.

Bu bölümde aşağıdaki örnekler yer alır:

• Premium blok blobu depolama hesapları
  • Yüksek performanslı iş yükleri
  • Maliyet uygunluğu
  • Premium senaryolar
    • Hızlı veri hidrasyon
    • Etkileşimli düzenleme uygulamaları
    • Veri görselleştirme yazılımı
    • E-ticaret işletmeleri
    • Etkileşimli analiz
    • Veri işleme işlem hatları
    • Nesnelerin İnterneti (IoT)
    • Machine Learning
    • Gerçek zamanlı akış analizi
  • Premium ile çalışmaya başlama
    • Blob Depolama özelliği uyumluluğunu denetleme
    • Yeni depolama hesabı oluşturma
  • Ayrıca bkz.

Hızlı veri hidrasyon

Premium blok blobu depolama, ortamınızı hızla nemlendirmenize veya getirmenize yardımcı olabilir. Bankacılık gibi sektörlerde, bazı mevzuat gereksinimleri şirketlerin ortamlarını düzenli olarak yok etmelerini ve ardından sıfırdan geri getirmelerini gerektirebilir. Ortamlarını nemlendirmek için kullanılan verilerin hızla yüklenmesi gerekir.

İş ortaklarımızdan bazıları her hafta MongoDB örneklerinin bir kopyasını premium blok blobu depolama hesabında depolar. Sistem daha sonra yıkılır. Sistemi yeniden hızlı bir şekilde yeniden çevrimiçi duruma getirmek için MongoDB örneğinin en son kopyası okunur ve yüklenir. Denetim amacıyla, önceki kopyalar bir süre için bulut depolamada tutulur.

Etkileşimli düzenleme uygulamaları

Birden çok kullanıcının aynı içeriği düzenlediği uygulamalarda, güncelleştirmelerin hızı sorunsuz bir kullanıcı deneyimi için kritik hale gelir.

İş ortaklarımızdan bazıları video düzenleme yazılımı geliştirir. Bir kullanıcının videoda yaptığı tüm güncelleştirmeler diğer kullanıcılar tarafından hemen görülebilir. Kullanıcılar, içerik güncelleştirmelerinin görünmesini beklemek yerine görevlerine odaklanabilir. Premium blok blobu depolama ile ilişkili düşük gecikme süreleri, bu sorunsuz ve işbirliğine dayalı deneyimin oluşturulmasına yardımcı olur.

Veri görselleştirme yazılımı

İşleme süresi hızlıysa, kullanıcılar veri görselleştirme yazılımıyla çok daha üretken olabilir.

Harita sektöründeki şirketlerin haritalarla ilgili sorunları algılamak için eşleme düzenleyicilerini kullandığını gördük. Bu düzenleyiciler müşteri Global Konumlandırma Sistemi (GPS) verilerinden oluşturulan verileri kullanır. Harita çakışmaları oluşturmak için, düzenleme yazılımı hızlı bir şekilde anahtar aramaları gerçekleştirerek haritanın küçük bölümlerini işler.

Bir durumda, premium blok blobu depolamayı kullanmadan önce, bir iş ortağı standart genel amaçlı v2 depolama tarafından desteklenen HBase kümelerini kullandı. Ancak, büyük kümeleri sürekli çalışır durumda tutmak pahalıya patlar. Bu iş ortağı bu mimariden uzaklaşmaya karar verdi ve bunun yerine hızlı anahtar aramaları için premium blok blobu depolamayı kullandı. Çakışmalar oluşturmak için, GPS koordinatlarına karşılık gelen kutucukları işlemek için REST API'lerini kullandılar. Premium blok blobu depolama hesabı, onlara uygun maliyetli bir çözüm sağladı ve gecikme süreleri çok daha öngörülebilirdi.

E-ticaret işletmeleri

E-ticaret işletmeleri, müşterilerine yönelik mağazaları desteklemenin yanı sıra şirket içi ekiplere veri ambarı ve analiz çözümleri de sağlayabilir. İş ortaklarının bu veri ambarı ve analiz çözümleri tarafından düşük gecikme süresi gereksinimlerini desteklemek için premium blok blobu depolama hesaplarını kullandığını gördük. Bir durumda katalog ekibi teklifler, fiyatlandırma, gemi yöntemleri, tedarikçiler, envanter ve lojistik ile ilgili veriler için bir veri ambarı uygulaması tutar. Bilgiler sorgulanır, taranır, ayıklanır ve birden çok kullanım örneği için mayınlanır. Ekip, çeşitli satış ekiplerine ilgili içgörüler ve bilgiler sağlamak için bu veriler üzerinde analiz çalıştırır.

Etkileşimli analiz

Neredeyse her sektörde kuruluşların verilerini etkileşimli olarak sorgulaması ve çözümlemesi gerekir.

Veri bilimcileri, analistler ve geliştiriciler, premium blok blob depolama hesabında depolanan veriler üzerinde sorgu çalıştırarak zamana duyarlı içgörüleri daha hızlı türetebilir. Yöneticiler, bu panolarda görünen veriler standart genel amaçlı v2 hesabı yerine premium blok blobu depolama hesabından geldiğinde panolarını çok daha hızlı yükleyebilir.

Bir senaryoda analistlerin, ürünlerinin nasıl kullanıldığını daha iyi anlamak ve ürün sürümü kararları almak için milyonlarca cihazdan gelen telemetri verilerini hızla analiz etmeleri gerekiyordu. SQL veritabanlarında veri depolamak pahalıdır. Maliyeti azaltmak ve sorgulanabilir yüzey alanını artırmak için Azure Data Lake Storage 2. Nesil özellikli bir premium blok blobu depolama hesabı kullandılar ve Presto ve Spark'ta hesaplama gerçekleştirerek hive tablolarından içgörüler ürettiler. Bu şekilde, nadiren erişilen veriler bile sık erişilen verilerde aynı işlem gücüne sahip olur.

Özellikle küçük iyileştirilmiş satır sütunlu (ORC) dosyalarıyla ilgilenirken, SQL'in saniyedeki alt saniye performansı ile Presto'nun saniye başına giriş çıkış işlemleri (IOP' ler) arasındaki boşluğu kapatmak için tutarlılık ve hız kritik önem taşır. Data Lake Storage 2. Nesil ile kullanıldığında premium blok blobu depolama hesabı, bu senaryoda standart genel amaçlı v2 hesabına kıyasla sürekli olarak 3 kat performans artışı göstermiştir. Sorgular, işlem makinesinde yerel olarak hissedilecek kadar hızlı yürütülür.

Başka bir durumda iş ortağı, güvenlik çözümlerinden oluşturulan günlükleri depolar ve sorgular. Günlükler Databricks kullanılarak oluşturulur ve Data Lake Storage 2. Nesil etkinleştirilmiş premium blok blobu depolama hesabında depolanır. Son kullanıcılar Azure Veri Gezgini kullanarak bu verileri sorgular ve arar. Kararlılığı artırmak ve etkileşimli sorguların performansını artırmak için bu hesap türünü seçtiler. Ayrıca yaşam döngüsü yönetimi Delete Action ilkesini birkaç güne ayarlayarak maliyetleri düşürmeye yardımcı olur. Bu ilke, verilerin sonsuza kadar saklanmasını engeller. Bunun yerine veriler artık gerekli olmadığında silinir.

Veri işleme işlem hatları

Neredeyse her sektörde kuruluşların verileri işlemesi gerekir. Kullanıcıların karar almasına yardımcı olan veri panoları gibi araçlarda aşağı akış tüketiminde yararlı olabilmesi için birden çok kaynaktan gelen ham verilerin temizlenmesi ve işlenmesi gerekir.

Verileri işlerken her zaman en önemli sorun işleme hızı olmasa da, bazı sektörler bunu gerektirir. Örneğin, finansal hizmetler sektöründeki şirketlerin genellikle verileri güvenilir ve mümkün olan en hızlı şekilde işlemesi gerekir. Sahtekarlığı algılamak için bu şirketlerin çeşitli kaynaklardan gelen girişleri işlemesi, müşterileri için riskleri belirlemesi ve hızlı işlem yapması gerekir.

Bazı durumlarda iş ortaklarının çeşitli kaynaklardan verileri depolamak için birden çok standart depolama hesabı kullandığını gördük. Bu verilerden bazıları, veri işleme uygulamasının yeni gelen verileri sık sık okuduğu Data Lake Storage etkinleştirilmiş premium blok blob depolama hesabına taşınır. Bu hesaptaki dizin listeleme çağrıları çok daha hızlıydı ve standart genel amaçlı v2 hesabında gerçekleştireceklerinden çok daha tutarlı bir şekilde gerçekleştirildi. Hesap tarafından sunulan hız ve tutarlılık, yeni verilerin her zaman aşağı akış işleme sistemleri için mümkün olan en kısa sürede kullanılabilir olmasını sağladı. Bu, olası güvenlik risklerini hemen yakalamalarına ve harekete geçirmelerine yardımcı oldu.

Nesnelerin İnterneti (IoT)

IoT günlük hayatımızın önemli bir parçası haline geldi. IoT, araba hareketlerini izlemek, ışıkları kontrol etmek ve sağlığımızı izlemek için kullanılır. Ayrıca endüstriyel uygulamalara sahiptir. Örneğin, şirketler IoT kullanarak akıllı fabrika projelerini etkinleştirir, tarımsal çıktıyı geliştirir ve tahmine dayalı bakım için petrol kuyularında kullanır. Premium blok blobu depolama hesapları bu senaryolara önemli değer katar.

Madencilik sektöründe iş ortaklarımız var. Bir Data Lake Storage 2. Nesil, çok vergi veren bir yük profiliyle birden çok madencilik ekipmanı türünden zaman serisi sensör verilerini almak için HDInsight (Hbase) ile birlikte premium blok blob depolama hesabını etkinleştirir. Premium blok blobu depolama, yüksek örnek hızı alım ihtiyacını karşılamaya yardımcı oldu. Ayrıca, premium blok blobu depolaması çok sayıda yazma işlemi gerçekleştiren iş yükleri için iyileştirilmiş maliyet olduğundan ve bu iş yükü çok sayıda küçük yazma işlemi (saniyede on binlerce) oluşturduğundan uygun maliyetlidir.

Machine Learning

Çoğu durumda, bir makine öğrenmesi modelini eğitmek için çok sayıda verinin işlenmesi gerekir. Bu işlemi tamamlamak için işlem makinelerinin uzun süre çalışması gerekir. Depolama maliyetleriyle karşılaştırıldığında işlem maliyetleri genellikle faturanızın çok daha büyük bir yüzdesini oluşturur, bu nedenle işlem makinelerinizin çalışma süresini azaltmak önemli tasarruflara yol açabilir. Premium blok blobu depolamayı kullanarak elde ettiğiniz düşük gecikme süresi bu süreyi ve faturanızı önemli ölçüde azaltabilir.

Veri işleme işlem hatlarını makine öğrenmesi eğitimini ve çıkarımlarını çalıştırdıkları Spark kümelerine dağıtan iş ortaklarımız var. Spark tablolarını (parquet dosyaları) ve denetim noktalarını premium blok blob depolama hesabında depolarlar. Spark denetim noktaları çok sayıda iç içe dosya ve klasör oluşturabilir. Premium blok blobu depolama hesabının düşük gecikme süresini Data Lake Storage 2. Nesil ile kullanılabilir hale getirilmiş hiyerarşik veri yapısıyla birleştirdiklerinden dizin listeleme işlemleri hızlıdır.

Yarı iletken sektöründe IoT ve makine öğrenmesiyle kesişen kullanım örneklerine sahip iş ortaklarımız da var. Üretim tesisindeki makinelere bağlı IoT cihazları yarı iletken wafer görüntülerini alır ve bunları hesaplarına gönderir. Sistem, derin öğrenme çıkarımını kullanarak üretimle ilgili bir sorun olup olmadığını ve bir işlem yapılması gerekip gerekmediğini şirket içi makineleri bilgilendirebilir. Görüntüleri hızlı ve güvenilir bir şekilde yükleyip işleyebiliyorlar. Etkinleştirilmiş Data Lake Storage 2. Nesil premium blok blobu depolama hesabının kullanılması, bunu mümkün hale getirmede yardımcı olur.

Gerçek zamanlı akış analizi

Etkileşimli analizi neredeyse gerçek zamanlı olarak desteklemek için, sistemin büyük miktarda veriyi alıp işlemesi ve ardından bu verileri aşağı akış sistemlerinde kullanılabilir hale getirmesi gerekir. Data Lake Storage 2. Nesil özellikli premium blok blobu depolama hesabı kullanmak bu tür senaryolar için mükemmeldir.

Medya ve eğlence sektöründeki şirketler, bir etkinliği yayınladıkları sırada kısa bir süre içinde çok sayıda günlük ve telemetri verileri oluşturabilir. İş ortaklarımızdan bazıları, akış için birden çok içerik teslim ağı (CDN) iş ortağından yararlanıyor. Trafiğin hangi CDN iş ortaklarına ayrılacakları konusunda gerçek zamanlıya yakın kararlar vermeleri gerekir. Bu nedenle verilerin alındıktan birkaç saniye sonra sorgulanması için kullanılabilir olması gerekir. Bu hızlı karar alma sürecini kolaylaştırmak için premium blok blobu depolama alanında depolanan verileri kullanır ve bu verileri Azure Veri Gezgini(ADX) içinde işler. Depolamaya yüklenen tüm telemetri verileri ADX'te dönüştürülür ve burada işleçlerin ve yöneticilerin hızlı ve güvenilir bir şekilde sorgulayabileceğiniz tanıdık bir biçimde depolanabilir.

Veriler birden çok premium performans Blob Depolama hesabına yüklenir. Her hesap bir Event Grid ve Event Hub kaynağına bağlanır. ADX verileri Blob Depolama'dan alır, verileri normalleştirmek için gerekli dönüştürmeleri gerçekleştirir (Örneğin: zip dosyalarının sıkıştırmasını açma veya JSON'dan CSV'ye dönüştürme). Ardından veriler ADX ve Grafana'da görüntülenen panolar aracılığıyla sorgu için kullanılabilir hale getirilmiştir. Grafana panoları operatörler, yöneticiler ve diğer kullanıcılar tarafından kullanılır. Müşteri özgün günlüklerini premium performans depolama alanında tutar veya uzun süreli saklama ve gelecekteki analiz için sık erişimli veya seyrek erişim katmanında depolanabilecekleri genel amaçlı v2 depolama hesabına kopyalar.

Premium ile çalışmaya başlama

İlk olarak, sık kullandığınız Blob Depolama özelliklerinin premium blok blob depolama hesaplarıyla uyumlu olduğundan emin olun ve hesabı oluşturun.

Blob Depolama özelliği uyumluluğunu denetleme

Bazı Blob Depolama özellikleri henüz desteklenmiyor veya premium blok blobu depolama hesaplarında kısmi desteğe sahip. Premium'u seçmeden önce, kullanmayı planladığınız özelliklerin hesabınızda tam olarak desteklenip desteklenmediğini belirlemek için Azure Depolama hesaplarında Blob Depolama özelliği desteği makalesini gözden geçirin. Özellik desteği her zaman genişlediğinden, güncelleştirmeler için bu makaleyi düzenli aralıklarla gözden geçirmeyi unutmayın.

Yeni depolama hesabı oluşturma

Premium blok blobu depolama hesabı oluşturmak için, hesabı oluştururken Premium performans seçeneğini ve Blok blobları hesap türünü seçtiğinizden emin olun.

Depolama hesabınız analiz için kullanılacaksa premium blok blobu depolama hesabıyla birlikte Azure Data Lake Storage 2. Nesil kullanmanızı kesinlikle öneririz. Azure Data Lake Storage 2. Nesil özelliklerin kilidini açmak için Depolama hesabı oluştur sayfasının Gelişmiş sekmesinde Hiyerarşik ad alanı ayarını etkinleştirin.

Aşağıdaki görüntüde , Depolama hesabı oluştur sayfasında bu ayar gösterilmektedir.

Tüm yönergeler için bkz. Depolama hesabı hesabı oluşturma .

Ayrıca bkz.

• Depolama hesabına genel bakış
• Azure Data Lake Storage 2. Nesil'e giriş
• Azure Data Lake Storage 2. Nesil ile kullanılacak depolama hesabı oluşturma
• Azure Data Lake Storage için premium katman