Azure Data Factory ile Azure Veri Gezgini’ne veri kopyalama

Azure Veri Gezgini hızlı, tam olarak yönetilen bir veri analizi hizmetidir. Uygulamalar, web siteleri ve IoT cihazları gibi birçok kaynaktan akışla aktaran büyük hacimli veriler üzerinde gerçek zamanlı analiz sunar. Azure Veri Gezgini ile ürünleri geliştirmek, müşteri deneyimlerini geliştirmek, cihazları izlemek ve işlemleri artırmak için verileri yinelemeli olarak inceleyebilir ve desenleri ve anomalileri belirleyebilirsiniz. Yeni soruları keşfetmenize ve dakikalar içinde yanıtlar almanıza yardımcı olur.

Azure Data Factory, tam olarak yönetilen, bulut tabanlı bir veri tümleştirme hizmetidir. Azure Veri Gezgini veritabanınızı mevcut sisteminizdeki verilerle doldurmak için kullanabilirsiniz. Analiz çözümleri oluştururken zaman kazanmanıza yardımcı olabilir.

Verileri Azure Veri Gezgini'a yüklediğinizde Data Factory aşağıdaki avantajları sağlar:

• Kolay kurulum: Betik gerektirmeden sezgisel, beş adımlı bir sihirbaz edinin.
• Zengin veri deposu desteği: Zengin bir şirket içi ve bulut tabanlı veri deposu kümesi için yerleşik destek alın. Ayrıntılı liste için Desteklenen veri depoları tablosuna bakın.
• Güvenli ve uyumlu: Veriler HTTPS veya Azure ExpressRoute üzerinden aktarılır. Genel hizmet varlığı, verilerinizin coğrafi sınırdan asla ayrılmamasını sağlar.
• Yüksek performans: Azure Veri Gezgini'a saniyede 1 gigabayta (GBps) kadar veri yükleme hızı. Daha fazla bilgi için bkz. performans Kopyalama etkinliği.

Bu makalede, Data Factory Veri Kopyalama aracını kullanarak Amazon Simple Storage Service'ten (S3) Azure Veri Gezgini'a veri yükleyebilirsiniz. Aşağıdakiler gibi diğer veri depolarından veri kopyalamak için benzer bir işlemi izleyebilirsiniz:

• Azure Blob Depolama
• Azure SQL Veritabanı
• Azure SQL Veri Ambarı
• Google BigQuery
• Oracle
• Dosya sistemi

Önkoşullar

• Azure aboneliği. Ücretsiz bir Azure hesabı oluşturun.
• Azure Veri Gezgini kümesi ve veritabanı. Küme ve veritabanı oluşturma.
• Veri kaynağı.

Veri fabrikası oluşturma

1. Azure Portal’ında oturum açın.

2. Sol bölmede Kaynak>oluştur Analytics>Data Factory'yi seçin.

   

3. Yeni veri fabrikası bölmesinde, aşağıdaki tablodaki alanlar için değerler sağlayın:

   

   Ayar	Girilir değer
   Ad	Kutusuna veri fabrikanız için genel olarak benzersiz bir ad girin. "LoadADXDemo" Veri fabrikası adı kullanılamıyor hatası alırsanız, veri fabrikası için farklı bir ad girin. Data Factory yapıtlarını adlandırma hakkında kurallar için bkz . Data Factory adlandırma kuralları.
   Abonelik	Açılan listede, veri fabrikasının oluşturulacağı Azure aboneliğini seçin.
   Kaynak Grubu	Yeni oluştur'u seçin ve yeni bir kaynak grubunun adını girin. Zaten bir kaynak grubunuz varsa Var olanı kullan'ı seçin.
   Sürüm	Açılan listede V2'yi seçin.
   Konum	Açılan listede veri fabrikasının konumunu seçin. Listede yalnızca desteklenen konumlar görüntülenir. Veri fabrikası tarafından kullanılan veri depoları başka konumlarda veya bölgelerde bulunabilir.

4. Oluştur'u belirleyin.

5. Oluşturma işlemini izlemek için araç çubuğunda Bildirimler'i seçin. Veri fabrikasını oluşturduktan sonra seçin.

   Data Factory bölmesi açılır.

   

6. Uygulamayı ayrı bir bölmede açmak için Yazar ve İzleyici kutucuğunu seçin.

Azure Veri Gezgini'a veri yükleme

Birçok veri deposundan Azure Veri Gezgini'a veri yükleyebilirsiniz. Bu makalede Amazon S3'ten verilerin nasıl yüklenecekleri açıklanır.

Verilerinizi aşağıdaki yollardan biriyle yükleyebilirsiniz:

• Azure Data Factory kullanıcı arabiriminin sol bölmesinde Yazar simgesini seçin. Bu, Azure Data Factory kullanıcı arabirimini kullanarak veri fabrikası oluşturma'nın "Veri fabrikası oluşturma" bölümünde gösterilir.
• Verileri kopyalamak için Veri Kopyalama aracını kullanma bölümünde gösterildiği gibi Azure Data Factory Veri Kopyalama aracında.

Amazon S3'ten veri kopyalama (kaynak)

1. Başlayalım bölmesinde Veri Kopyala aracını açmak için Veri Kopyala'yı seçin.

   

2. Özellikler bölmesindeki Görev adı kutusuna bir ad girin ve İleri'yi seçin.

   

3. Kaynak veri deposu bölmesinde Yeni bağlantı oluştur'u seçin.

   

4. Amazon S3'i ve ardından Devam'ı seçin.

   

5. Yeni Bağlı Hizmet (Amazon S3) bölmesinde aşağıdakileri yapın:

   

   a. Ad kutusuna yeni bağlı hizmetinizin adını girin.

   b. Tümleştirme çalışma zamanı aracılığıyla bağlan açılan listesinde değeri seçin.

   c. Erişim Anahtarı Kimliği kutusuna değeri girin.

   Not

   Amazon S3'te erişim anahtarınızı bulmak için gezinti çubuğunda Amazon kullanıcı adınızı ve ardından Güvenlik Kimlik Bilgilerim'i seçin.

   d. Gizli Erişim Anahtarı kutusuna bir değer girin.

   e. Oluşturduğunuz bağlı hizmet bağlantısını test etmek için Bağlantıyı Sına'yı seçin.

   f. Bitir'i seçin.

   Kaynak veri deposu bölmesinde yeni AmazonS31 bağlantınız görüntülenir.

6. İleri'yi seçin.

   

7. Giriş dosyasını veya klasörü seçin bölmesinde aşağıdaki adımları uygulayın:

   a. Kopyalamak istediğiniz dosyaya veya klasöre göz atın ve seçin.

   b. İstediğiniz kopyalama davranışını seçin. İkili kopya onay kutusunun temizlendiğinden emin olun.

   c. İleri'yi seçin.

   

8. Dosya biçimi ayarları bölmesinde dosyanız için ilgili ayarları seçin. ve ardından İleri'yi seçin.

   

Azure Veri Gezgini'e (hedef) veri kopyalama

Yeni Azure Veri Gezgini bağlı hizmeti, verileri bu bölümde belirtilen Azure Veri Gezgini hedef tablosuna (havuz) kopyalamak için oluşturulur.

Azure Veri Gezgini bağlı hizmetini oluşturma

Azure Veri Gezgini bağlı hizmetini oluşturmak için aşağıdaki adımları uygulayın:

1. Mevcut bir veri deposu bağlantısını kullanmak veya yeni bir veri deposu belirtmek için Hedef veri deposu bölmesinde Yeni bağlantı oluştur'u seçin.

   

2. Yeni Bağlı Hizmet bölmesinde Azure Veri Gezgini'ı ve ardından Devam'ı seçin.

   

3. Yeni Bağlı Hizmet (Azure Veri Gezgini) bölmesinde aşağıdaki adımları uygulayın:

   

   1. Ad kutusuna Azure Veri Gezgini bağlı hizmeti için bir ad girin.

   2. Kimlik doğrulama yöntemi'nin altında Sistem Tarafından Atanan Yönetilen Kimlik veya Hizmet Sorumlusu'nı seçin.

      • Yönetilen Kimlik kullanarak kimlik doğrulaması yapmak için Yönetilen kimlik adını veya Yönetilen kimlik nesne kimliğini kullanarak veritabanına Yönetilen Kimlik erişimi verin.

      • Hizmet Sorumlusu kullanarak kimlik doğrulaması yapmak için:

        1. Kiracı kutusuna kiracı adını girin.
        2. Hizmet sorumlusu kimliği kutusuna hizmet sorumlusu kimliğini girin.
        3. Hizmet sorumlusu anahtarı'nı seçin ve hizmet sorumlusu anahtarı kutusuna anahtarın değerini girin.

      Not

      • Hizmet sorumlusu, Azure Data Factory tarafından Azure Veri Gezgini hizmetine erişmek için kullanılır. Hizmet sorumlusu oluşturmak için Microsoft Entra hizmet sorumlusu oluşturmaya gidin.
      • Yönetilen Kimliğe veya Hizmet Sorumlusuna veya öğesine izin atamak için bkz . izinleri yönetme.
      • Azure Key Vault yöntemini veya Kullanıcı Tarafından Atanan Yönetilen Kimlik'i kullanmayın.

   3. Hesap seçim yöntemi'nin altında aşağıdaki seçeneklerden birini belirleyin:

      • Azure aboneliğinden'i seçin ve ardından açılan listelerde Azure aboneliğinizi ve Kümenizi seçin.

        Not

        • Küme açılan denetimi yalnızca aboneliğinizle ilişkili kümeleri listeler.
        • Kümenizin en iyi performans için uygun SKU'ya sahip olması gerekir.

      • El ile gir'i seçin ve uç noktanızı girin.

   4. Veritabanı açılan listesinde veritabanınızın adını seçin. Alternatif olarak, Düzenle onay kutusunu seçin ve veritabanı adını girin.

   5. Oluşturduğunuz bağlı hizmet bağlantısını test etmek için Bağlantıyı Sına'yı seçin. Bağlı hizmetinize bağlanabiliyorsanız, bölmede yeşil bir onay işareti ve Bağlantı başarılı iletisi görüntülenir.

   6. Bağlantılı hizmet oluşturmayı tamamlamak için Oluştur'u seçin.

Azure Veri Gezgini veri bağlantısını yapılandırma

Bağlı hizmet bağlantısını oluşturduktan sonra Hedef veri deposu bölmesi açılır ve oluşturduğunuz bağlantı kullanılabilir. Bağlantıyı yapılandırmak için aşağıdaki adımları uygulayın:

1. İleri'yi seçin.

   

2. Tablo eşleme bölmesinde hedef tablo adını ayarlayın ve İleri'yi seçin.

   

3. Sütun eşleme bölmesinde aşağıdaki eşlemeler gerçekleşir:

   a. İlk eşleme, Azure Data Factory şema eşlemesine göre Azure Data Factory tarafından gerçekleştirilir. Aşağıdakileri yapın:

   • Azure Data Factory hedef tablosu için Sütun eşlemelerini ayarlayın. Varsayılan eşleme kaynaktan Azure Data Factory hedef tablosuna görüntülenir.

   • Sütun eşlemenizi tanımlamanız gerekmeyen sütunların seçimini iptal edin.

   b. İkinci eşleme, bu tablosal veriler Azure Veri Gezgini'a alındığında gerçekleşir. Eşleme, CSV eşleme kurallarına göre gerçekleştirilir. Kaynak veriler CSV biçiminde olmasa bile Azure Data Factory verileri tablo biçiminde dönüştürür. Bu nedenle, CSV eşlemesi bu aşamadaki tek ilgili eşlemedir. Aşağıdakileri yapın:

   • (İsteğe bağlı) Azure Veri Gezgini (Kusto) havuz özellikleri altında, sütun eşlemesinin kullanılabilmesi için ilgili alım eşleme adını ekleyin.

   • Alma eşleme adı belirtilmezse, Sütun eşlemeleri bölümünde tanımlanan ada göre eşleme sırası kullanılır. Ada göre eşleme başarısız olursa, Azure Veri Gezgini verileri sütuna göre konum sırasına göre almaya çalışır (yani, varsayılan konum olarak konuma göre eşler).

   • İleri'yi seçin.

   

4. Ayarlar bölmesinde aşağıdaki adımları uygulayın:

   a. Hataya dayanıklılık ayarları'nın altında ilgili ayarları girin.

   b. Performans ayarları'nın altında Hazırlamayı etkinleştir geçerli değildir ve Gelişmiş ayarlar maliyetle ilgili önemli noktaları içerir. Belirli bir gereksiniminiz yoksa, bu ayarları olduğu gibi bırakın.

   c. İleri'yi seçin.

   

5. Özet bölmesinde ayarları gözden geçirin ve İleri'yi seçin.

   

6. Dağıtım tamamlandı bölmesinde aşağıdakileri yapın:

   a. İzleyici sekmesine geçmek ve işlem hattının durumunu (ilerleme durumu, hatalar ve veri akışı) görüntülemek için İzleyici'yi seçin.

   b. Bağlı hizmetleri, veri kümelerini ve işlem hatlarını düzenlemek için İşlem Hattını Düzenle'yi seçin.

   c. Veri kopyalama görevini tamamlamak için Son'u seçin.

   

İlgili içerik

• Azure Data Factory için Azure Veri Gezgini bağlayıcısı hakkında bilgi edinin.
• Data Factory kullanıcı arabiriminde bağlı hizmetleri, veri kümelerini ve işlem hatlarını düzenleyin.
• Azure Veri Gezgini web kullanıcı arabirimindeki verileri sorgulama.