Tümleştirmelere genel bakış
Veri alımı, düzenleme, çıkış ve veri sorgusu için platformla sorunsuz çalışan birçok veri bağlayıcısı, araç ve tümleştirme vardır. Bu belge, kullanılabilir bağlayıcılar, araçlar ve tümleştirmeler hakkında üst düzey bir genel bakıştır. Her bağlayıcı için ayrıntılı bilgiler ve tüm belgelerinin bağlantıları sağlanır.
Belirli bir tümleştirme türündeki genel bakış sayfaları için aşağıdaki düğmelerden birini seçin.
Karşılaştırma tabloları
Aşağıdaki tablolarda her öğenin özellikleri özetlemektedir. Bağlayıcılara veya araçlara ve tümleştirmelere karşılık gelen sekmeyi seçin. Her öğe adı, ayrıntılı açıklamasına bağlıdır.
Aşağıdaki tabloda kullanılabilir bağlayıcılar ve bunların özellikleri özetlenmektedir:
Veri Akışı Adı | Alma | Export | Düzenleme | Sorgu |
---|---|---|---|---|
Apache Kafka | ✔️ | |||
Apache Flink | ✔️ | |||
Apache Log4J 2 | ✔️ | |||
Apache Spark | ✔️ | ✔️ | ✔️ | |
Azure Synapse Analytics için Apache Spark | ✔️ | ✔️ | ✔️ | |
Azure Cosmos DB | ✔️ | |||
Azure Data Factory | ✔️ | ✔️ | ||
Azure Event Grid | ✔️ | |||
Azure Event Hubs | ✔️ | |||
Azure Functions | ✔️ | ✔️ | ||
Azure IoT Hubs | ✔️ | |||
Azure Stream Analytics | ✔️ | |||
Cribl Stream | ✔️ | |||
Fluent Bit | ✔️ | |||
JDBC | ✔️ | |||
Logic Apps | ✔️ | ✔️ | ✔️ | |
Logstash | ✔️ | |||
Matlab | ✔️ | |||
NLog | ✔️ | |||
ODBC | ✔️ | |||
Telemetriyi Aç | ✔️ | |||
Power Apps | ✔️ | ✔️ | ||
Power Automate | ✔️ | ✔️ | ✔️ | |
Serilog | ✔️ | |||
Splunk | ✔️ | |||
Splunk Evrensel İletici | ✔️ | |||
Telegraf | ✔️ |
Ayrıntılı açıklamalar
Aşağıda bağlayıcıların, araçların ve tümleştirmelerin ayrıntılı açıklamaları yer alır. Bağlayıcılara veya araçlara ve tümleştirmelere karşılık gelen sekmeyi seçin. Tüm kullanılabilir öğeler yukarıdaki Karşılaştırma tablolarında özetlenir.
Apache Kafka
Apache Kafka , sistemler veya uygulamalar arasında güvenilir bir şekilde veri taşınan gerçek zamanlı akış veri işlem hatları oluşturmaya yönelik bir dağıtılmış akış platformudur. Kafka Connect, Apache Kafka ve diğer veri sistemleri arasında ölçeklenebilir ve güvenilir veri akışı sağlayan bir araçtır. Kafka Havuzu, Kafka'dan bağlayıcı görevi görür ve kod kullanılmasını gerektirmez. Bu, Confluent tarafından altın sertifikalıdır - kalite, özellik eksiksizliği, standartlara uyumluluk ve performans için kapsamlı inceleme ve testlerden geçmiştir.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Günlükler, Telemetri, Zaman serisi
- Temel ALıNAN SDK: Java
- Depo: Microsoft Azure - https://github.com/Azure/kafka-sink-azure-kusto/
- Belgeler: Apache Kafka'dan veri alma
- Topluluk Blogu: Azure Veri Gezgini'a Kafka alımı
Apache Flink
Apache Flink , ilişkisiz ve sınırlanmış veri akışları üzerinden durum bilgisi olan hesaplamalar için bir çerçeve ve dağıtılmış işleme altyapısıdır. Bağlayıcı, verileri Azure Veri Gezgini ve Flink kümeleri arasında taşımak için veri havuzu uygular. Azure Veri Gezgini ve Apache Flink kullanarak veri odaklı senaryoları hedefleyen hızlı ve ölçeklenebilir uygulamalar oluşturabilirsiniz. Örneğin makine öğrenmesi (ML), Ayıklama-Dönüştürme-Yükleme (ETL) ve Log Analytics.
- İşlevsellik: Alma
- Desteklenen alım türü: Akış
- Kullanım örnekleri: Telemetri
- Temel ALıNAN SDK: Java
- Depo: Microsoft Azure - https://github.com/Azure/flink-connector-kusto/
- Belgeler: Apache Flink'ten veri alma
Apache Log4J 2
Log4J , Apache Foundation tarafından tutulan Java uygulamaları için popüler bir günlük çerçevesidir. Log4j, geliştiricilerin günlükçü adı, günlükçü düzeyi ve ileti düzenine göre rastgele ayrıntı düzeyiyle hangi günlük deyimlerinin çıkış olduğunu denetlemesine olanak tanır. Apache Log4J 2 havuzu, günlük verilerinizi veritabanınıza akışla aktarmanıza olanak tanır; burada günlüklerinizi gerçek zamanlı olarak analiz edebilir ve görselleştirebilirsiniz.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Günlükler
- Temel ALıNAN SDK: Java
- Depo: Microsoft Azure - https://github.com/Azure/azure-kusto-log4j
- Belgeler: Apache Log4J 2 bağlayıcısı ile veri alma
- Topluluk Blogu: Apache Log4J ve Azure Veri Gezgini kullanmaya başlama
Apache Spark
Apache Spark , büyük ölçekli veri işlemeye yönelik birleşik bir analiz altyapısıdır. Spark bağlayıcısı, herhangi bir Spark kümesinde çalışabilen bir açık kaynak projesidir. Spark kümelerine veya Spark kümelerinden veri taşımak için veri kaynağı ve veri havuzu uygular. Apache Spark bağlayıcısını kullanarak, veri odaklı senaryoları hedefleyen hızlı ve ölçeklenebilir uygulamalar oluşturabilirsiniz. Örneğin makine öğrenmesi (ML), Ayıklama-Dönüştürme-Yükleme (ETL) ve Log Analytics. Bağlayıcı ile veritabanınız okuma, yazma ve writeStream gibi standart Spark kaynağı ve havuz işlemleri için geçerli bir veri deposu haline gelir.
- İşlevsellik: Alma, Dışarı Aktarma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Telemetri
- Temel ALıNAN SDK: Java
- Depo: Microsoft Azure - https://github.com/Azure/azure-kusto-spark/
- Belgeler: Apache Spark bağlayıcısı
- Topluluk Blogu: Apache Spark ile Azure Veri Gezgini için Azure Veri Gezgini için veri ön işleme
Azure Synapse Analytics için Apache Spark
Apache Spark , büyük veri analizi uygulamalarının performansını artırmak için bellek içi işlemeyi destekleyen paralel bir işleme çerçevesidir. Azure Synapse Analytics'teki Apache Spark, Microsoft'un buluttaki Apache Spark uygulamalarından biridir. Azure Synapse Analytics için Apache Spark ile Synapse Studio'dan bir veritabanına erişebilirsiniz.
- İşlevsellik: Alma, Dışarı Aktarma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Telemetri
- Temel ALıNAN SDK: Java
- Belgeler: Azure Synapse çalışma alanına bağlanma
Azure Cosmos DB
Azure Cosmos DB değişiklik akışı veri bağlantısı, Cosmos DB değişiklik akışınızı dinleyen ve verileri veritabanınıza alan bir alım işlem hattıdır.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Değişiklik akışı
- Belgeler: Azure Cosmos DB'den veri alma (Önizleme)
Azure Data Factory
Azure Data Factory (ADF), farklı veri depolarını tümleştirmenize ve veriler üzerinde etkinlikler gerçekleştirmenize olanak tanıyan bulut tabanlı bir veri tümleştirme hizmetidir.
- İşlevsellik: Alma, Dışarı Aktarma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Veri düzenleme
- Belgeler: Azure Data Factory kullanarak veritabanınıza veri kopyalama
Azure Event Grid
Event Grid alımı, Azure depolamayı dinleyen ve abone olunan olaylar gerçekleştiğinde veritabanınızı çekme bilgileriyle güncelleştiren bir işlem hattıdır. Azure Event Hubs aracılığıyla oluşturulan veya blob olarak yeniden adlandırılan bildirimler için Azure Event Grid aboneliğiyle Azure Depolama'dan (Blob depolama ve ADLSv2) sürekli alım yapılandırabilirsiniz.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Olay işleme
- Belgeler: Event Grid veri bağlantısı
Azure Event Hubs
Azure Event Hubs , büyük bir veri akışı platformu ve olay alımı hizmetidir. Müşteri tarafından yönetilen Event Hubs'dan sürekli alım yapılandırabilirsiniz.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Belgeler: Azure Event Hubs veri bağlantısı
Azure İşlevleri
Azure İşlevleri zamanlamaya göre veya bir olaya yanıt olarak bulutta sunucusuz kod çalıştırmanıza olanak sağlar. Azure İşlevleri için giriş ve çıkış bağlamalarıyla, verileri almak ve veritabanınızda sorgu çalıştırmak için veritabanınızı iş akışlarınızla tümleştirebilirsiniz.
- İşlevsellik: Alma, Dışarı Aktarma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: İş akışı tümleştirmeleri
- Belgeler: Giriş ve çıkış bağlamalarını kullanarak Azure İşlevleri tümleştirme (önizleme)
- Topluluk Blogu: Azure İşlevleri için Azure Veri Gezgini (Kusto) Bağlamaları
Azure IoT Hubs
Azure IoT Hub , bulutta barındırılan ve IoT uygulamanızla yönettiği cihazlar arasında çift yönlü iletişim için merkezi bir ileti hub'ı işlevi gören yönetilen bir hizmettir. Cihazdan buluta iletilerin yerleşik uç noktasıyla uyumlu Event Hubs kullanarak müşteri tarafından yönetilen IoT Hub'larından sürekli alım yapılandırabilirsiniz.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: IoT verileri
- Belgeler: IoT Hub veri bağlantısı
Azure Stream Analytics
Azure Stream Analytics , birden çok kaynaktan gelen yüksek hacimli hızlı akış verilerini aynı anda işlemek için tasarlanmış gerçek zamanlı bir analiz ve karmaşık olay işleme altyapısıdır.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Olay işleme
- Belgeler: Azure Stream Analytics'ten veri alma
Cribl Stream
Cribl stream , makine olay verilerini herhangi bir kaynaktan güvenli bir şekilde toplayan, işleyen ve akışla aktaran bir işleme altyapısıdır. Analiz için herhangi bir hedef için bu verileri ayrıştırmanıza ve işlemenize olanak tanır.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Günlükler, ölçümler, izleme verileri dahil olmak üzere makine verileri işleme
- Belgeler: Cribl Stream'den Azure Veri Gezgini'a veri alma
Fluent Bit
Fluent Bit , çeşitli kaynaklardan günlükleri, ölçümleri ve izlemeleri toplayan bir açık kaynak aracıdır. Olay verilerini depolama alanına göndermeden önce filtrelemenize, değiştirmenize ve toplamanıza olanak tanır.
- İşlevsellik: Alma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Günlükler, Ölçümler, İzlemeler
- Depo: fluent-bit Kusto Çıkış Eklentisi
- Belgeler: Fluent Bit ile azure Veri Gezgini veri alma
- Topluluk Blogu: Fluent bit ve Azure Veri Gezgini kullanmaya başlama
JDBC
Java Veritabanı Bağlantısı (JDBC), veritabanlarına bağlanmak ve sorguları yürütmek için kullanılan bir Java API'sidir. Azure Veri Gezgini'a bağlanmak için JDBC kullanabilirsiniz.
- İşlevsellik: Sorgu, görselleştirme
- Temel ALıNAN SDK: Java
- Belgeler: JDBC ile Azure Veri Gezgini bağlanma
Logic Apps
Microsoft Logic Apps bağlayıcısı, zamanlanmış veya tetiklenen bir görevin parçası olarak sorguları ve komutları otomatik olarak çalıştırmanıza olanak tanır.
- İşlevsellik: Alma, Dışarı Aktarma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Veri düzenleme
- Belgeler: Microsoft Logic Apps ve Azure Veri Gezgini
Logstash
Logstash eklentisi, daha sonra analiz için Logstash'ten Azure Veri Gezgini veritabanına olayları işlemenizi sağlar.
- İşlevsellik: Alma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Günlükler
- Temel ALıNAN SDK: Java
- Depo: Microsoft Azure - https://github.com/Azure/logstash-output-kusto/
- Belgeler: Logstash'ten veri alma
- Topluluk Blogu: Elasticsearch'ten Azure Veri Gezgini'a geçiş
Matlab
MATLAB, verileri analiz etmek, algoritmalar geliştirmek ve model oluşturmak için kullanılan bir programlama ve sayısal bilgi işlem platformudur. Azure Veri Gezgini'de verilerinizi sorgulamak için MATLAB'de yetkilendirme belirteci alabilirsiniz.
- İşlevsellik: Sorgu
- Belgeler: MATLAB kullanarak verileri sorgulama
NLog
NLog, .NET standardı dahil olmak üzere çeşitli .NET platformları için esnek ve ücretsiz bir günlük platformudur. NLog veritabanı, dosya veya konsol gibi çeşitli hedeflere yazmanızı sağlar. NLog ile günlük yapılandırmasını anında değiştirebilirsiniz. NLog havuzu, günlük iletilerinizi veritabanınıza göndermenizi sağlayan bir NLog hedefidir. Eklenti, günlüklerinizi kümenize batırmak için etkili bir yol sağlar.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Telemetri, Günlükler, Ölçümler
- Temel SDK: .NET
- Depo: Microsoft Azure - https://github.com/Azure/azure-kusto-nlog-sink
- Belgeler: NLog havuzuyla veri alma
- Topluluk Blogu: NLog havuzu ve Azure Veri Gezgini kullanmaya başlama
ODBC
Açık Veritabanı Bağlantısı (ODBC), veritabanı erişimi için yaygın olarak kabul edilen bir uygulama programlama arabirimidir (API). Azure Veri Gezgini, SQL Server iletişim protokolünün (MS-TDS) bir alt kümesiyle uyumludur. Bu uyumluluk, SQL Server için ODBC sürücüsünün Azure Veri Gezgini ile kullanılmasını sağlar.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Telemetri, Günlükler, Ölçümler
- Belgeler: ODBC ile Azure Veri Gezgini bağlanma
Telemetriyi Aç
OpenTelemetry bağlayıcısı , birçok alıcıdan veritabanınıza veri alımını destekler. Dışarı aktarılan verilerin biçimini ihtiyaçlarınıza göre özelleştirerek Açık telemetri tarafından oluşturulan verileri veritabanınıza almak için bir köprü olarak çalışır.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: İzlemeler, Ölçümler, Günlükler
- Temel ALıNAN SDK: Go
- Depo: Telemetriyi Aç - https://github.com/open-telemetry/opentelemetry-collector-contrib/tree/main/exporter/azuredataexplorerexporter
- Belgeler: OpenTelemetry'den veri alma
- Topluluk Blogu: Açık Telemetri ve Azure Veri Gezgini kullanmaya başlama
Power Apps
Power Apps , iş verilerinize bağlanan özel uygulamalar oluşturmak için hızlı bir uygulama geliştirme ortamı sağlayan bir uygulama, hizmet, bağlayıcı ve veri platformu paketidir. Power Apps bağlayıcısı, Azure Veri Gezgini'da akış verilerinin büyük ve büyüyen bir koleksiyonuna sahipseniz ve bu verileri kullanmak için düşük kodlu, yüksek oranda işlevsel bir uygulama oluşturmak istiyorsanız kullanışlıdır.
- İşlevsellik: Sorgu, Alma, Dışarı Aktarma
- Desteklenen alma türü: Toplu işlem
- Belgeler: Azure Veri Gezgini'de verileri sorgulamak için Power Apps'i kullanma
Power Automate
Power Automate , iş süreçlerini otomatikleştirmek için kullanılan bir düzenleme hizmetidir. Power Automate (daha önce Microsoft Flow) bağlayıcısı, zamanlanmış veya tetiklenen bir görevin parçası olarak akışları düzenlemenize ve zamanlamanıza, bildirimler ve uyarılar göndermenize olanak tanır.
- İşlevsellik: Alma, Dışarı Aktarma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Veri düzenleme
- Belgeler: Microsoft Power Automate bağlayıcısı
Serilog
Serilog, .NET uygulamalarına yönelik popüler bir günlük altyapısıdır. Serilog, geliştiricilerin günlükçü adı, günlükçü düzeyi ve ileti desenine göre rastgele ayrıntı düzeyiyle hangi günlük deyimlerinin çıkış olduğunu denetlemesine olanak tanır. Ekleyici olarak da bilinen Serilog havuzu, günlük verilerinizi veritabanınıza akışla aktararak günlüklerinizi gerçek zamanlı olarak analiz edebilir ve görselleştirebilirsiniz.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Günlükler
- Temel SDK: .NET
- Depo: Microsoft Azure - https://github.com/Azure/serilog-sinks-azuredataexplorer
- Belgeler: Serilog havuzuyla veri alma
- Topluluk Blogu: Serilog havuzu ve Azure Veri Gezgini kullanmaya başlama
Splunk
Splunk Enterprise, birçok kaynaktan aynı anda veri almanızı sağlayan bir yazılım platformudur. Azure Veri Gezgini eklentisi Splunk'tan kümenizdeki bir tabloya veri gönderir.
- İşlevsellik: Alma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Günlükler
- Temel ALıNAN SDK: Python
- Depo: Microsoft Azure - https://github.com/Azure/azure-kusto-splunk/tree/main/splunk-adx-alert-addon
- Belgeler: Splunk'tan veri alma
- Splunk Temeli: Splunk için Microsoft Azure Veri Gezgini Eklentisi
- Topluluk Blogu: Splunk için Microsoft Azure Veri Gezgini Eklentisi ile çalışmaya başlama
Splunk Evrensel İletici
- İşlevsellik: Alma
- Desteklenen alma türü: Toplu işlem
- Kullanım örnekleri: Günlükler
- Depo: Microsoft Azure - https://github.com/Azure/azure-kusto-splunk
- Belgeler: Splunk Evrensel İletici'den Azure Veri Gezgini'a veri alma
- Topluluk Blogu: Splunk Evrensel ileticiyi kullanarak Azure Veri Gezgini'a veri alma
Telegraf
Telegraf, günlükler, ölçümler ve IoT verileri de dahil olmak üzere telemetri verilerini toplamak, işlemek ve yazmak için açık kaynak, hafif, minimum bellek ayak izi aracısıdır. Telegraf yüzlerce giriş ve çıkış eklentisini destekler. Yaygın olarak kullanılır ve açık kaynak topluluğu tarafından iyi desteklenir. Çıkış eklentisi Telegraf'tan bağlayıcı görevi görür ve birçok giriş eklentisi türünden veritabanınıza veri alımını destekler.
- İşlevsellik: Alma
- Desteklenen alım türü: Toplu işlem, Akış
- Kullanım örnekleri: Telemetri, Günlükler, Ölçümler
- Temel ALıNAN SDK: Go
- Depo: InfluxData - https://github.com/influxdata/telegraf/tree/master/plugins/outputs/azure_data_explorer
- Belgeler: Telegraf'tan veri alma
- Topluluk Blogu:Telegraf için yeni Azure Veri Gezgini çıkış eklentisi büyük ölçekte SQL izlemeye olanak tanır