Qlik Replicate に接続する

  • [アーティクル]

重要

この機能はパブリック プレビュー段階にあります。

Qlik Replicate を使用すると、複数のデータ ソース (Oracle、Microsoft SQL Server、SAP、メインフレームなど) から Delta Lake にデータをプルできます。 レプリケートの自動変更データ キャプチャ (CDC) を使用すると、手動でデータを抽出し、API スクリプトを使用して転送し、切り取り、ステージング、インポート、という作業負荷を避けることができます。 Qlik Compose は、Delta Lake での CDC を自動化します。

注意

Delta Lake でのデータ分析に有用なソリューションである Qlik Sense の詳細については、「Qlik Sense」を参照してください。

Qlik Replicate の一般的なデモについては、次の YouTube ビデオ (14 分) をご覧ください。

Qlik Replicate を使用したデータ パイプラインのデモについては、次の YouTube ビデオ (6 分) を参照してください。

Azure Databricks で Qlik Replicate を使用する手順を次に示します。

手順 1: Databricks 個人用アクセス トークンを生成する

Qlik Replicate は、Azure Databricks 個人用アクセス トークンを使用して、Azure Databricks との認証を行います。

注意

セキュリティのベスト プラクティスとして、自動化ツール、システム、スクリプト、アプリを使用して認証する場合、Databricks では、ワークスペース ユーザーではなくサービス プリンシパルに属する個人用アクセス トークンを使用することを推奨しています。 サービス プリンシパルのトークンを作成するには、「サービス プリンシパルのトークンを管理する」をご覧ください。

手順 2: 統合のニーズをサポートするためにクラスターを設定する

Qlik Replicate は Azure Data Lake Storage パスにデータを書き込み、Azure Databricks 統合クラスターは、その場所からデータを読み取ります。 そのため、統合クラスターには、Azure Data Lake Storage パスへのセキュリティで保護されたアクセスが必要です。

Azure Data Lake Storage パスへのアクセスをセキュリティで保護する

Azure Data Lake Storage (ADLS) のデータへのアクセスをセキュリティで保護するには、Azure ストレージ アカウント アクセス キー (推奨) または Microsoft Entra ID サービス プリンシパルを使用できます。

Azure ストレージ アカウント アクセス キーを使用する

Spark 構成の一部として、統合クラスターでストレージ アカウントのアクセス キーを構成できます。 ストレージ アカウントが、ステージング データに使用される ADLS コンテナーとファイル システム、Delta Lake テーブルを書き込む ADLS コンテナーとファイル システムにアクセスできることを確認します。 キーを使用するように統合クラスターを構成するには、「Azure Data Lake Storage Gen2 と Blob Storage に接続する」に記載されている手順に従います。

Microsoft Entra ID サービス プリンシパルを使用する

Spark 構成の一部として、Azure Databricks 統合クラスターでサービス プリンシパルを構成できます。 サービス プリンシパルが、ステージング データに使用される ADLS コンテナーと、Delta テーブルを書き込む ADLS コンテナーにアクセスできることを確認します。 サービス プリンシパルを使用する統合クラスターを構成するには、「サービス プリンシパルを使用して ADLS Gen2 にアクセスする」の手順に従います。

クラスター構成の指定

  1. [クラスター モード] を [Standard] に設定します。

  2. [Databricks Runtime のバージョン] を Databricks Runtime のバージョンに設定します。

  3. Spark 構成に次のプロパティを追加して、最適化された書き込みと自動圧縮を有効にします。

    spark.databricks.delta.optimizeWrite.enabled true
spark.databricks.delta.autoCompact.enabled true

  4. 統合とスケーリングのニーズに応じて、クラスターを構成します。

クラスター構成の詳細については、「コンピューティング構成リファレンス」を参照してください。

JDBC URL と HTTP パスを取得する手順については、「Azure Databricks コンピューティング リソースの接続の詳細を取得する」を参照してください。

手順 3: クラスターに接続するための JDBC 接続と ODBC 接続の詳細を取得する

Azure Databricks クラスターを Qlik Replicate に接続するには、次の JDBC/ODBC 接続プロパティが必要です。

  • JDBC URL
  • HTTP パス

手順 4: Azure Databricks で Qlik Replicate を構成する

「Qlik」ログイン ページにアクセスし、指示に従います。

その他の技術情報

サポート