Caricare dati in un pool SQL dedicato in Azure Synapse Analytics con SQL Server Integration Services (SSIS)

  • Articolo

Si applica a: Azure Synapse Analytics

Creare un pacchetto di SQL Server Integration Services (SSIS) per caricare dati in un pool SQL dedicato in Azure Synapse Analytics. È anche possibile ristrutturare, trasformare e pulire i dati durante il passaggio attraverso il flusso di dati SSIS.

Questo articolo illustra come eseguire le operazioni seguenti:

  • Creare un nuovo progetto di Integration Services in Visual Studio.
  • Progettare un pacchetto SSIS che carica i dati dall'origine nella destinazione.
  • Eseguire il pacchetto SSIS per caricare i dati.

Concetti fondamentali

Il pacchetto è l'unità di lavoro di base in SSIS. I pacchetti correlati vengono raggruppati in progetti. I progetti e pacchetti di progettazione in Visual Studio vengono creati con SQL Server Data Tools. Il processo di progettazione è un processo visivo in cui l'utente trascina e rilascia i componenti dalla casella degli strumenti all'area di progettazione, li connette e ne imposta le proprietà. Dopo aver completato il pacchetto, è possibile eseguirlo e distribuirlo facoltativamente in SQL Server o nel database SQL per usufruire di strumenti completi per gestione, monitoraggio e sicurezza.

Un'introduzione dettagliata a SSIS esula dagli scopi di questo articolo. Per ulteriori informazioni, vedere gli articoli seguenti:

Opzioni per il caricamento dei dati in Azure Synapse Analytics con SSIS

SQL Server Integration Services (SSIS) è un set di strumenti flessibile che offre un'ampia gamma di opzioni per la connessione e il caricamento dei dati in Azure Synapse Analytics.

  1. Il metodo preferito, che offre le migliori prestazioni, consiste nel creare un pacchetto che usa l'attività Azure SQL DW Upload (Caricamento Azure SQL Data Warehouse) per caricare i dati. Questa attività incapsula le informazioni sia sull'origine che sulla destinazione. Si presuppone che i dati di origine siano archiviati in locale in file di testo delimitato.

  2. In alternativa, è possibile creare un pacchetto che usa un'attività Flusso di dati che contiene un'origine e destinazione. Questo approccio supporta un'ampia gamma di origini dati, tra cui SQL Server e Azure Synapse Analytics.

Prerequisiti

Per eseguire questa esercitazione, sono necessari:

  1. SQL Server Integration Services (SSIS). SSIS è un componente di SQL Server e richiede una versione con licenza o la versione per sviluppatori o la versione di valutazione di SQL Server. Per ottenere una versione di valutazione di SQL Server, vedere Evaluation Center per SQL Server.
  2. Visual Studio (facoltativo). Per ottenere l'edizione gratuita di Visual Studio Community, vedere Visual Studio Community. Se non si vuole installare Visual Studio, è possibile installare solo SQL Server Data Tools (SSDT). SSDT installa una versione di Visual Studio con funzionalità limitate.
  3. SQL Server Data Tools per Visual Studio (SSDT). Per ottenere SQL Server Data Tools per Visual Studio, vedere Scaricare SQL Server Data Tools (SSDT).
  4. Database di Azure Synapse Analytics e autorizzazioni. Questa esercitazione consente di connettersi a un pool SQL dedicato nell'istanza di Azure Synapse Analytics e di caricare dati in tale pool. È necessario avere le autorizzazioni per connettersi, creare una tabella e caricare i dati.

Creare un nuovo progetto di Integration Services

  1. Avviare Visual Studio.
  2. Scegliere Nuovo progetto dal menu File.
  3. Andare ai tipi di progetto Installati | Progetti | Business Intelligence | Integration Services.
  4. Selezionare Progetto di Integration Services. Specificare i valori per Nome e Percorso e quindi selezionare OK.

Viene aperto Visual Studio e viene creato un nuovo progetto di Integration Services (SSIS). Visual Studio apre quindi la finestra di progettazione per il singolo nuovo pacchetto SSIS (package.dtsx) nel progetto. Vengono visualizzate le aree della schermata seguenti:

  • A sinistra, la Casella degli strumenti dei componenti SSIS.

  • Al centro, l'area di progettazione con più schede. In genere si usano almeno le schede Flusso di controllo e il Flusso di dati.

  • A destra, i riquadri Esplora soluzioni e Proprietà.

    Screenshot di Visual Studio che mostra il riquadro Casella degli strumenti, il riquadro Progettazione, il riquadro Esplora soluzioni e il riquadro Proprietà.

Opzione 1 - Usare l'attività SQL DW Upload (Caricamento SQL Data Warehouse)

Il primo approccio è un pacchetto che usa l'attività SQL DW Upload (Caricamento SQL Data Warehouse). Questa attività incapsula le informazioni sia sull'origine che sulla destinazione. Si presuppone che i dati di origine siano archiviati in file di testo delimitati, in locale o in Archiviazione BLOB di Azure.

Prerequisiti per l'opzione 1

Per continuare l'esercitazione con questa opzione, è necessario quanto segue:

  • Microsoft SQL Server Integration Services Feature Pack per Azure. L'attività SQL DW Upload (Caricamento SQL Data Warehouse) è un componente del Feature Pack.

  • Un account di Archiviazione BLOB di Azure. L'attività SQL DW Upload carica i dati da Archiviazione BLOB di Azure in Azure Synapse Analytics. È possibile caricare file già presenti nell'archivio BLOB oppure è possibile caricare i file dal computer. Se si selezionano i file nel computer in uso, l'attività SQL DW Upload (Caricamento SQL Data Warehouse) li carica prima di tutto nell'archivio BLOB per lo staging e quindi li carica nel pool SQL dedicato.

Aggiungere e configurare l'attività SQL DW Upload (Caricamento SQL Data Warehouse)

  1. Trascinare un'attività SQL DW Upload (Caricamento SQL Data Warehouse) dalla casella degli strumenti al centro dell'area di progettazione (nella scheda Flusso di controllo).

  2. Fare doppio clic sull'attività per aprire l'editor dell'attività SQL DW Upload (Caricamento SQL Data Warehouse).

    Pagina Generale dell'editor dell'attività SQL DW Upload (Caricamento SQL Data Warehouse)

  3. Configurare l'attività con l'aiuto delle istruzioni disponibili nell'articolo Azure SQL DW Upload Task (Attività Caricamento SQL Data Warehouse). Dato che questa attività incapsula sia informazioni sull'origine che sulla destinazione e i mapping tra le tabelle di origine e di destinazione, l'editor dell'attività include numerose pagine di impostazioni da configurare.

Creare una soluzione simile manualmente

Per un maggiore controllo, è possibile creare manualmente un pacchetto che emula il lavoro svolto dall'attività SQL DW Upload (Caricamento SQL Data Warehouse).

  1. Usare l'attività di caricamento BLOB di Azure per eseguire lo staging dei dati nell'archivio BLOB di Azure. Per ottenere l'attività di caricamento BLOB di Azure, scaricare Microsoft SQL Server Integration Services Feature Pack per Azure.

  2. Usare quindi l'attività Esegui SQL di SSIS per avviare uno script PolyBase che carica i dati nel pool SQL dedicato. Per un esempio che carica dati da Archiviazione BLOB di Azure in un pool SQL dedicato (ma non con SSIS), vedere Esercitazione: caricare dati in Azure Synapse Analytics.

Opzione 2 - Usare un'origine e una destinazione

Il secondo approccio è un pacchetto tipico che usa un'attività Flusso di dati che contiene un'origine e una destinazione. Questo approccio supporta un'ampia gamma di origini dati, tra cui SQL Server e Azure Synapse Analytics.

Questa esercitazione usa SQL Server come origine dati. SQL Server può essere eseguito in locale o in una macchina virtuale di Azure.

Per connettersi a SQL Server e a un pool SQL dedicato, è possibile usare una gestione connessione ADO.NET e un'origine e una destinazione oppure una gestione connessione OLE DB e un'origine e una destinazione. Questa esercitazione usa ADO NET perché prevede il minor numero di opzioni di configurazione. OLE DB può offrire prestazioni leggermente migliori rispetto ad ADO NET.

Per velocizzare l'operazione, è possibile usare Importazione/Esportazione guidata SQL Server per creare il pacchetto di base. Quindi, salvare il pacchetto e aprirlo in Visual Studio o SSDT per visualizzarlo e personalizzarlo. Per altre informazioni, vedere Importare ed esportare dati con l'Importazione/Esportazione guidata SQL Server.

Prerequisiti per l'opzione 2

Per continuare l'esercitazione con questa opzione, è necessario quanto segue:

  1. Dati di esempio. Questa esercitazione usa i dati di esempio archiviati in SQL Server nel database di esempio AdventureWorks come dati di origine da caricare in un pool SQL dedicato. Per ottenere il database di esempio AdventureWorks, vedere Database di esempio AdventureWorks.

  2. Una regola del firewall. È necessario creare una regola del firewall nel pool SQL dedicato con l'indirizzo IP del computer locale prima di poter caricare dati nel pool SQL dedicato.

Creare il flusso di dati di base

  1. Trascinare un'attività Flusso di dati dalla casella degli strumenti al centro dell'area di progettazione (nella scheda Flusso di controllo).

    Screenshot di Visual Studio che mostra un'attività Flusso di dati trascinata nella scheda Flusso di controllo del riquadro Progettazione.

  2. Fare doppio clic sull'attività Flusso di dati per passare alla scheda Flusso di dati.

  3. Dall'elenco Altre origini nella casella degli strumenti trascinare un'origine ADO.NET nell'area di progettazione. Con l'adattatore di origine ancora selezionato, modificare il nome su Origine SQL Server nel riquadro Proprietà.

  4. Dall'elenco Altre destinazioni nella casella degli strumenti,trascinare una destinazione ADO.NET all'area di progettazione sotto l'origine ADO.NET. Con l'adattatore di destinazione ancora selezionato, modificare il nome su Destinazione SQL DW nel riquadro Proprietà.

    Screenshot di un adattatore di destinazione trascinato in una posizione direttamente sotto l'adattatore di origine.

Configurare l'adattatore di origine

  1. Fare doppio clic sull'adattatore di origine per aprire l'Editor origine ADO.NET.

    Screenshot dell'Editor origine ADO.NET. La scheda Gestione connessioni è visibile e sono disponibili controlli per la configurazione delle proprietà del flusso di dati.

  2. Nella scheda Gestione connessione della finestra Editor origine ADO.NET fare clic sul pulsante Nuovo accanto all'elenco Gestione connessione ADO.NET per aprire la finestra di dialogo Configura gestione connessione ADO.NET e creare le impostazioni di connessione per il database di SQL Server da cui questa esercitazione carica i dati.

    Screenshot della finestra di dialogo Configura gestione connessione ADO.NET. Sono disponibili controlli per l'installazione e la configurazione delle gestioni connessioni.

  3. Nella finestra di dialogo Configura gestione connessione ADO.NET fare clic sul pulsante Nuovo per aprire la finestra di dialogo Gestione connessione e creare una nuova connessione dati.

    Screenshot della finestra di dialogo Gestione connessione. Sono disponibili controlli per la configurazione di una connessione dati.

  4. Nella finestra di dialogo Gestione connessione eseguire le operazioni seguenti.

    1. Per Provider selezionare il provider di dati SqlClient.

    2. Per Nome server immettere il nome di SQL Server.

    3. Nella sezione Accesso al server selezionare o immettere le informazioni di autenticazione.

    4. Nella sezione Connessione a un database selezionare il database di esempio AdventureWorks.

    5. Fare clic su Verifica connessione.

      Screenshot di una finestra di dialogo in cui sono visualizzati un pulsante OK e un testo che indica che la connessione di test è riuscita.

    6. Nella finestra di dialogo che indica i risultati del test di connessione fare clic su OK per tornare alla finestra di dialogo Gestione connessione.

    7. Nella finestra di dialogo Gestione connessione fare clic su OK per ritornare alla finestra di dialogo Configura gestione connessione ADO.NET.

  5. Nella finestra di dialogo Configura gestione connessione ADO.NET fare clic su OK per ritornare all'Editor origine ADO.NET.

  6. Nell'Editor origine ADO.NET selezionare la tabella Sales.SalesOrderDetail nell'elenco Nome tabella o vista.

    Screenshot dell'Editor origine ADO.NET. Nell'elenco Nome tabella o vista è selezionata la tabella Sales.SalesOrderDetail.

  7. Fare clic su Anteprima per visualizzare le prime 200 righe di dati nella tabella di origine nella finestra di dialogo Anteprima risultati query.

    Screenshot della finestra di dialogo Anteprima risultati query. Sono visibili diverse righe di dati di vendita della tabella di origine.

  8. Nella finestra di dialogo Anteprima risultati query fare clic su Chiudi per ritornare all'Editor origine ADO.NET.

  9. Nell'Editor origine ADO.NET fare clic su OK per completare la configurazione dell'origine dati.

Connettere l'adattatore di origine all'adattatore di destinazione

  1. Selezionare l'adattatore di origine nell'area di progettazione.

  2. Selezionare la freccia blu che si estende dall'adattatore di origine e trascinarla nell'editor di destinazione fino al completo inserimento.

    Screenshot che mostra gli adattatori di origine e di destinazione. Una freccia blu collega l'adattatore di origine all'adattatore di destinazione.

    In un pacchetto SSIS tipico è possibile usare diversi altri componenti dalla casella degli strumenti SSIS tra l'origine e la destinazione per ristrutturare, trasformare e pulire i dati mentre attraversano il flusso di dati SSIS. Per mantenere questo esempio il più semplice possibile, viene eseguita la connessione dell'origine direttamente alla destinazione.

Configurare l'adattatore di destinazione

  1. Fare doppio clic sull'adattatore di destinazione per aprire l'Editor destinazione ADO.NET.

    Screenshot dell'Editor destinazione ADO.NET. La scheda Gestione connessione è visibile e contiene controlli per la configurazione delle proprietà del flusso di dati.

  2. Nella scheda Gestione connessione di Editor di destinazione ADO.NET, fare clic sul pulsante Nuovo accanto all'elenco Gestione connessione per aprire la finestra di dialogo Configura gestione connessione ADO.NET e specificare le impostazioni di connessione per il database di Azure Synapse Analytics. In questa esercitazione i dati verranno caricati in questo database.

  3. Nella finestra di dialogo Configura gestione connessione ADO.NET fare clic sul pulsante Nuovo per aprire la finestra di dialogo Gestione connessione e creare una nuova connessione dati.

  4. Nella finestra di dialogo Gestione connessione eseguire le operazioni seguenti.

    1. Per Provider selezionare il provider di dati SqlClient.
    2. Per Nome server immettere il nome del pool SQL dedicato.
    3. Nella sezione Accesso al server selezionare Usa autenticazione di SQL Server e immettere le informazioni di autenticazione.
    4. Nella sezione Connessione a un database selezionare un database del pool SQL dedicato esistente.
    5. Fare clic su Verifica connessione.
    6. Nella finestra di dialogo che indica i risultati del test di connessione fare clic su OK per tornare alla finestra di dialogo Gestione connessione.
    7. Nella finestra di dialogo Gestione connessione fare clic su OK per ritornare alla finestra di dialogo Configura gestione connessione ADO.NET.

  5. Nella finestra di dialogo Configura gestione connessione ADO.NET fare clic su OK per ritornare all'Editor destinazione ADO.NET.

  6. Nell'Editor destinazione ADO.NET fare clic su Nuovo accanto all'elenco Tabella o vista per visualizzare la finestra di dialogo Crea tabella per creare una nuova tabella di destinazione con un elenco di colonne che corrisponde alla tabella di origine.

    Screenshot della finestra di dialogo Crea tabella. È visibile il codice SQL per la creazione di una tabella di destinazione.

  7. Nella finestra di dialogo Crea tabella eseguire le operazioni seguenti.

    1. Modificare il nome della tabella di destinazione su SalesOrderDetail.

    2. Rimuovere la colonna rowguid. Il tipo di dati uniqueidentifier non è supportato nel pool SQL dedicato.

    3. Modificare il tipo di dati della colonna LineTotal su money. Il tipo di dati decimal non è supportato nel pool SQL dedicato. Per informazioni sui tipi di dati supportati, vedere CREATE TABLE (Azure Synapse Analytics, Parallel Data Warehouse).

      Screenshot della finestra di dialogo Crea tabella con il codice per creare una tabella denominata SalesOrderDetail con LineTotal come colonna money e nessuna colonna rowguid.

    4. Fare clic su OK per creare la tabella e ritornare all'Editor destinazione ADO.NET.

  8. Nell'Editor destinazione ADO.NET selezionare la scheda Mapping per visualizzare come le colonne nell'origine vengono mappate alle colonne nella destinazione.

    Screenshot della scheda Mapping dell'Editor destinazione ADO.NET. Le linee collegano le colonne con nomi identici nelle tabelle di origine e di destinazione.

  9. Fare clic su OK per completare la configurazione della destinazione.

Eseguire il pacchetto per caricare i dati

Eseguire il pacchetto facendo clic sul pulsante Avvia della barra degli strumenti o selezionando una delle opzioni Esegui nel menu Debug.

I paragrafi seguenti descrivono i risultati visualizzati se si crea il pacchetto con la seconda opzione descritta in questo articolo, vale a dire con un flusso di dati che contiene un'origine e una destinazione.

Quando inizia l'esecuzione del pacchetto si possono osservare delle ruote gialle in rotazione che indicano l'attività e il numero di righe elaborate fino a ora.

Screenshot che mostra gli adattatori di origine e di destinazione con ruote gialle in rotazione sopra ogni adattatore, tra i quali è presente il testo

Quando l'esecuzione del pacchetto è terminata vengono visualizzati dei segni di spunta verdi che indicano l'esito positivo e il numero totale di righe di dati caricati dall'origine alla destinazione.

Screenshot che mostra gli adattatori di origine e di destinazione. Sopra ogni adattatore si trovano segni di spunta verdi e tra di essi è presente il testo

Complimenti. I dati sono stati caricati in Azure Synapse Analytics tramite SQL Server Integration Services.

Passaggi successivi