Подключение к внешним системам
Azure Databricks обеспечивает встроенную интеграцию со многими облачными системами данных, а также расширяемую поддержку JDBC для подключения к другим системам данных.
Соединители, описанные в этом разделе, в основном сосредоточены на настройке подключения к одной таблице во внешней системе данных. Некоторые из этих драйверов также можно использовать для записи данных в внешние системы.
Для подключений к данным только для чтения Databricks рекомендуется использовать Федерацию Lakehouse, которая позволяет синхронизировать все базы данных с Azure Databricks из внешних систем и управляется каталогом Unity. См. статью "Что такое Федерация Lakehouse?".
Partner Connect также обеспечивает интеграцию со многими популярными корпоративными системами данных. Многие решения Partner Connect не только подключаются к источникам данных, но и упрощают хранение данных в lakehouse свежими. См. статью Что такое Databricks Partner Connect?.
Какие источники данных подключаются к Azure Databricks с помощью JDBC?
JDBC можно использовать для подключения ко многим источникам данных. Databricks Runtime включает драйверы для ряда баз данных JDBC, но может потребоваться установить драйвер или другую версию драйвера для подключения к предпочтительной базе данных. К поддерживаемым базам данных относятся следующие:
- Запрос PostgreSQL с помощью Azure Databricks
- Запрос MySQL с помощью Azure Databricks
- Запрос MariaDB с помощью Azure Databricks
- Запрос SQL Server с помощью Azure Databricks
- Использование соединителя Databricks для подключения к другой рабочей области Databricks
С какими службами данных интегрируется Azure Databricks?
Следующие службы данных требуют настройки параметров подключения, учетных данных безопасности и параметров сети. Возможно, вам потребуется права администратора или пользователя power в вашей учетной записи Azure или рабочей области Azure Databricks. Для некоторых также нужно создать библиотеку Azure Databricks и установить ее в кластере.