Преобразование данных путем выполнения действия определения задания Spark
Действие "Определение задания Spark" в Фабрике данных для Microsoft Fabric позволяет создавать подключения к определениям заданий Spark и запускать их из конвейера данных.
Необходимые компоненты
Чтобы приступить к работе, необходимо выполнить следующие предварительные требования:
- Учетная запись клиента с активной подпиской. Создайте учетную запись бесплатно .
- Создается рабочая область.
Добавление действия определения задания Spark в конвейер с пользовательским интерфейсом
Создайте конвейер данных в рабочей области.
Найдите определение задания Spark на домашнем экране карта и выберите его или выберите действие на панели действий, чтобы добавить его на холст конвейера.
Создание действия на домашнем экране карта:
Создание действия на панели действий:
Выберите новое действие определения задания Spark на холсте редактора конвейера, если оно еще не выбрано.
Ознакомьтесь с руководством по общим параметрам , чтобы настроить параметры, найденные на вкладке "Общие параметры ".
Параметры действия определения задания Spark
Выберите вкладку Параметры в области свойств действия, а затем выберите рабочую область Fabric, содержащую определение задания Spark, которое вы хотите запустить.
Известные ограничения
Текущие ограничения в действии определения заданий Spark для фабрики данных Fabric перечислены здесь. Этот раздел подлежит изменению.
- В настоящее время мы не поддерживаем создание нового действия определения задания Spark в действии (в Параметры)
- Поддержка параметризации недоступна.
- Хотя мы поддерживаем мониторинг действия с помощью вкладки вывода, вы еще не можете отслеживать определение задания Spark на более детальном уровне. Например, ссылки на страницу мониторинга, состояние, длительность и предыдущие запуски определения задания Spark недоступны непосредственно в фабрике данных. Однако на странице мониторинга определения задания Spark можно просмотреть более подробные сведения.
Сохранение и запуск или планирование конвейера
После настройки других действий, необходимых для конвейера, перейдите на вкладку "Главная" в верхней части редактора конвейера и нажмите кнопку "Сохранить", чтобы сохранить конвейер. Выберите "Запустить ", чтобы запустить его напрямую, или запланировать его. Вы также можете просмотреть журнал выполнения здесь или настроить другие параметры.
