az synapse spark job

  • Başvuru

Synapse Spark toplu işlerini yönetin.

Komutlar

Name Description Tür Durum
az synapse spark job cancel

Spark işini iptal etme.

 Temel GA
az synapse spark job list

Tüm Spark işlerini listeleyin.

 Temel GA
az synapse spark job show

Spark işi edinin.

 Temel GA
az synapse spark job submit

Spark işi gönderin.

 Temel GA

az synapse spark job cancel

Düzenle

Spark işini iptal etme.

az synapse spark job cancel --livy-id
                            --spark-pool-name
                            --workspace-name
                            [--yes]

Örnekler

Spark işini iptal etme.

az synapse spark job cancel --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Gerekli Parametreler

--livy-id

Spark işinin kimliği.

--spark-pool-name

Spark havuzunun adı.

--workspace-name

Çalışma alanının adı.

İsteğe Bağlı Parametreler

--yes -y

Onay istemde bulunmayın.

Default value: False
Global Parametreler
--debug

Tüm hata ayıklama günlüklerini göstermek için günlük ayrıntı düzeyini artırın.

--help -h

Bu yardım iletisini göster ve çık.

--only-show-errors

Yalnızca hataları gösterir ve uyarıları gizler.

--output -o

Çıkış biçimi.

Kabul edilen değerler: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath sorgu dizesi. Daha fazla bilgi ve örnek için bkz http://jmespath.org/ .

--subscription

Aboneliğin adı veya kimliği. kullanarak az account set -s NAME_OR_IDvarsayılan aboneliği yapılandırabilirsiniz.

--verbose

Günlük ayrıntı düzeyini artırın. Tam hata ayıklama günlükleri için --debug komutunu kullanın.

az synapse spark job list

Düzenle

Tüm Spark işlerini listeleyin.

az synapse spark job list --spark-pool-name
                          --workspace-name
                          [--from-index]
                          [--size]

Örnekler

Tüm Spark işlerini listeleyin.

az synapse spark job list --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Gerekli Parametreler

--spark-pool-name

Spark havuzunun adı.

--workspace-name

Çalışma alanının adı.

İsteğe Bağlı Parametreler

--from-index

Listenin hangi dizinden başlaması gerektiğini belirten isteğe bağlı parametre.

--size

Döndürülen listenin boyutu. Varsayılan olarak en fazla 20'dir.

Global Parametreler
--debug

Tüm hata ayıklama günlüklerini göstermek için günlük ayrıntı düzeyini artırın.

--help -h

Bu yardım iletisini göster ve çık.

--only-show-errors

Yalnızca hataları gösterir ve uyarıları gizler.

--output -o

Çıkış biçimi.

Kabul edilen değerler: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath sorgu dizesi. Daha fazla bilgi ve örnek için bkz http://jmespath.org/ .

--subscription

Aboneliğin adı veya kimliği. kullanarak az account set -s NAME_OR_IDvarsayılan aboneliği yapılandırabilirsiniz.

--verbose

Günlük ayrıntı düzeyini artırın. Tam hata ayıklama günlükleri için --debug komutunu kullanın.

az synapse spark job show

Düzenle

Spark işi edinin.

az synapse spark job show --livy-id
                          --spark-pool-name
                          --workspace-name

Örnekler

Spark işi edinin.

az synapse spark job show --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Gerekli Parametreler

--livy-id

Spark işinin kimliği.

--spark-pool-name

Spark havuzunun adı.

--workspace-name

Çalışma alanının adı.

Global Parametreler
--debug

Tüm hata ayıklama günlüklerini göstermek için günlük ayrıntı düzeyini artırın.

--help -h

Bu yardım iletisini göster ve çık.

--only-show-errors

Yalnızca hataları gösterir ve uyarıları gizler.

--output -o

Çıkış biçimi.

Kabul edilen değerler: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath sorgu dizesi. Daha fazla bilgi ve örnek için bkz http://jmespath.org/ .

--subscription

Aboneliğin adı veya kimliği. kullanarak az account set -s NAME_OR_IDvarsayılan aboneliği yapılandırabilirsiniz.

--verbose

Günlük ayrıntı düzeyini artırın. Tam hata ayıklama günlükleri için --debug komutunu kullanın.

az synapse spark job submit

Düzenle

Spark işi gönderin.

az synapse spark job submit --executor-size {Large, Medium, Small}
                            --executors
                            --main-definition-file
                            --name
                            --spark-pool-name
                            --workspace-name
                            [--archives]
                            [--arguments]
                            [--configuration]
                            [--language {CSharp, PySpark, Python, Scala, Spark, SparkDotNet}]
                            [--main-class-name]
                            [--python-files]
                            [--reference-files]
                            [--tags]

Örnekler

Bir Java Spark işi gönderin.

az synapse spark job submit --name WordCount_Java --workspace-name testsynapseworkspace \
--spark-pool-name testsparkpool \
--main-definition-file abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/wordcount.jar \
--main-class-name WordCount \
--arguments abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/shakespeare.txt \
abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/result/ \
--executors 2 --executor-size Small

Gerekli Parametreler

--executor-size

Yürütücü boyutu.

Kabul edilen değerler: Large, Medium, Small
--executors

Yürütücü sayısı.

--main-definition-file

İş için kullanılan ana dosya.

--name -n

Spark iş adı.

--spark-pool-name

Spark havuzunun adı.

--workspace-name

Çalışma alanının adı.

İsteğe Bağlı Parametreler

--archives

Arşiv dizisi.

--arguments

İşin isteğe bağlı bağımsız değişkenleri (Not: Lütfen dosya bağımsız değişkenleri için depolama URI'lerini kullanın).

--configuration

Spark işinin yapılandırması.

--language

Spark iş dili.

Kabul edilen değerler: CSharp, PySpark, Python, Scala, Spark, SparkDotNet
Default value: Scala
--main-class-name

Tam tanımlayıcı veya ana tanım dosyasındaki ana sınıf.

--python-files

Ana python tanım dosyasında yeniden sınırlama için kullanılan dosya dizisi. Özel whl dosyaları ve özel python dosyaları buna örnek olarak verilebilir. "az synapse spark job sumbit <other_args> --python_files abfss://file1 abss://file2" gibi birden çok dosya geçirebilir.

--reference-files

Ana tanım dosyasında başvuru için kullanılan ek dosyalar.

--tags

Boşlukla ayrılmış etiketler: key[=value] [key[=value] ...]. Mevcut etiketleri temizlemek için "" kullanın.

Global Parametreler
--debug

Tüm hata ayıklama günlüklerini göstermek için günlük ayrıntı düzeyini artırın.

--help -h

Bu yardım iletisini göster ve çık.

--only-show-errors

Yalnızca hataları gösterir ve uyarıları gizler.

--output -o

Çıkış biçimi.

Kabul edilen değerler: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath sorgu dizesi. Daha fazla bilgi ve örnek için bkz http://jmespath.org/ .

--subscription

Aboneliğin adı veya kimliği. kullanarak az account set -s NAME_OR_IDvarsayılan aboneliği yapılandırabilirsiniz.

--verbose

Günlük ayrıntı düzeyini artırın. Tam hata ayıklama günlükleri için --debug komutunu kullanın.