azdata bdc spark batch
S’applique à : Azure Data CLI ()azdata
L’article suivant fournit des informations de référence sur les commandes sql dans l’outil azdata. Pour plus d’informations sur les commandes azdata, consultez azdata reference
Commandes
Command | Description |
---|---|
azdata bdc spark batch create | Créez un nouveau lot Spark. |
azdata bdc spark batch list | Répertoriez tous les lots dans Spark. |
azdata bdc spark batch info | Obtenez des informations sur un lot Spark actif. |
azdata bdc spark batch log | Obtenez des journaux d’exécution pour un lot Spark. |
azdata bdc spark batch state | Obtenez un état d’exécution pour un lot Spark. |
azdata bdc spark batch delete | Supprimez un lot Spark. |
azdata bdc spark batch create
Cela crée un nouveau lot de tâches Spark qui exécute le code fourni.
azdata bdc spark batch create --file -f
[--class-name -c]
[--arguments -a]
[--jar-files -j]
[--py-files -p]
[--files]
[--driver-memory]
[--driver-cores]
[--executor-memory]
[--executor-cores]
[--executor-count]
[--archives]
[--queue -q]
[--name -n]
[--config]
Exemples
Créez un nouveau lot Spark.
azdata spark batch create --code "2+2"
Paramètres obligatoires
--file -f
Chemin d’accès au fichier à exécuter.
Paramètres facultatifs
--class-name -c
Nom de la classe à exécuter lors du passage d’un ou de plusieurs fichiers jar.
--arguments -a
Liste d'arguments. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».
--jar-files -j
Liste des chemins d’accès aux fichiers jar. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».
--py-files -p
Liste des chemins d’accès de fichier Python. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».
--files
Liste des chemins d’accès de fichier. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».
--driver-memory
Quantité de mémoire à allouer au pilote. Spécifiez les unités dans le cadre de la valeur. Exemple 512 M ou 2 G.
--driver-cores
Quantité de cœurs UC à allouer au pilote.
--executor-memory
Quantité de mémoire à allouer à l’exécuteur. Spécifiez les unités dans le cadre de la valeur. Exemple 512 M ou 2 G.
--executor-cores
Quantité de cœurs UC à allouer à l’exécuteur.
--executor-count
Nombre d'instances de l’exécuteur à exécuter.
--archives
Liste des chemins d’accès à l’archive. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».
--queue -q
Nom de la file d’attente Spark dans laquelle exécuter la session.
--name -n
Nom de la session Spark.
--config
Liste de paires nom/valeur contenant des valeurs de configuration Spark. Encodé en tant que dictionnaire JSON. Exemple : « {"name":"value", "name2":"value2"} ».
Arguments globaux
--debug
Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.
--help -h
Affichez ce message d’aide et quittez.
--output -o
Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.
--query -q
Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.
--verbose
Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.
azdata bdc spark batch list
Répertoriez tous les lots dans Spark.
azdata bdc spark batch list
Exemples
Répertoriez tous les lots actifs.
azdata spark batch list
Arguments globaux
--debug
Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.
--help -h
Affichez ce message d’aide et quittez.
--output -o
Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.
--query -q
Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.
--verbose
Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.
azdata bdc spark batch info
Permet d’obtenir les informations pour un lot Spark avec l’ID donné. L’ID de lot est retourné à partir de « spark batch create ».
azdata bdc spark batch info --batch-id -i
Exemples
Obtenez les informations du lot avec l’ID 0.
azdata spark batch info --batch-id 0
Paramètres obligatoires
--batch-id -i
Numéro d’ID du lot Spark.
Arguments globaux
--debug
Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.
--help -h
Affichez ce message d’aide et quittez.
--output -o
Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.
--query -q
Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.
--verbose
Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.
azdata bdc spark batch log
Permet d’obtenir les entrées du journal de lots pour un lot Spark avec l’ID donné. L’ID de lot est retourné à partir de « spark batch create ».
azdata bdc spark batch log --batch-id -i
Exemples
Obtenez le journal de lots pour le lot avec l’ID 0.
azdata spark batch log --batch-id 0
Paramètres obligatoires
--batch-id -i
Numéro d’ID du lot Spark.
Arguments globaux
--debug
Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.
--help -h
Affichez ce message d’aide et quittez.
--output -o
Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.
--query -q
Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.
--verbose
Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.
azdata bdc spark batch state
Permet d’obtenir l’état du lot pour un lot Spark avec l’ID donné. L’ID de lot est retourné à partir de « spark batch create ».
azdata bdc spark batch state --batch-id -i
Exemples
Obtenez l’état du lot avec l’ID 0.
azdata spark batch state --batch-id 0
Paramètres obligatoires
--batch-id -i
Numéro d’ID du lot Spark.
Arguments globaux
--debug
Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.
--help -h
Affichez ce message d’aide et quittez.
--output -o
Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.
--query -q
Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.
--verbose
Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.
azdata bdc spark batch delete
Cela supprime un lot Spark. L’ID de lot est retourné à partir de « spark batch create ».
azdata bdc spark batch delete --batch-id -i
Exemples
Supprimez un lot.
azdata spark batch delete --batch-id 0
Paramètres obligatoires
--batch-id -i
Numéro d’ID du lot Spark.
Arguments globaux
--debug
Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.
--help -h
Affichez ce message d’aide et quittez.
--output -o
Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.
--query -q
Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.
--verbose
Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.
Étapes suivantes
Pour plus d’informations sur les autres commandes azdata, consultez azdata reference.
Pour plus d’informations sur l’installation de l’outil azdata, consultez Installer azdata.