Partager via


azdata bdc spark batch

S’applique à : Azure Data CLI ()azdata

L’article suivant fournit des informations de référence sur les commandes sql dans l’outil azdata. Pour plus d’informations sur les commandes azdata, consultez azdata reference

Commandes

Command Description
azdata bdc spark batch create Créez un nouveau lot Spark.
azdata bdc spark batch list Répertoriez tous les lots dans Spark.
azdata bdc spark batch info Obtenez des informations sur un lot Spark actif.
azdata bdc spark batch log Obtenez des journaux d’exécution pour un lot Spark.
azdata bdc spark batch state Obtenez un état d’exécution pour un lot Spark.
azdata bdc spark batch delete Supprimez un lot Spark.

azdata bdc spark batch create

Cela crée un nouveau lot de tâches Spark qui exécute le code fourni.

azdata bdc spark batch create --file -f 
                              [--class-name -c]  
                              
[--arguments -a]  
                              
[--jar-files -j]  
                              
[--py-files -p]  
                              
[--files]  
                              
[--driver-memory]  
                              
[--driver-cores]  
                              
[--executor-memory]  
                              
[--executor-cores]  
                              
[--executor-count]  
                              
[--archives]  
                              
[--queue -q]  
                              
[--name -n]  
                              
[--config]

Exemples

Créez un nouveau lot Spark.

azdata spark batch create --code "2+2"

Paramètres obligatoires

--file -f

Chemin d’accès au fichier à exécuter.

Paramètres facultatifs

--class-name -c

Nom de la classe à exécuter lors du passage d’un ou de plusieurs fichiers jar.

--arguments -a

Liste d'arguments. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».

--jar-files -j

Liste des chemins d’accès aux fichiers jar. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».

--py-files -p

Liste des chemins d’accès de fichier Python. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».

--files

Liste des chemins d’accès de fichier. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».

--driver-memory

Quantité de mémoire à allouer au pilote. Spécifiez les unités dans le cadre de la valeur. Exemple 512 M ou 2 G.

--driver-cores

Quantité de cœurs UC à allouer au pilote.

--executor-memory

Quantité de mémoire à allouer à l’exécuteur. Spécifiez les unités dans le cadre de la valeur. Exemple 512 M ou 2 G.

--executor-cores

Quantité de cœurs UC à allouer à l’exécuteur.

--executor-count

Nombre d'instances de l’exécuteur à exécuter.

--archives

Liste des chemins d’accès à l’archive. Pour transmettre dans une liste JSON, encodez les valeurs. Exemple : « [« entry1 », « entry2 »] ».

--queue -q

Nom de la file d’attente Spark dans laquelle exécuter la session.

--name -n

Nom de la session Spark.

--config

Liste de paires nom/valeur contenant des valeurs de configuration Spark. Encodé en tant que dictionnaire JSON. Exemple : « {"name":"value", "name2":"value2"} ».

Arguments globaux

--debug

Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.

--help -h

Affichez ce message d’aide et quittez.

--output -o

Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.

--query -q

Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.

--verbose

Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.

azdata bdc spark batch list

Répertoriez tous les lots dans Spark.

azdata bdc spark batch list 

Exemples

Répertoriez tous les lots actifs.

azdata spark batch list

Arguments globaux

--debug

Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.

--help -h

Affichez ce message d’aide et quittez.

--output -o

Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.

--query -q

Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.

--verbose

Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.

azdata bdc spark batch info

Permet d’obtenir les informations pour un lot Spark avec l’ID donné. L’ID de lot est retourné à partir de « spark batch create ».

azdata bdc spark batch info --batch-id -i 
                            

Exemples

Obtenez les informations du lot avec l’ID 0.

azdata spark batch info --batch-id 0

Paramètres obligatoires

--batch-id -i

Numéro d’ID du lot Spark.

Arguments globaux

--debug

Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.

--help -h

Affichez ce message d’aide et quittez.

--output -o

Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.

--query -q

Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.

--verbose

Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.

azdata bdc spark batch log

Permet d’obtenir les entrées du journal de lots pour un lot Spark avec l’ID donné. L’ID de lot est retourné à partir de « spark batch create ».

azdata bdc spark batch log --batch-id -i 
                           

Exemples

Obtenez le journal de lots pour le lot avec l’ID 0.

azdata spark batch log --batch-id 0

Paramètres obligatoires

--batch-id -i

Numéro d’ID du lot Spark.

Arguments globaux

--debug

Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.

--help -h

Affichez ce message d’aide et quittez.

--output -o

Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.

--query -q

Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.

--verbose

Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.

azdata bdc spark batch state

Permet d’obtenir l’état du lot pour un lot Spark avec l’ID donné. L’ID de lot est retourné à partir de « spark batch create ».

azdata bdc spark batch state --batch-id -i 
                             

Exemples

Obtenez l’état du lot avec l’ID 0.

azdata spark batch state --batch-id 0

Paramètres obligatoires

--batch-id -i

Numéro d’ID du lot Spark.

Arguments globaux

--debug

Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.

--help -h

Affichez ce message d’aide et quittez.

--output -o

Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.

--query -q

Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.

--verbose

Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.

azdata bdc spark batch delete

Cela supprime un lot Spark. L’ID de lot est retourné à partir de « spark batch create ».

azdata bdc spark batch delete --batch-id -i 
                              

Exemples

Supprimez un lot.

azdata spark batch delete --batch-id 0

Paramètres obligatoires

--batch-id -i

Numéro d’ID du lot Spark.

Arguments globaux

--debug

Augmentez le niveau de détail de la journalisation pour afficher tous les journaux de débogage.

--help -h

Affichez ce message d’aide et quittez.

--output -o

Format de sortie. Valeurs autorisées : json, jsonc, table, tsv. Valeur par défaut : json.

--query -q

Chaîne de requêtes JMESPath. Pour plus d’informations et d’exemples, consultez http://jmespath.org/.

--verbose

Augmentez le niveau de détail de la journalisation. Utilisez --debug pour des journaux de débogage complets.

Étapes suivantes

Pour plus d’informations sur les autres commandes azdata, consultez azdata reference.

Pour plus d’informations sur l’installation de l’outil azdata, consultez Installer azdata.