Outils d’ingestion de données de la machine virtuelle DSVM
À un stade précoce de projet IA ou de science des données, vous devez identifier les jeux de données à utiliser, puis les importer dans votre environnement analytique. La machine virtuelle Data Science Virtual Machine (DSVM) fournit des outils et des bibliothèques pour importer des données à partir de différentes sources dans des ressources de stockage de données analytiques locales sur la DSVM. La DSVM importe également des données dans une plateforme de données située sur le cloud ou sur site.
La DSVM offre ces outils de déplacement des données :
Azure CLI
| Category | Valeur |
|---|---|
| Qu’est-ce que c’est ? | Outil de gestion pour Azure. Elle propose également des verbes de commande pour déplacer des données à partir de plateformes de données Azure, telles que le stockage Blob Azure et Azure Data Lake Storage |
| Versions DSVM prises en charge | Windows, Linux |
| Utilisations classiques | Importer et exporter des données entre Stockage Azure et Azure Data Lake Store |
| Comment l’utiliser/l’exécuter ? | Ouvrez une invite de commandes, puis tapez az pour obtenir de l’aide. |
| Liens vers des exemples | Utilisation de l’interface de ligne de commande Azure |
AzCopy
| Category | Valeur |
|---|---|
| Qu’est-ce que c’est ? | Outil permettant de copier des données entre des fichiers locaux, du stockage, des fichiers et des tables Stockage Blob Azure |
| Versions DSVM prises en charge | Windows |
| Utilisations classiques | Copier des fichiers dans Stockage Blob Azure Copier des objets blob entre comptes |
| Comment l’utiliser/l’exécuter ? | Ouvrez une invite de commandes, puis tapez azcopy pour obtenir de l’aide. |
| Liens vers des exemples | AzCopy sur Windows |
Outil de migration de données Azure Cosmos DB
| Catégorie | Valeur |
|---|---|
| Qu’est-ce que c’est ? | Outil permettant d’importer des données à partir de différentes sources dans Azure Cosmos DB, une base de données NoSQL dans le cloud. Ces sources comprennent des fichiers JSON Fichiers CSV SQL MongoDB Stockage Table Azure Amazon DynamoDB Collections Azure Cosmos DB for NoSQL |
| Versions DSVM prises en charge | Windows |
| Utilisations classiques | Importer des fichiers d’une machine virtuelle vers Azure Cosmos DB importer des données d’un stockage de table Azure vers Microsoft Azure Cosmos DB Importer des données d’une base de données Microsoft SQL Server vers Microsoft Azure Cosmos DB |
| Comment l’utiliser/l’exécuter ? | Pour utiliser la version en ligne de commande, ouvrez une invite de commandes et tapez dt. Pour utiliser l’outil GUI, ouvrez une invite de commandes et tapez dtui |
| Liens vers des exemples | Importer des données dans Azure Cosmos DB |
Explorateur de stockage Azure
| Category | Valeur |
|---|---|
| Qu’est-ce que c’est ? | Interface graphique utilisateur pour l’interaction avec les fichiers stockés dans le cloud Azure |
| Versions DSVM prises en charge | Windows |
| Utilisations classiques | Importer des données à partir d’une DSVM et y exporter des données |
| Comment l’utiliser/l’exécuter ? | Recherchez « Explorateur Stockage Azure » dans le menu Démarrer |
| Liens vers des exemples | Azure Storage Explorer |
bcp
| Category | Valeur |
|---|---|
| Qu’est-ce que c’est ? | Outil SQL Server permettant de copier des données entre SQL Server et un fichier de données |
| Versions DSVM prises en charge | Windows |
| Utilisations classiques | Importer un fichier CSV dans une table SQL Server Exporter une table SQL Server vers un fichier |
| Comment l’utiliser/l’exécuter ? | Ouvrez une invite de commandes, puis tapez bcp pour obtenir de l’aide |
| Liens vers des exemples | Utilitaire bcp |
blobfuse
| Category | Valeur |
|---|---|
| Qu’est-ce que c’est ? | Outil permettant de monter un conteneur Stockage Blob Azure dans le système de fichiers Linux |
| Versions DSVM prises en charge | Linux |
| Utilisations classiques | Lecture et écriture dans les blobs d’un conteneur |
| Comment l’utiliser et l’exécuter ? | Exécutez blobfuse sur un terminal |
| Liens vers des exemples | blobfuse sur GitHub |