Databricks Runtime 5.4 (EoS)
Nota
Il supporto per questa versione di Databricks Runtime è terminato. Per la data di fine del supporto, vedere Cronologia di fine del supporto. Per tutte le versioni supportate di Databricks Runtime, vedere Versioni e compatibilità delle note sulla versione di Databricks Runtime.
Databricks ha rilasciato questa versione nel giugno 2019.
Le note sulla versione seguenti forniscono informazioni su Databricks Runtime 5.4, basate su Apache Spark.
Nuove funzionalità
Delta Lake in Azure Databricks aggiunge Ottimizzazione automatica (anteprima pubblica)
Oggi, quando si scrivono dati nell'archiviazione cloud, è necessario compattare i file per ottenere prestazioni di I/O ottimali. È necessario preoccuparsi delle dimensioni corrette del file, della frequenza con cui compattare i file, delle dimensioni di un cluster da usare e così via. Per risolvere questa classe di problemi, microsoft è lieta di introdurre Ottimizzazione automatica con Delta Lake in Azure Databricks. Durante ogni scrittura nelle tabelle Delta, si individuano automaticamente le dimensioni e i file di compattazione corretti in modo da non doversi preoccupare dell'ottimizzazione del layout di archiviazione. Durante le operazioni di scrittura, se l'opzione auto-optimize è true, Azure Databricks determina automaticamente se è necessaria un'ottimizzazione e ottimizza i file di piccole dimensioni. Per informazioni dettagliate, vedere Configurare Delta Lake per controllare le dimensioni dei file di dati.
Utilità di libreria disponibili a livello generale
Le utilità di libreria sono ora disponibili a livello generale. Questa funzionalità consente di modificare le librerie Python dall'ambito di una sessione di notebook. Vedere Utilità libreria (dbutils.library) (legacy).
Databricks Connect disponibile a livello generale
Databricks Connect è ora disponibile a livello generale. Questa funzionalità è una libreria client Spark che consente di connettere l'IDE preferito (IntelliJ, Eclipse, PyCharm, RStudio), il server notebook (Zeppelin, Jupyter) e altre applicazioni personalizzate ai cluster Azure Databricks ed eseguire il codice Spark. Si veda Databricks Connect.
Origine dati di file binari
L'origine dati del file binario legge i file binari e converte ogni file in un singolo record contenente il contenuto non elaborato e i metadati del file. È ora possibile leggere in modo efficiente i file arbitrari in un dataframe Spark senza visitare il contenuto dei file. Ciò è particolarmente utile se si vuole usare Spark per caricare file di grandi dimensioni, ad esempio immagini, per l'assegnazione dei punteggi. Vedere File binario.
Miglioramenti
Memorizzazione nella cache del disco
La memorizzazione nella cache del disco è ora preconfigurata per le istanze Lsv2. Tuttavia, la cache non è abilitata per impostazione predefinita. Per informazioni su come abilitarla, vedere Abilitare o disabilitare la cache del disco.
Pass-through delle credenziali di Azure AD in Azure Data Lake Storage Gen2
È ora supportato il montaggio DBFS del file system di Azure Data Lake Storage (ADLS) Gen2 con il pass-through delle credenziali di Microsoft Entra ID. Vedere Azure Data Lake Storage Gen2.
Aggiornamento di R alla versione 3.6.0
La base R viene aggiornata dalla versione 3.5.2 alla versione 3.6.0.
Apache Spark
Databricks Runtime 5.4 include Apache Spark 2.4.3. Questa versione include tutte le correzioni e i miglioramenti di Spark inclusi in Databricks Runtime 5.3 (EoS), nonché le correzioni di bug e i miglioramenti aggiuntivi seguenti apportati a Spark:
- [SPARK-27596][SQL] L'opzione 'query' JDBC non funziona per il database Oracle
- [SPARK-27240][PYTHON] Usare pandas DataFrame per l'argomento del tipo di struct nella funzione definita dall'utente pandas scalare.
- [SPARK-26745][SQL][TEST] Test case jsonSuite: riga vuota -> Numero di record 0
- [SPARK-25535][CORE] Risolvere i problemi di gestione degli errori in commons-crypto.
- [SPARK-26891][YARN] Correzione del test flaky in YarnSchedulerBackendSuite
- [SPARK-27563][SQL][TEST] Ottiene automaticamente le versioni più recenti di Spark in HiveExternalCatalogVersionsSuite
- [SPARK-27494][SS] I valori Null non funzionano nell'origine Kafka v2
- [SPARK-27550][TEST] Correzione test-dependencies.sh non usare il profilo kafka-0-8 per Scala-2.12
- [SPARK-26992][STS] Correzione del recapito corretto del pool di utilità di pianificazione sts
- [SPARK-27544][PYTHON][TEST] Correzione dello script di test Python per funzionare nella build Scala-2.12
- [SPARK-27539][SQL] Correzione di una stima di outputRows di aggregazione imprecisa con una colonna contenente valori Null
- [SPARK-27469][BUILD] Unificare commons-beanutils deps alla versione 1.9.3 più recente
- [SPARK-27419][FOLLOWUP][DOCS] Aggiungere una nota sulla modifica spark.executor.heartbeatInterval alla guida alla migrazione
- [SPARK-27496][CORE] Gli errori irreversibili devono anche essere inviati al mittente
- [SPARK-25079][PYTHON] Aggiornare il file eseguibile python3 alla versione 3.6.x
- [SPARK-27163][PYTHON] Pulizia e consolidamento delle funzionalità di funzioni definite dall'utente pandas
- [SPARK-27403][SQL] Correzione di updateTableStats per aggiornare le statistiche della tabella sempre con nuove statistiche o Nessuna
- [SPARK-27479][BUILD] Nascondere la documentazione api per org.apache.spark.util.kvstore
- [SPARK-27446][R] Se disponibile, usare la funzione spark conf esistente.
- [SPARK-27453] Passare partitionBy come opzioni in DataFrameWriter
- [SPARK-27454][SPARK-27454][HOT-FIX][ML][SQL] Cherrypick (correzione nell'origine dati dell'immagine Spark non riesce quando si verificano alcune immagini non valide)
- [SPARK-27351][SQL] Stima outputRows errata dopo AggregateEstimation con solo colonna valore Null
- [SPARK-27314][SQL] Deduplicate exprIds for Union( Deduplicate exprIds for Union).
- [SPARK-27394][WEBUI] Scaricare LiveEntity se necessario quando si riceve SparkListenerExecutorMetricsUpdate (backport 2.4)
- [SPARK-27406][SQL] Interruzioni di serializzazione UnsafeArrayData quando due computer hanno dimensioni diverse di Oops
- [SPARK-27419][CORE] Evitare di eseguire il cast dell'intervallo di heartbeat in secondi (2,4)
- [SPARK-27391][SS] Non inizializzare un valore val differita nel processo ContinuousExecution.
- [SPARK-27390][CORE][SQL][TEST] Correzione della mancata corrispondenza del nome del pacchetto
- [SPARK-27358][interfaccia utente] Aggiornare jquery alla versione 1.12.x per raccogliere le correzioni di sicurezza
- [SPARK-27216][CORE] Aggiornare RoaringBitmap alla versione 0.7.45 per risolvere il problema di Kryo unsafe ser/dser
- [SPARK-27382][SQL][TEST] Aggiornare i test di Spark 2.4.x in HiveExternalCatalogVersionsSuite
- [SPARK-27338][CORE] Correzione del deadlock tra UnsafeExternalSorter e TaskMemoryManager
- [SPARK-27338][CORE][FOLLOWUP] Rimuovere lo spazio finale
- [SPARK-27338][CORE] Correzione del deadlock in UnsafeExternalSorter.SpillableIterator quando si bloccano entrambi UnsafeExternalSorter.SpillableIterator e TaskMemoryManager
- [SPARK-27346][SQL] Allentare la condizione di asserzione di nuova riga nel campo 'examples' in ExpressionInfo
- [SPARK-26998][CORE] Rimuovere la configurazione SSL dagli executor
- [SPARK-27244][CORE][TEST][FOLLOWUP] toDebugString redacts sensitive information
- [SPARK-27267][FOLLOWUP] Aggiornare il manifesto delle dipendenze hadoop-2.6
- [SPARK-27267][CORE] Aggiornare snappy per evitare errori durante la decompressione di dati serializzati vuoti
- [SPARK-27301][DSTREAM] Abbreviare il ciclo di vita memorizzato nella cache di FileSystem nell'ambito interno del metodo di pulizia
- [SPARK-27244][CORE] Redact Passwords While Using Option logConf=true (Redact Password while Using Option logConf=true)
- [SPARK-26208][SQL] Aggiungere intestazioni a file CSV vuoti quando header=true
- [SPARK-27275][CORE] Correzione del potenziale danneggiamento in EncryptedMessage.transferTo (2.4)
- [SPARK-23836][PYTHON] Aggiunta del supporto per la restituzione di StructType in funzioni definite dall'utente pandas scalari
- [SPARK-26961][CORE] Abilitare la funzionalità di caricamento di classi parallele
- [SPARK-27274][DOCS] Correzione dei riferimenti a scala 2.11 nella documentazione 2.4.1+; Nota 2.11 il supporto è deprecato nella versione 2.4.1+
- [SPARK-27198][CORE] Mancata corrispondenza dell'intervallo di heartbeat nel driver e nell'executor
- [SPARK-27094][YARN] Aggirare RackResolver che ingoia l'interruzione del thread.
- [SPARK-24935][SQL] Correggere Hive UDAF con due buffer di aggregazione
- [SPARK-27160][SQL] Correzione di DecimalType durante la compilazione di filtri orc
- [SPARK-26606][CORE] Gestire correttamente le opzioni del driver durante l'invio alla modalità cluster autonoma tramite client legacy
- [SPARK-27221][SQL] Migliorare il messaggio di errore di asserzione in TreeNode.parseToJson (5.x)
- [SPARK-27102][R][PYTHON][CORE] Rimuovere i riferimenti ai codici Scala di Python nei codici Scala di R
- [SPARK-27159][SQL] Aggiornare il dialetto del server mssql per supportare il tipo binario
- [SPARK-27112][CORE] : creare un ordinamento di risorse tra thread per risolvere i deadlock rilevati quando si tenta di terminare gli executor a causa dell'allocazione dinamica o di un elenco di blocchi
- [SPARK-27178][K8S] aggiunta di un pacchetto nss per correggere i test
- [SPARK-27045][SQL] La scheda SQL nell'interfaccia utente mostra l'effettivo SQL anziché il callite nel caso di SparkSQLDriver
- [SPARK-27119][SQL] Non dedurre lo schema durante la lettura della tabella serde Hive con origine dati nativa
- [SPARK-27165][SPARK-27107][BUILD][SQL] Aggiornare Apache ORC alla versione 1.5.5
- [SPARK-26742][K8S] Aggiornare la versione del client k8s alla versione 4.1.2
- [SPARK-26927][CORE] Assicurarsi che l'executor sia attivo durante l'elaborazione di eventi in Gestione allocazione dinamica.
- [SPARK-27097][CHERRY-PICK 2.4] Evitare l'incorporamento di offset dipendenti dalla piattaforma letteralmente nel codice generato a fasi intere
- [SPARK-27111][SS] Correzione di una gara per cui una query continua potrebbe non riuscire con InterruptedException (5.x)
- [SPARK-27111][SS] Correzione di una gara per cui una query continua potrebbe non riuscire con InterruptedException
- [SPARK-27080][SQL] Correzione di bug: mergeWithMetastoreSchema con confronto uniforme tra lettere minuscole
- [SPARK-26604][CORE] Pulire la registrazione del canale per StreamManager
- [SPARK-27016][SQL][BUILD] Considerare tutti gli avvisi antlr come errori durante la generazione del parser dal file di grammatica sql
- [SPARK-25863][SPARK-21871][SQL] Controllare se le statistiche delle dimensioni del codice sono vuote o meno in updateAndGetCompilationStats
- [SPARK-27078][SQL] Correzione di NoSuchFieldError durante la lettura delle viste materializzate di Hive
- [SPARK-27019][SQL][WEBUI] onJobStart si verifica dopo onExecutionEnd non deve sovrascrivere kvstore
- [SPARK-27065][CORE] Evitare più di un gestore del set di attività attivo per una fase
- [SPARK-24669][SQL] Invalidare le tabelle nel caso di DROP DATABASE CASCADE
- [SPARK-26932][DOC] Aggiungere un avviso per il problema del lettore ORC hive 2.1.1
- [SPARK-25139][SPARK-18406][CORE] Evitare nonfatals di terminare l'executor in PythonRunner
Aggiornamenti di manutenzione
Vedere Aggiornamenti della manutenzione di Databricks Runtime 5.4.
Ambiente di sistema
- Sistema operativo: Ubuntu 16.04.6 LTS
- Java: 1.8.0_191
- Scala: 2.11.12
- Python: 2.7.12 per cluster Python 2 e 3.5.2 per cluster Python 3.
- R: R versione 3.6.0 (2019-04-26)
- Cluster GPU: sono installate le librerie GPU NVIDIA seguenti:
- Driver Tesla 375.66
- CUDA 9.0
- cuDNN 7.0
Nota
Sebbene Scala 2.12 sia supportato in Apache Spark 2.4, non è supportato in Databricks Runtime 5.4.
Librerie Python installate
| Library | Versione | Library | Versione | Library | Versione |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0,5 |
| boto | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| brewer2mpl | 1.4.1 | certifi | 2016.2.28 | cffi | 1.7.0 |
| chardet | 2.3.0 | colorama | 0.3.7 | configobj | 5.0.6 |
| cryptography | 1,5 | cycler | 0.10.0 | Cython | 0.24.1 |
| decorator | 4.0.10 | docutils | 0.14 | enum34 | 1.1.6 |
| et-xmlfile | 1.0.1 | freetype-py | 1.0.2 | funcsig | 1.0.2 |
| fusepy | 2.0.4 | futures | 3.2.0 | ggplot | 0.6.8 |
| html5lib | 0,999 | idna | 2.1 | ipaddress | 1.0.16 |
| ipython | 2.2.0 | ipython-genutils | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | llvmlite | 0.13.0 |
| lxml | 3.6.4 | MarkupSafe | 0,23 | matplotlib | 1.5.3 |
| mpld3 | 0.2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| numba | 0.28.1 | numpy | 1.11.1 | openpyxl | 2.3.2 |
| pandas | 0.19.2 | pathlib2 | 2.1.0 | patsy | 0.4.1 |
| pexpect | 4.0.1 | pickleshare | 0.7.4 | Pillow | 3.3.1 |
| pip | 19.1.1 | filo | 3.9 | prompt-toolkit | 1.0.7 |
| Psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | (0.10.3) |
| pyarrow | 0.8.0 | pyasn1 | 0.1.9 | pycparser | 2.14 |
| Pygments | 2.1.3 | pygobject | 3.20.0 | pyOpenSSL | 16.0.0 |
| pyparsing | 2.2.0 | pypng | 0.0.18 | Python | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash | 0.8.5 | pytz | 2016.6.1 |
| requests | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| scipy | 0.18.1 | strofinare | 0,32 | seaborn | 0.7.1 |
| setuptools | 41.0.1 | simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch | 3.4.0.3 | six | 1.10.0 | statsmodels | 0.6.1 |
| tornado | 5.1.1 | traitlets | 4.3.0 | urllib3 | 1.19.1 |
| virtualenv | 16.1.0 | wcwidth | 0.1.7 | wheel | 0.33.3 |
| wsgiref | 0.1.2 |
Librerie R installate
| Library | Versione | Library | Versione | Library | Versione |
|---|---|---|---|---|---|
| abind | 1.4-5 | askpass | 1.1 | assertthat | 0.2.1 |
| backports | 1.1.3 | base | 3.6.0 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bit | 1.1-14 | bit64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.1.1 | boot | 1.3-20 |
| brew | 1.0-6 | callr | 3.2.0 | car | 3.0-2 |
| carData | 3.0-2 | caret | 6.0-82 | cellranger | 1.1.0 |
| chron | 2.3-53 | class | 7.3-15 | cli | 1.1.0 |
| clipr | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.0.8 |
| codetools | 0.2-16 | colorspace | 1.4-1 | commonmark | 1.7 |
| compilatore | 3.6.0 | config | 0.3 | crayon | 1.3.4 |
| curl | 3.3 | data.table | 1.12.0 | datasets | 3.6.0 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | desc | 1.2.0 |
| devtools | 2.0.1 | digest | 0.6.18 | doMC | 1.3.5 |
| dplyr | 0.8.0.1 | puntini di sospensione | 0.1.0 | fansi | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | foreign | 0.8-71 |
| forge | 0.2.0 | fs | 1.2.7 | gbm | 2.1.5 |
| generics | 0.0.2 | ggplot2 | 3.1.0 | gh | 1.0.1 |
| git2r | 0.25.2 | glmnet | 2.0-16 | glue | 1.3.1 |
| Gower | 0.2.0 | grafica | 3.6.0 | grDevices | 3.6.0 |
| grid | 3.6.0 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.3.0 | h2o | 3.22.1.1 | haven | 2.1.0 |
| hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ini | 0.3.1 | ipred | 0.9-8 | Iteratori | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | Etichettatura | 0,3 |
| Lattice | 0.20-38 | Java | 1.6.5 | lazyeval | 0.2.2 |
| Littler | 0.3.7 | lme4 | 1.1-21 | lubridate | 1.7.4 |
| magrittr | 1,5 | mapproj | 1.2.6 | mappe | 3.3.0 |
| maptools | 0.9-5 | MASS | 7.3-51.1 | Matrice | 1.2-17 |
| MatrixModels | 0.4-1 | memoise | 1.1.0 | methods | 3.6.0 |
| mgcv | 1.8-28 | mime | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | mvtnorm | 1.0-10 |
| nlme | 3.1-139 | nloptr | 1.2.1 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.3 | openxlsx | 4.1.0 |
| parallel | 3.6.0 | pbkrtest | 0.4-7 | Concetto fondamentale | 1.3.1 |
| pkgbuild | 1.0.3 | pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| praise | 1.0.0 | prettyunits | 1.0.2 | Proc | 1.14.0 |
| processx | 3.3.0 | prodlim | 2018.04.18 | Avanzamento | 1.2.0 |
| proto | 1.0.0 | ps | 1.3.0 | purrr | 0.3.2 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | readr | 1.3.1 |
| readxl | 1.3.1 | ricette | 0.1.5 | rematch | 1.0.1 |
| remotes | 2.0.2 | reshape2 | 1.4.3 | Rio de Janeiro | 0.5.16 |
| rlang | 0.3.3 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0,10 | Scalabilità | 1.0.0 |
| sessioninfo | 1.1.1 | sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.3 | SparseM | 1.77 | spaziale | 7.3-11 |
| Spline | 3.6.0 | sqldf | 0.4-11 | SQUAREM | 2017.10-1 |
| statmod | 1.4.30 | stats | 3.6.0 | stats4 | 3.6.0 |
| stringi | 1.4.3 | stringr | 1.4.0 | Sopravvivenza | 2.43-3 |
| sys | 3.1 | tcltk | 3.6.0 | TeachingDemos | 2.10 |
| testthat | 2.0.1 | tibble | 2.1.1 | tidyr | 0.8.3 |
| tidyselect | 0.2.5 | timeDate | 3043.102 | tools | 3.6.0 |
| usethis | 1.4.0 | utf8 | 1.1.4 | utils | 3.6.0 |
| viridisLite | 0.3.0 | whisker | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | yaml | 2.2.0 |
| zip | 2.0.1 |
Librerie Java e Scala installate (versione del cluster Scala 2.11)
| ID gruppo | ID artefatto | Versione |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-distribuisci-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.313 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.313 |
| com.amazonaws | aws-java-sdk-config | 1.11.313 |
| com.amazonaws | aws-java-sdk-core | 1.11.313 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.313 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.313 |
| com.amazonaws | aws-java-sdk-directory | 1.11.313 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.313 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.313 |
| com.amazonaws | aws-java-sdk-efs | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.313 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.313 |
| com.amazonaws | aws-java-sdk-emr | 1.11.313 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.313 |
| com.amazonaws | aws-java-sdk-glue | 1.11.313 |
| com.amazonaws | aws-java-sdk-iam | 1.11.313 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.313 |
| com.amazonaws | aws-java-sdk-consultas | 1.11.313 |
| com.amazonaws | aws-java-sdk-kms | 1.11.313 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.313 |
| com.amazonaws | aws-java-sdk-logs | 1.11.313 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.313 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.313 |
| com.amazonaws | aws-java-sdk-rds | 1.11.313 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.313 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.313 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ses | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.313 |
| com.amazonaws | aws-java-sdk-sns | 1.11.313 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.313 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.313 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.313 |
| com.amazonaws | aws-java-sdk-sts | 1.11.313 |
| com.amazonaws | aws-java-sdk-support | 1.11.313 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.313 |
| com.amazonaws | jmespath-java | 1.11.313 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | stream | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.mdfsoftware | kryo-shaded | 4.0.2 |
| com.mdfsoftware | minlog | 1.3.0 |
| com.fasterxml | compagno di classe | 1.0.0 |
| com.fasterxml.jackson.core | annotazioni jackson | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | core | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | guaiava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-storage | 5.2.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0.3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocità | univocità-parser | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0,10 |
| io.dropwizard.metrics | metrics-core | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrics-servlets | 3.1.5 |
| io.netty | Netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | simpleclient_common | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | agente di raccolta | 0,7 |
| javax.activation | activation | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| maven-trees | hive-exec-with-glue | hive-12679-patch_deploy |
| maven-trees | hive-exec-with-glue | hive-exec_shaded |
| net.idromatico | eigenbase-properties | 1.1.5 |
| net.razorvine | pirolite | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.5 |
| net.snowflake | snowflake-jdbc | 3.6.15 |
| net.snowflake | spark-snowflake_2.11 | 2.4.10-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | formato freccia | 0.10.0 |
| org.apache.arrow | freccia-memoria | 0.10.0 |
| org.apache.arrow | freccia-vettore | 0.10.0 |
| org.apache.avro | avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | Incubazione 1.2.0 |
| org.apache.calcite | calcite-core | Incubazione 1.2.0 |
| org.apache.calcite | calcite-linq4j | Incubazione 1.2.0 |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | curatore-cliente | 2.7.1 |
| org.apache.curator | curatore-framework | 2.7.1 |
| org.apache.curator | ricette curatori | 2.7.1 |
| org.apache.derby | derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | Incubazione 3.1.0 |
| org.apache.httpcomponents | httpclient | 4.5.4 |
| org.apache.httpcomponents | httpcore | 4.4.8 |
| org.apache.ivy | ivy | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.2 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.2 |
| org.apache.orc | orc-shim | 1.5.2 |
| org.apache.parquet | parquet-column | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-common | 1.10.1.1-databricks3 |
| org.apache.parquet | codifica parquet | 1.10.1.1-databricks3 |
| org.apache.parquet | formato parquet | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-jackson | 1.10.1.1-databricks3 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.10 |
| org.codehaus.janino | janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-continuation | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-http | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-io | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-jndi | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-plus | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-proxy | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-security | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-server | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlet | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlets | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-util | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-webapp | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-xml | 9.3.20.v20170531 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-locator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | maglia-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | maglia-comune | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hibernate | hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | snappy | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Spessori | 0.7.45 |
| org.rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore | 1.2.1.spark2 |
| org.spark-project.spark | inutilizzato | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.cortanaani | xz | 1,5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1,16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |