適用於 Scala 的 Databricks Connect 的限制
注意
本文介紹適用於 Databricks Runtime 13.3 LTS 及以上版本的 Databricks Connect。
本文列出適用於 Scala 的 Databricks Connect 的限制。 Databricks Connect 可讓您將熱門的 IDE、Notebook 伺服器和自定義應用程式連線到 Azure Databricks 叢集。 請參閱 什麼是 Databricks Connect?。 如需本文的 Python 版本,請參閱 使用 Databricks Connect for Python 的限制。
重要
根據您使用的 Scala、Java、Databricks Runtime 和 Databricks Connect 版本而定,某些功能可能會有版本需求。 請參閱 需求。
功能可用性
在 Databricks Runtime 13.3 LTS 及以下版本中,Databricks Connect 無法使用。
- 串流
foreachBatch
- 建立大於 128 MB 的數據框架
- 超過 3600 秒的長查詢
- 使用單一使用者叢集存取模式之叢集上的純量 UDF
無法使用:
- Databricks 公用程式:
credentials
、library
、notebook workflow
、widgets
- Spark 上下文
- RDD
-
CREATE TABLE <table-name> AS SELECT
(請改用spark.sql("SELECT ...").write.saveAsTable("table")
) - 透過
SparkContext
變更 log4j 日誌等級 - 分散式機器學習訓練
- 同步本機開發環境與遠端叢集