Instalace jiné verze SynapseML v prostředcích infrastruktury

  • Článek

SynapseML je v prostředcích infrastruktury předinstalované. Pokud chcete použít jinou verzi, můžete ji nainstalovat pomocí %%configure.

Poznámka

Poznámkový blok Fabric zatím oficiálně nepodporuje %%configure a není zaručená smlouva o úrovni služeb ani budoucí kompatibilita s oficiálními verzemi.

Instalace SynapseML s %%configure

Příklad nainstaluje SynapseML v0.11.1 do prostředků infrastruktury.

%%configure -f
{
  "name": "synapseml",
  "conf": {
      "spark.jars.packages": "com.microsoft.azure:synapseml_2.12:0.11.1,org.apache.spark:spark-avro_2.12:3.3.1",
      "spark.jars.repositories": "https://mmlspark.azureedge.net/maven",
      "spark.jars.excludes": "org.scala-lang:scala-reflect,org.apache.spark:spark-tags_2.12,org.scalactic:scalactic_2.12,org.scalatest:scalatest_2.12,com.fasterxml.jackson.core:jackson-databind",
      "spark.yarn.user.classpath.first": "true",
      "spark.sql.parquet.enableVectorizedReader": "false",
      "spark.sql.legacy.replaceDatabricksSparkAvro.enabled": "true"
  }
}

Kontrola verze SynapseML

import synapse.ml.cognitive
print(f"SynapseML cognitive version: {synapse.ml.cognitive.__version__}")

import synapse.ml.lightgbm
print(f"SynapseML lightgbm version: {synapse.ml.lightgbm.__version__}")

Další kroky