Microsoft.Spark Espace de noms

Référence

Important

Certaines informations portent sur la préversion du produit qui est susceptible d’être en grande partie modifiée avant sa publication. Microsoft exclut toute garantie, expresse ou implicite, concernant les informations fournies ici.

Classes

Broadcast<T>	Variable de diffusion. Les variables de diffusion permettent au programmeur de conserver une variable en lecture seule mise en cache sur chaque ordinateur au lieu d’en envoyer une copie avec des tâches. Ils peuvent être utilisés, par exemple, pour fournir à chaque nœud une copie d’un jeu de données d’entrée volumineux de manière efficace. Spark tente également de distribuer des variables de diffusion à l’aide d’algorithmes de diffusion efficaces pour réduire les coûts de communication.
DeprecatedAttribute	Attribut personnalisé pour désigner la version Spark dans laquelle une API est déconseillée.
JvmException	Contient le message retourné par le Microsoft.Spark.Interop.Ipc.JvmBridge sur une erreur.
RemovedAttribute	Attribut personnalisé pour désigner la version Spark dans laquelle une API est supprimée.
SinceAttribute	Attribut personnalisé pour désigner la version Spark dans laquelle une API est introduite.
SparkConf	Configuration d’une application Spark. Permet de définir différents paramètres Spark en tant que paires clé-valeur.
SparkContext	Point d’entrée principal pour la fonctionnalité Spark. Un SparkContext représente la connexion à un cluster Spark et peut être utilisé pour créer des RDD, des accumulateurs et des variables de diffusion sur ce cluster. `SparkContext` Un seul doit être actif par JVM. Vous devez `stop()` l’actif `SparkContext` avant d’en créer un.
SparkFiles	Résout les chemins d’accès aux fichiers ajoutés via AddFile(String, Boolean).
VersionAttribute	Classe de base pour les attributs personnalisés qui impliquent la version Spark.