HDInsightCompute Clase
Administra un destino de proceso de clúster de HDInsight en Azure Machine Learning.
Azure HDInsight es una plataforma popular para el análisis de macrodatos. La plataforma proporciona Apache Spark, que se puede usar para entrenar el modelo. Para más información, consulte ¿Qué son los destinos de proceso en Azure Machine Learning?
Constructor ComputeTarget de clase.
Recupere una representación en la nube de un objeto Compute asociado al área de trabajo proporcionada. Devuelve una instancia de una clase secundaria correspondiente al tipo específico del objeto Compute recuperado.
- Herencia
-
HDInsightCompute
Constructor
HDInsightCompute(workspace, name)Parámetros
- workspace
- Workspace
Objeto de área de trabajo que contiene el objeto HDInsightCompute que se recuperará.
- workspace
- Workspace
Objeto de área de trabajo que contiene el objeto Compute que se recuperará.
Comentarios
En el ejemplo siguiente se muestra cómo crear un clúster de Spark para HDInsight en Azure.
from azureml.core.compute import ComputeTarget, HDInsightCompute
from azureml.exceptions import ComputeTargetException
import os
try:
# If you want to connect using SSH key instead of username/password you can provide parameters private_key_file and private_key_passphrase
# Attaching a HDInsight cluster using the public address of the HDInsight cluster is no longer supported.
# Instead, use resourceId of the HDInsight cluster.
# The resourceId of the HDInsight Cluster can be constructed using the following string format:
# /subscriptions/<subscription_id>/resourceGroups/<resource_group>/providers/Microsoft.HDInsight/clusters/<cluster_name>.
# You can also use subscription_id, resource_group and cluster_name without constructing resourceId.
attach_config = HDInsightCompute.attach_configuration(resource_id='<resource_id>',
ssh_port=22,
username=os.environ.get('hdiusername', '<ssh_username>'),
password=os.environ.get('hdipassword', '<my_password>'))
hdi_compute = ComputeTarget.attach(workspace=ws,
name='myhdi',
attach_configuration=attach_config)
except ComputeTargetException as e:
print("Caught = {}".format(e.message))
hdi_compute.wait_for_completion(show_output=True)
El ejemplo completo está disponible en https://github.com/Azure/MachineLearningNotebooks/blob/master/how-to-use-azureml/training/train-in-spark/train-in-spark.ipynb.
Métodos
| attach |
EN DESUSO. Use el método Asocia un recurso HDI existente al área de trabajo proporcionada. |
| attach_configuration |
Cree un objeto de configuración para adjuntar un destino de proceso de HDInsight. Ya no se admite la asociación de un clúster de HDInsight mediante la dirección pública de este clúster. En su lugar, use el elemento resourceId del clúster de HDInsight. El elemento resourceId del clúster de HDInsight se puede construir con el formato de cadena siguiente: "/subscriptions/<subscription_id>/resourceGroups/<resource_group>/ providers/Microsoft.HDInsight/clusters/<cluster_name>". También puede usar subscription_id, resource_group y cluster_name sin construir resourceId. Para más información: https://aka.ms/azureml-compute-hdi |
| delete |
No se admite la eliminación para el objeto HDInsightCompute. En su lugar, use detach. |
| deserialize |
Convierte un objeto JSON en un objeto HDInsightCompute. |
| detach |
Separa el objeto HDInsightCompute de su área de trabajo asociada. Los objetos de nube subyacentes no se eliminan, solo se quita la asociación. |
| get_credentials |
Recupera las credenciales del destino HDInsightCompute. |
| refresh_state |
Realiza una actualización local de las propiedades del objeto. Este método actualiza las propiedades en función del estado actual del objeto de nube correspondiente. Se usa principalmente para el sondeo manual del estado de proceso. |
| serialize |
Convierte este objeto HDInsightCompute en un diccionario serializado JSON. |
attach
EN DESUSO. Use el método attach_configuration en su lugar.
Asocia un recurso HDI existente al área de trabajo proporcionada.
static attach(workspace, name, username, address, ssh_port='22', password='', private_key_file='', private_key_passphrase='')Parámetros
- workspace
- Workspace
Objeto de área de trabajo con el que se asociará el recurso de proceso.
- name
- str
Nombre que se asociará al recurso de proceso dentro del área de trabajo proporcionada. No tiene que coincidir con el nombre del recurso de proceso que se va a asociar.
- ssh_port
- int
Puerto expuesto para el recurso. El valor predeterminado es 22.
- private_key_file
- str
Ruta de acceso a un archivo que contiene la clave privada del recurso.
Devoluciones
Representación del objeto HDInsightCompute del objeto de proceso.
Tipo de valor devuelto
Excepciones
attach_configuration
Cree un objeto de configuración para adjuntar un destino de proceso de HDInsight.
Ya no se admite la asociación de un clúster de HDInsight mediante la dirección pública de este clúster. En su lugar, use el elemento resourceId del clúster de HDInsight. El elemento resourceId del clúster de HDInsight se puede construir con el formato de cadena siguiente: "/subscriptions/<subscription_id>/resourceGroups/<resource_group>/ providers/Microsoft.HDInsight/clusters/<cluster_name>".
También puede usar subscription_id, resource_group y cluster_name sin construir resourceId. Para más información: https://aka.ms/azureml-compute-hdi
static attach_configuration(username, subscription_id=None, resource_group=None, cluster_name=None, resource_id=None, address=None, ssh_port='22', password='', private_key_file='', private_key_passphrase='')Parámetros
- resource_group
- str
Nombre del grupo de recursos en el que se encuentra el clúster de HDI.
- resource_id
- str
Identificador de recurso de Azure Resource Manager (ARM) del recurso que se va a asociar.
- ssh_port
- int
Puerto expuesto para el recurso. El valor predeterminado es 22.
- private_key_file
- str
Ruta de acceso a un archivo que contiene la clave privada del recurso.
Devoluciones
Objeto de configuración que se usará al asociar un objeto Compute.
Tipo de valor devuelto
Excepciones
delete
No se admite la eliminación para el objeto HDInsightCompute. En su lugar, use detach.
delete()Excepciones
deserialize
Convierte un objeto JSON en un objeto HDInsightCompute.
static deserialize(workspace, object_dict)Parámetros
- workspace
- Workspace
Objeto de área de trabajo al que está asociado el objeto HDInsightCompute.
Devoluciones
Representación de HDInsightCompute del objeto JSON proporcionado.
Tipo de valor devuelto
Excepciones
Comentarios
Genera una excepción ComputeTargetException si el área de trabajo proporcionada no es el área de trabajo a la que está asociado el proceso.
detach
Separa el objeto HDInsightCompute de su área de trabajo asociada.
Los objetos de nube subyacentes no se eliminan, solo se quita la asociación.
detach()Excepciones
get_credentials
Recupera las credenciales del destino HDInsightCompute.
get_credentials()Devoluciones
Credenciales del destino HDInsightCompute.
Tipo de valor devuelto
Excepciones
refresh_state
Realiza una actualización local de las propiedades del objeto.
Este método actualiza las propiedades en función del estado actual del objeto de nube correspondiente. Se usa principalmente para el sondeo manual del estado de proceso.
refresh_state()Excepciones
serialize
Convierte este objeto HDInsightCompute en un diccionario serializado JSON.
serialize()Devoluciones
La representación JSON de este objeto HDICompute.
Tipo de valor devuelto
Excepciones
Comentarios
Próximamente: A lo largo de 2024 iremos eliminando gradualmente GitHub Issues como mecanismo de comentarios sobre el contenido y lo sustituiremos por un nuevo sistema de comentarios. Para más información, vea: https://aka.ms/ContentUserFeedback.
Enviar y ver comentarios de