Azure Databricks on Microsoft Azure Government

Importante

Azure Databricks on Azure Government está en Beta. Para unirse, registre una nueva suscripción a Azure Government para la característica en vista previa Azure Databricks New GovCloud environment. Consulta Comenzar con la Beta.

Este artículo describe Azure Databricks en Microsoft Azure Government, incluyendo controles de cumplimiento, cómo unirse a la versión Beta del nuevo entorno Azure Government, regiones y URLs soportadas, residencia de datos y tablas de sistema compatibles.

Introducción a Azure Government

Azure Government es una nube de Microsoft Azure dedicada para agencias gubernamentales de Estados Unidos y sus socios. Está físicamente aislado de la nube global de Azure y es operado por personal de EE. UU. evaluado para cumplir con los requisitos de cumplimiento de los gobiernos federal, estatal, local y tribal de EE. UU. Para más detalles, consulte Microsoft Azure Government.

Azure Databricks on Azure Government proporciona a la plataforma Azure Databricks desplegada en Azure Government controles de cumplimiento y seguridad. Está disponible en las regiones de Azure Government usgovva y usgovaz.

Cada espacio de trabajo tiene activado por defecto el perfil de seguridad de cumplimiento y la monitorización mejorada de seguridad, requiere Azure Private Link para conexiones de front-end y back-end, y almacena y procesa el contenido de los clientes únicamente en regiones de nube del gobierno de EE. UU.

Los espacios de trabajo beta se ejecutan en un nuevo entorno separado de los espacios de trabajo existentes de Azure Databricks en Azure Government. Los espacios de trabajo existentes no se migran. No se permite el procesamiento de información controlada no clasificada (CUI) u otros datos regulados.

Requirements

  • Una suscripción de Azure Government que nunca ha contenido un espacio de trabajo de Azure Databricks. No registre una suscripción que contenga un espacio de trabajo de Azure Databricks, que anteriormente contuviera un espacio de trabajo de Azure Databricks que fue eliminado posteriormente, o que esté asociada al entorno de Azure Databricks existente en Azure Government.
  • Permiso para registrar funciones de vista previa en la suscripción.

Importante

Usted es el único responsable de comprobar que la información confidencial nunca se introduce en campos de entrada definidos por el cliente, como nombres de área de trabajo, nombres de recursos de proceso, etiquetas, nombres de trabajo, nombres de ejecución de trabajos, nombres de red, nombres de credenciales, nombres de cuenta de almacenamiento e identificadores de repositorio de Git. Estos campos se pueden almacenar, procesar o acceder a ellos fuera del límite de cumplimiento.

Compliance

Azure Databricks en Microsoft Azure Government está en Beta. Azure Databricks está trabajando para obtener autorización para los regímenes de cumplimiento. Hasta que la autorización se complete, no procese Información Controlada No Clasificada (CUI) ni ningún otro dato regulado por estos estándares.

Empieza con la Beta

Antes de registrarte

Utilice una suscripción dedicada a Azure Government que nunca se haya utilizado para crear un espacio de trabajo de Azure Databricks. No registre una suscripción que cumpla alguna de estas condiciones:

  • Contiene un espacio de trabajo existente de Azure Databricks.
  • Anteriormente contenía un espacio de trabajo de Azure Databricks que posteriormente fue eliminado.
  • Ya está asociado con el entorno existente de Azure Databricks en Azure Government.

La Beta utiliza un registro de funcionalidad a nivel de suscripción para determinar qué entorno recibe operaciones de espacio de trabajo. Después de registrar la función de nuevo entorno, los nuevos espacios de trabajo de Azure Databricks que crees en esa suscripción se redirigen al nuevo entorno. Para registrar la función, necesitas permiso para registrar funciones de vista previa en la suscripción. Para más detalles, consulte Configurar funciones de vista previa en la suscripción de Azure.

Importante

Debes registrar la función de entorno Azure Databricks New GovCloud antes de crear cualquier espacio de trabajo de Azure Databricks en la suscripción. Los espacios de trabajo creados antes de que se registre la función no se crean en el nuevo entorno.

Registro de la característica de vista previa

  1. Inicie sesión en el portal Azure Government.
  2. Abra Suscripciones.
  3. Seleccione la suscripción de Azure Government que desea utilizar para la versión beta.
  4. En Configuración, selecciona Funciones de vista previa.
  5. Busca la función Azure Databricks New GovCloud environment.
  6. Seleccione la función y, a continuación, seleccione Registrar.
  7. Espera hasta que el estado de registro muestre Registrado.
  8. Crea un nuevo espacio de trabajo de Azure Databricks utilizando la experiencia estándar de creación de espacios de trabajo de Azure Government. Consulte Implementación de un área de trabajo mediante Azure Portal.

Note

Una suscripción solo puede asociarse a un entorno de Azure Databricks en Azure Government: el entorno existente o el nuevo entorno. Una suscripción se asocia con el entorno existente cuando se utiliza para crear un espacio de trabajo de Azure Databricks, o cuando la función de entorno existente está registrada en él. Azure Resource Manager utiliza esta asociación para decidir dónde enrutar las operaciones del espacio de trabajo, por lo que necesita un único destino inequívoco. Si registras la función de entorno Azure Databricks New GovCloud en una suscripción que ya está asociada con el entorno existente, la creación de espacios de trabajo y otras operaciones de espacio de trabajo se bloquean para proteger tus recursos existentes.

Resolver un conflicto de registro

Si la creación de espacios de trabajo u otras operaciones de espacio de trabajo fallan en una suscripción asociada al entorno existente de Azure Databricks en Azure Government, la suscripción también podría registrarse para la función de entorno Azure Databricks New GovCloud. Una suscripción no puede asociarse a ambos entornos. Azure Resource Manager requiere un único destino para las operaciones del espacio de trabajo, por lo que las bloquea para proteger los recursos existentes.

No intentes de nuevo la creación del espacio de trabajo. Elimina el registro en conflicto en su lugar.

Warning

No anule el registro de la función de una suscripción que tenga espacios de trabajo Beta activos a menos que Soporte técnico de Microsoft se lo indique.

  1. En el portal de Azure Government, vaya a Suscripciones> su suscripción >> y compruebe si Azure Databricks New GovCloud environment está registrado. Consulta Lista de funciones en vista previa.

  2. Configura la CLI de Azure como Azure Government e inicia sesión:

    az cloud set --name AzureUSGovernment
    az login
    
  3. Cancele el registro de la función. Reemplace <subscription-id> por el identificador de suscripción:

    az feature unregister --namespace Microsoft.Databricks --name UseEverGreenControlPlane --subscription <subscription-id>
    

    Para usar el portal en su lugar, consulte Anular el registro de la función en vista previa.

  4. Confirme que la función ya no está registrada:

    az feature show --namespace Microsoft.Databricks --name UseEverGreenControlPlane --subscription <subscription-id>
    
  5. Intenta de nuevo la operación del espacio de trabajo.

Si no puede determinar si la suscripción se utilizó previamente con Azure Databricks, o si el conflicto persiste, contacte con soporte como se describe en Obtener soporte.

Para unirse a la beta, registre una nueva suscripción a Azure Government que nunca haya contenido un espacio de trabajo de Azure Databricks.

Limitaciones de la versión beta

Durante la Beta:

  • El acceso está habilitado a nivel de suscripción.
  • La suscripción no debe tener el uso actual o anterior del espacio de trabajo de Azure Databricks.
  • Los nuevos espacios de trabajo en la suscripción registrada utilizan el nuevo entorno.
  • Los espacios de trabajo existentes no se migran.
  • No se admiten cargas de trabajo de producción e información no clasificada controlada (CUI).

Espacios de trabajo existentes

Los espacios de trabajo existentes permanecen asociados con el entorno en el que fueron creados. El registro Beta no migra espacios de trabajo existentes, cuadernos, datos, configuraciones u otros recursos del espacio de trabajo. Registrar la función de nuevo entorno no es un método de migración: no la habilites en una suscripción que contenga espacios de trabajo de Azure Databricks existentes o eliminados anteriormente.

Obtener asistencia

Utilice el proceso estándar de soporte de Azure Government. En la solicitud de soporte, indique que la suscripción o el espacio de trabajo afectado participa en la versión beta del nuevo entorno Azure Databricks en Microsoft Azure Government. Incluye el ID de suscripción, el nombre del espacio de trabajo, el ID y la URL, la región, el estado de registro de la característica, el mensaje de error y la operación que estabas intentando.

Perfil de seguridad de cumplimiento

El perfil de seguridad de cumplimiento está habilitado por defecto en todos los espacios de trabajo de Azure Databricks en Azure Government. El perfil de seguridad de cumplimiento cuenta con monitorización adicional, tipos de instancia aplicados para cifrado entre nodos, una imagen de computación reforzada y otras funciones que ayudan a cumplir los requisitos de cumplimiento. La actualización automática del clúster y la monitorización mejorada de seguridad también se habilitan automáticamente.

El perfil de seguridad de cumplimiento impone el uso de tipos de instancia de VM que soportan el cifrado de Azure Virtual Network, que proporciona cifrado de red implementado por hardware entre nodos del clúster. Para los requisitos, consulte Requisitos del perfil de seguridad de cumplimiento.

Regiones y direcciones URL de Azure Databricks en Azure Government

Azure Databricks en Azure Government está disponible en las regiones usgovva y usgovaz. Consulte Regiones de Azure Databricks.

Las direcciones URL de Azure Databricks en Azure Government difieren de las direcciones URL de Azure Databricks en la oferta comercial. Utilice las siguientes URLs para Azure Databricks en Azure Government:

  • URL de la consola de cuenta y la URL base para las APIs REST: https://accounts.usgov.databricks.azure.us/
  • URL del espacio de trabajo y URL base para APIs REST a nivel de espacio de trabajo: https://adb-<workspace-id>.<random-number>.usgov.databricks.azure.us/

Después de crear el espacio de trabajo, puedes confirmar su URL en la página Información general del espacio de trabajo en el portal de Azure Government.

Utilice la URL de la consola de cuenta para establecer su primer administrador de cuenta. Para los pasos, consulte Establecer su primer administrador de cuenta. Para completar estos pasos, debe ser un Administrador Global de Microsoft Entra ID con acceso elevado. Para más detalles, consulte Elevar acceso para un Administrador Global.

Ubicación de almacenamiento de datos

La residencia de datos siempre se aplica para Azure Databricks en áreas de trabajo de Azure Government. El contenido de los clientes se almacena y procesa únicamente en regiones de la nube del gobierno de EE. UU. La configuración de procesamiento intergeográfico no se aplica a los espacios de trabajo de Azure Government y no puede utilizarse para procesar datos fuera de las regiones cloud del gobierno de EE. UU.

Tablas de sistema compatibles

Las siguientes tablas de sistema están disponibles en el nuevo entorno Azure Databricks on Azure Government (Beta) para supervisión, gobernanza y gestión de costes:

  • System.access esquema: assistant_events, audit, inbound_network, outbound_network, workspaces_latest
  • esquema system.billing: list_prices, usage
  • system.compute esquema: clusters, node_timeline, node_types, warehouse_events, warehouses
  • system.lakeflow schema: job_run_timeline, job_task_run_timeline, job_tasks, jobs, pipeline_update_timeline, pipelines
  • esquema system.mlflow: experiments_latest, run_metrics_history, runs_latest
  • Esquema system.query: history
  • system.storage schema: predictive_optimization_operations_history, table_auto_upgrade_operations_history

Consulte Referencia de tablas del sistema.