Inicio rápido: Análisis y migración a Azure con Komprise

En este artículo se describe el uso de Komprise Intelligent Data Management para identificar y colocar los datos adecuados en el servicio de Azure Storage adecuado.

Mover datos puede ser intimidante. A menudo hay numerosos desafíos, empezando por identificar lo que se va a mover, hacer coincidir el valor de los datos con la clase de almacenamiento adecuada y, a continuación, moverlo rápidamente, a la vez que se minimizan los impactos del usuario final.

Komprise facilita el traslado de los datos a servicios de almacenamiento de Azure, como Azure Files, Azure NetApp Files, Azure Blob Storage u otras soluciones NAS de ISV.

Obtenga más información sobre otros NAS de ISV en el artículo de soluciones de socios verificados.

En este artículo se revisa dónde empezar a trabajar, consideraciones y recomendaciones al mover datos a Azure. Use los vínculos siguientes para conectarse a lo que es importante.

• Primero, conocer; actuar de manera más inteligente, analizar, clasificar, priorizar lo que importa
• Evaluación del rendimiento de red y almacenamiento
• Arquitectura de administración de datos inteligente
• Introducción a Komprise
• Introducción a Azure
• Guía de migración
• Instrucciones de implementación para migrar datos de objetos
• API de migración
• Pasos siguientes

Dónde empezar

Visite Azure Marketplace para más información sobre Komprise y Azure juntos. Obtenga información sobre cómo puede recibir una introducción, ponerse en contacto para hacer preguntas, concertar una reunión con el equipo local de Komprise o registrarse para una prueba.

Visite Komprise directamente para obtener más información sobre nuestra solución, incluyendo notas del producto y arquitecturas de referencia.

Conoce primero, muévete con más inteligencia (analiza, clasifica, mueve lo que importa)

Komprise proporciona información rápida sobre los datos no estructurados en todas las plataformas de almacenamiento con funcionalidades de Análisis de planes y Análisis profundo. Análisis de planes proporciona inmediatamente resultados de resumen con gráficos de uso y la página Actividades de análisis muestra problemas importantes del sistema de archivos detectados. Análisis profundo permite a los clientes profundizar más en comprender sus datos con funcionalidades de consulta personalizadas y gráficos para buscar conjuntos de datos seleccionados, archivos huérfanos y mucho más.

Comprender los datos es el primer paso para seleccionar el servicio de almacenamiento de Azure adecuado. Es importante conocer el tipo de datos, la cantidad, el recuento de archivos, los propietarios y otra información para ayudar a determinar si los datos deben estar en Azure Files o Azure NetApp Files. Esta información también puede ayudarle a comprender si los datos se deben migrar o clasificar a Azure Blob para el almacenamiento a largo plazo y un ahorro significativo de costos.

Con una instalación rápida de un observador de datos de Komprise local, en 30 minutos o menos puede ver:

• Resultados inmediatos en la capacidad, el recuento de archivos y la temperatura con el mapa térmico de Komprise. Los datos se pueden filtrar para mostrar los resultados de todos los recursos compartidos, grupos o recursos compartidos individuales.

• Komprise incluye una herramienta de comparación de costos con la capacidad de editar modelos de costos del almacenamiento local actual y los costos de Azure Storage Solutions para determinar el mejor ahorro y rentabilidad de la inversión.

• Los gráficos de uso proporcionan resumen y comparaciones rápidos de tipos de archivo, tamaños de archivo, recuentos de archivos, propietarios principales, grupos, recursos compartidos y directorios. Use esta información para determinar el orden de la migración y evaluar el impacto empresarial de la migración de datos.

  

• Busque oportunidades para limpiar los datos expirados, lo que reduce el esfuerzo de migración y el costo del almacenamiento de destino.

• Identifique los datos inactivos, a los que no se ha accedido en seis meses o más, que podrían ser trasladados de manera rentable a Azure Blob Storage.

• La página Actividad de análisis ayuda a identificar posibles problemas por adelantado, antes de mover datos. Los problemas que no desea encontrar después de empezar a mover datos incluyen:

  • Archivos o directorios, con problemas de acceso restringido o resolución
  • Fecha establecida demasiado grande para el servicio de almacenamiento de destino en el recuento de archivos o la capacidad
  • Conjuntos de datos con un gran número de archivos diminutos o con un gran número de directorios vacíos
  • Acciones de bajo rendimiento
  • Falta de compatibilidad de destino con archivos dispersos o vínculos simbólicos

Komprise sabe que puede ser difícil encontrar solo los datos correctos en miles de millones de archivos. Komprise Deep Analytics crea un índice de archivos global de todos los metadatos del archivo, lo que proporciona una manera unificada de buscar, etiquetar y crear conjuntos de datos seleccionados en los silos de almacenamiento. Puede identificar datos huérfanos, datos por nombre, ubicación, propietario, fecha, tipo de aplicación o extensión. Los administradores pueden usar estas consultas y etiquetar conjuntos de datos para mover, copiar, limitar o alimentar las canalizaciones de datos. También pueden establecer directivas de flujo de trabajo de datos. Esto permite a la empresa usar otros servicios de datos en la nube de Azure, como la identificación de datos personales, la ejecución de análisis de datos en la nube y la selección y alimentación de datos perimetrales en lagos de datos en la nube.

Más información en Komprise Deep Analytics

Use toda esta información al seleccionar el servicio de almacenamiento de Azure adecuado. Komprise ayuda a identificar factores clave como recursos compartidos, protocolo, tamaño lógico, recuento de archivos, tipo de datos y tipo de rendimiento.

• Azure Files
  • Sitio de documentación de Azure Files
  • Planeamiento de una implementación de Azure Files
• Blob en bloques de Azure
  • Sitio de documentación de Azure Blob
  • Niveles de acceso para azure Blob
• Cuentas de Azure Storage
  • Introducción a la cuenta de Azure Storage
  • Creación de una cuenta de almacenamiento
• Azure NetApp Files
  • Sitio de documentación de Azure NetApp Files
  • Niveles de servicio para Azure NetApp Files

Evaluación del rendimiento de red y almacenamiento

Las migraciones solo se mueven tan rápido como permite la infraestructura. Es fundamental conocer las capacidades de rendimiento combinadas de los sistemas de red y almacenamiento juntos. La medición del rendimiento de redes y almacenamiento individualmente no puede revelar limitaciones ocultas en las configuraciones de puerto, el enrutamiento, la sobrecarga del sistema de archivos y mucho más.

Komprise evalúa el rendimiento de red y almacenamiento, combinado, para identificar los problemas de conectividad entre el centro de datos y Azure Storage.

La evaluación de Komprise del entorno del cliente (ACE) es fácil de implementar y ejecutar. La herramienta simula una serie de escenarios de movimiento de datos entre recursos compartidos NAS de origen local y servicios de almacenamiento de Azure NAS de destino, como Azure Files y Azure NetApp Files. Realiza un conjunto de operaciones de lectura, escritura y suma de comprobación que recopilan números de rendimiento generales. Los resultados pueden resaltar posibles pérdidas de rendimiento para investigar. En esta lista se detallan algunas herramientas y servicios para aislar problemas.

• Paquete de analizadores de ancho de banda de SolarWinds
• PRTG de Paessler
• Network Assistant de Cisco
• WhatsUp Gold

Si usa una conexión de red pública, considere la posibilidad de cambiar a una VPN privada o contratar con un proveedor de servicios de Azure ExpressRoute. Realizar este cambio puede mejorar la seguridad, el rendimiento y proporcionar una mayor oportunidad para identificar y resolver los problemas de conectividad.

Para más información sobre Express Routes:

• ¿Qué es Azure ExpressRoute?
• Modelos de conectividad de ExpressRoute
• Extensión de una red local mediante ExpressRoute

Otros elementos de rendimiento para investigar con redes seguras:

• Clientes de Azure ExpressRoute existentes, revise el uso del circuito en el Azure Portal
• Trabajar con el ISP y solicitar informes que muestran el uso diario y mensual existente

Arquitectura de administración de datos inteligente

Komprise proporciona una infraestructura altamente escalable para satisfacer todas las necesidades. Comience a evaluar el entorno con un observador de datos y a continuación, escale verticalmente y horizontalmente para mover terabytes a petabytes de datos con más mover datos. Visión general de la arquitectura de Komprise de ejemplo

El software Komprise es fácil de configurar en entornos virtuales para lograr una flexibilidad completa de los recursos. Para lograr un rendimiento óptimo, flexibilidad y control de costos, los administradores de datos de Komprise (observadores) y los movers de datos (proxies) se pueden implementar de forma local o en la nube para satisfacer sus requisitos únicos.

• Director: la consola de administración de Komprise Grid. Se usa para configurar el entorno, supervisar las actividades, ver informes y gráficos y establecer directivas.
• Observadores: los administradores de datos komprise analizan los sistemas de almacenamiento, resumen los informes, se comunican con el Director, administran las migraciones y controlan el movimiento de datos.
• Servidores proxy: estos motores de datos escalables simplifican y aceleran el flujo de datos SMB/CIFS. Los gestores de datos proxy pueden escalar fácilmente para satisfacer los requisitos de rendimiento de un entorno en crecimiento o un plazo ajustado.

Introducción a Komprise

1. Póngase en contacto con Komprise y conozca al equipo local que configurará su propia consola de Komprise Director y le ayudará con una llamada de preinstalación e instalación. Con la preparación, la instalación debe llevar aproximadamente 30 minutos desde el encendido para obtener los primeros resultados del análisis. Regístrese en https://www.komprise.com/azure-migration

2. Después de iniciar sesión con el Director, la página del asistente de instalación proporcionará enlaces para descargar la aplicación virtual Komprise Observer. Encienda la máquina virtual del observador y configúrela con la dirección IP estática, la red general y la información de dominio. El último paso del script de instalación es iniciar sesión en el director para establecer la comunicación.

   

3. Agregue recursos compartidos para su análisis en la página Especificar recursos compartidos. Use Detectar recursos compartidos para identificar un sistema NAS e importar automáticamente toda la información de recursos compartidos.

   • Escriba información del sistema de archivos:
     • Una plataforma para el NAS de origen
     • Nombre de host o dirección IP
     • Nombre para mostrar
     • Credenciales (para recursos compartidos de archivos SMB)

   

   • Repita estos pasos para agregar otros sistemas de origen y destino. En el menú, elija Recursos > compartidos > Agregar servidor de archivos.
   • Una vez agregado un servidor de archivos, profundice al nivel de compartición y habilite el recurso compartido para iniciar un análisis. Consulte la página Plan para obtener los resultados del análisis.

   

   • Pausar para analizar los recursos compartidos recién agregados revisando la página Plan, los gráficos de uso y los resultados de actividades de análisis para descubrir los problemas para solucionar, ajustar el tamaño y seleccionar los servicios de Azure Storage adecuados. Consulte la sección siguiente Introducción a Azure para crear los servicios de Azure Storage de destino.
   • Use la herramienta Komprise ACE para identificar y resolver cualquier problema de rendimiento de la red de infraestructura y almacenamiento antes de interactuar con los motores de migración de Komprise. Una vez que todo parezca bueno, continúe con el paso siguiente con la adición de servicios de Azure Storage como orígenes de destino para Komprise Migration.
   • Agregue Azure Files como destino de migración y configúrelo en la pestaña Orígenes, no en la pestaña Destinos. Los sistemas de destino son para las operaciones del plan de Komprise, como la nivelación sin interrupciones utilizando la Komprise Transparent Movement Technology™ (TMT) y las acciones de Deep Analytics.

   

   Ejemplo de cómo agregar Azure Files como destino de migración en la pestaña Orígenes:

   

Introducción a Azure

Microsoft ofrece un marco para empezar a trabajar con Azure. Cloud Adoption Framework (CAF) es un enfoque detallado de la transformación digital empresarial y una guía completa para planear una adopción de la nube de nivel de producción. Caf incluye una guía de configuración paso a paso de Azure para ayudarle a ponerse en marcha y ejecutar de forma rápida y segura. Puede encontrar una versión interactiva en Azure Portal. Encontrará arquitecturas de ejemplo, procedimientos recomendados específicos para implementar aplicaciones y recursos de entrenamiento gratuitos para ponerle en la ruta de acceso a la experiencia de Azure.

Antes de iniciar el proyecto, se debe implementar el servicio de destino. Puede obtener más información aquí:

• Cómo crear un recurso compartido de archivos de Azure
• Cómo crear un volumen SMB o una exportación NFS en Azure NetApp Files

Komprise Grid se implementa en un entorno virtual (Hyper-V, VMware, KVM) para velocidad, escalabilidad y resistencia. Como alternativa, puede configurar el entorno en la suscripción de Azure mediante Azure Marketplace.

1. Abra Azure Portal y busque cuentas de almacenamiento.

   

   También puede hacer clic en el icono de cuentas de almacenamiento predeterminadas.

   

2. Seleccione Crear para agregar una cuenta: a. Seleccione un grupo de recursos existente o Crear nuevo. b. Especifique un nombre único para la cuenta de almacenamiento. c. Elija la región. d. Seleccione Rendimiento Estándar o Premium, en función de sus necesidades. Si selecciona Premium, elija Archivos compartidos en tipo de cuenta premium. e. Elija la redundancia que cumple los requisitos de protección de datos.

   

3. A continuación, considere la posibilidad de mantener la configuración predeterminada recomendada en la pantalla Avanzadas. Si va a migrar a Azure Files, se recomienda habilitar recursos compartidos de archivos grandes si están disponibles.

   

4. Mantenga las opciones de red predeterminadas por ahora y pase a la protección de datos. Puede optar por habilitar la eliminación temporal, lo que le permite recuperar datos eliminados accidentalmente dentro del período de retención definido. La eliminación temporal ofrece protección contra la eliminación accidental o malintencionada.

   

5. Añadir etiquetas para una organización si utiliza el etiquetado y crea su cuenta

6. Dos pasos rápidos son todos los necesarios para poder agregar la cuenta al entorno de Komprise. Vaya a la cuenta que creó en Azure Portal y seleccione Recursos compartidos de archivos en el menú Servicio de archivos. Agregue un recurso compartido de archivos, asignándole un nombre significativo. A continuación, vaya al elemento Claves de acceso en Configuración y copie el nombre de la cuenta de almacenamiento y una de las dos claves de acceso. Si las claves no se muestran, seleccione Mostrar claves.

   

7. Vaya a las propiedades del recurso compartido de archivos de Azure. Anote la dirección URL, que es necesaria para agregar la conexión de Azure al recurso compartido de archivos de destino de Komprise.

   

8. (Opcional) Puede agregar capas adicionales de seguridad a la implementación.

   a) Configure el acceso basado en roles para limitar quién puede hacer cambios en la cuenta de Storage. Para más información, consulte Roles integrados para las operaciones de administración.

   b. Restrinja el acceso a la cuenta a segmentos de red específicos con la configuración del firewall de almacenamiento. Configuración del firewall para evitar el acceso desde fuera de la red corporativa

   

   c. Establezca un Bloqueo de eliminación en la cuenta para evitar la eliminación accidental de la cuenta de almacenamiento.

   

   d. Revise este documento para conocer otros procedimientos recomendados de seguridad.

Guía de migración

Organización de la migración

Simplifique las tareas de planeación de la migración mediante la organización en algunas clases operativas. Revise el número de archivos, la capacidad por tamaño de archivo, las edades de los archivos y el tiempo necesario para completar el análisis inicial para identificar dónde comenzar. Empezando con lo fácil y construyendo hacia lo complejo ayuda a ganar experiencia y confianza, y a confirmar los procesos de cambio antes de abordar las migraciones más difíciles. Estos pasos se pueden resumir como:

• Tipo de almacenamiento por niveles: datos que se pueden mover en cualquier momento, ya que normalmente los datos son datos inactivos a los que nadie tiene acceso se pueden enviar a Azure Blog Archive para el almacenamiento a largo plazo. Los datos incluidos podrían ser un recurso compartido completo o parte de un recurso compartido. Con niveles transparentes, Komprise deja un vínculo simbólico para que los usuarios finales nunca pierdan el acceso a sus archivos y datos.
• Tipo sencillo: recursos compartidos bastante estáticos con pocos usuarios que se mueven en una o dos iteraciones. Se requiere un tiempo de migración mínimo y un tiempo de transición breve.
• Tipo moderado: individuos poco a moderadamente activos con archivos de tamaño medio (~1 MB). Debe necesitar un tiempo mínimo de migración; puede requerir la programación de una ventana de transición específica.
• Tipo activo: comparte con el cambio de datos activo diariamente, lo que puede tener un efecto significativo en la comprobación de datos, las operaciones, los costos, los observadores y la ubicación de los sistemas proxy (locales o en la nube) y el tiempo de transición final. Puede requerir varias iteraciones de migración y programar tiempos de migración finales más largos
• Tipo complejo: representa el movimiento de recursos compartidos con varias dependencias de varios recursos compartidos que migran al unísono, a recursos compartidos con muchos archivos pequeños o recursos compartidos con muchos directorios vacíos. Los recursos compartidos complejos pueden requerir coordinación anticipada, posiblemente varias iteraciones y ventanas de transición más largas en función de la situación.

Administración de la migración

Komprise proporciona migración en vivo, donde los usuarios finales y las aplicaciones tienen acceso continuo a los datos mientras se mueven los datos. Con las migraciones elásticas de Komprise, varias actividades de migración usan automáticamente la arquitectura completa para la paralelización máxima. La consola director simplifica la administración de todas las tareas de migración con una interfaz.
El proceso de migración de Komprise automatiza el traslado de directorios, archivos y vínculos de un origen a un destino. En cada paso, se comprueba la integridad de los datos. Se aplican todos los atributos, permisos y controles de acceso desde el origen. En una migración de objetos, también se migran objetos, prefijos y metadatos de cada objeto. Para configurar y ejecutar una migración, siga estos pasos:

1. Una vez completado el análisis y confirmado que el rendimiento del almacenamiento y la red están configurados de forma óptima, está listo para empezar con los tipos de migración de archivo y fácil.

2. Vaya a Migrar y seleccione Agregar migración.

   

3. Agregue la tarea de migración seleccionando los recursos compartidos de origen y destino adecuados. Proporcione un nombre de migración. Una vez configurado, seleccione Iniciar migración. Este paso es ligeramente diferente para las migraciones de datos de archivos y objetos a medida que selecciona almacenes de datos en lugar de recursos compartidos. Revise los pasos siguientes. También puede verificar cada transferencia de datos mediante la suma de comprobación MD5. Dependiendo de la posición de los componentes de movimiento de datos Komprise, los costos de salida pueden producirse cuando se recuperan objetos en la nube para calcular los valores MD5.

   Migración de archivos

   

   La migración de archivos proporciona opciones para conservar el tiempo de acceso y las ACL de SMB en el destino. Esta opción depende del protocolo y el servicio de archivos de origen y destino seleccionados.

   Migración de objetos

   

   La migración de objetos proporciona opciones para elegir el nivel de almacenamiento de Azure de destino (frecuente, esporádico, archivo).

4. Una vez iniciada la migración, puede ir a Migrar para supervisar el progreso.

   

5. Una vez que se hayan migrado todos los cambios, ejecute una migración final haciendo clic en Acciones y seleccionando Iniciar iteración final. Antes de la migración final, se recomienda detener el acceso a los recursos compartidos de archivos de origen o moverlos al modo de solo lectura (para usuarios y aplicaciones). Este paso garantiza que no se produzca ningún cambio en el origen.

   

   Una vez finalizada la migración final, realice la transición de todos los usuarios y aplicaciones al recurso compartido de destino. La conmutación al nuevo servicio de archivos normalmente requiere cambiar la configuración de los servidores DNS y los servidores DFS o cambiar los puntos de montaje al nuevo destino.

6. Como último paso, marque la migración completada.

7. Hay una carpeta de auditoría de migración completa que contiene toda la información sobre los archivos movidos y eliminados, atributos y errores detectados para cada iteración. Los datos se escriben en la carpeta ".komprise-audit" del destino o en la carpeta de registro de un sistema especificado, configurada en Sistema | Configuración de la consola.

Instrucciones de implementación para migrar datos de objetos

La migración de sistemas de almacenamiento de objetos a Azure Blob también es un proceso sencillo. Komprise aprovisiona el director y el observador como servicios en la nube. De forma similar a la implementación local, puede analizar y comprender los datos en el sistema de orígenes, identificar los problemas y, a continuación, mover datos de forma eficaz a Azure Blob Storage. La flexibilidad de la arquitectura Komprise permite implementar los observadores donde proporcionan el máximo rendimiento, a la vez que se mantienen bajos los costos y tarifas de movimiento de datos. Para empezar, inicie sesión en el director y haga lo siguiente:

1. Vaya a Almacenes de datos y Agregue almacén de objetos. Aquí puede elegir los sistemas de adición mediante Agregar Cuenta o Agregar Contenedor.

   

2. Continuar agregando almacenes de datos de origen

3. Habilite los cubos para Analysis. Revisión de los almacenes de datos para crear un plan de migración.

4. Agregue almacenes de datos de Destino de blobs de Azure, ya sea por cuenta o bucket.

   

   Con Agregar cuenta, descubre todos los contenedores introduciendo:

   • Nombre de la cuenta de almacenamiento
   • Clave de acceso principal
   • Nombre para mostrar

   La información necesaria se puede encontrar en Azure Portal ; para ello, vaya al elemento Claves de acceso en Configuración de la cuenta de almacenamiento. Si las claves no se muestran, seleccione en mostrar claves.

   O bien, especifique un contenedor escribiendo:

   • Nombre del contenedor
   • Nombre de la cuenta de almacenamiento
   • Clave de acceso principal
   • Nombre para mostrar

El nombre del contenedor representa el contenedor de destino para la migración y debe crearse antes de la migración. Puede encontrar otra información necesaria en Azure Portal ; para ello, vaya al elemento Claves de acceso en Configuración de la cuenta de almacenamiento. Si las claves no se muestran, seleccione en mostrar claves.

5. La migración de almacenes de datos de objetos usa el mismo proceso iterativo para mover datos que los pasos de migración de NAS descritos anteriormente.

API de migración

Komprise tiene compatibilidad completa con la API de migración para que todo lo descrito en el documento se pueda controlar a través de scripts. Komprise tiene un script de ejemplo que nuestros clientes usan para mover grandes cantidades de recursos compartidos de forma eficaz. Revise con el equipo de Komprise si necesita la API.

Maximizar el valor de los datos con Azure y Komprise

Komprise le ayuda a planear y ejecutar las migraciones de datos de archivos y objetos a Azure. Una vez completadas las migraciones, puede usar el servicio komprise Intelligent Data Management completo para administrar el ciclo de vida de los datos, organizar sin problemas los datos del entorno local a Azure y buscar y ejecutar nuevos flujos de trabajo de datos.

Pasos siguientes

Marketplace

Obtenga la lista de migración de datos de Komprise en Azure Marketplace. Obtenga la descripción del conjunto completo de Komprise en Azure Marketplace.

Educación

Hay varios recursos disponibles para obtener más información:

• Introducción a la migración de almacenamiento
• Características compatibles con Komprise Intelligent Data Management en la matriz de comparación de herramientas de migración
• Matriz de compatibilidad de Komprise