¿Qué servicio es el optimo en costes para la ejecución de un proceso nocturno en Python de unas 2-5 horas de duración?

Question

Tengo un script de Python que debo programar en una ejecución nocturna. Este proceso realiza llamadas a servicios de Azure como Speech to Text, OpenAI y utilizando también Blob Storage y SQL.

Este proceso, dependiendo del volumen de datos a gestionar, puede tardar entre 2 a 5 horas y ha de ejecutarse de forma diaria (días laborables) todas las noches.

Pensé en utilizar Azure Functions, para pagar solo por el tiempo de uso del servidor y reducir costes, pero me encontré con el problema del timeout de 5 minutos (hasta 60min garantizados en la versión premium)

Mi duda es, cual es el servicio que mejor se adapta a estas necesidades, para poder ejecutar mi job de forma diaria y con el coste más reducido posible.

Muchas gracias!

Answer 1

Para ejecutar procesos de larga duración en Azure, puedes considerar los siguientes servicios:

• Azure Automation: Este servicio te permite automatizar las tareas de administración en la nube que realizas con frecuencia y que requieren mucho tiempo. Puede ser útil para procesos de larga duración. https://azure.microsoft.com/es-mx/products/automation/
• Azure Batch: Este servicio es útil cuando necesitas ejecutar tareas de cómputo de alto rendimiento y paralelas. No tiene un tiempo de espera específico para las tareas, lo que significa que podría manejar tareas de larga duración. https://learn.microsoft.com/en-us/azure/batch/best-practices
• Azure Virtual Machines: Puedes configurar una máquina virtual en Azure para ejecutar procesos durante el tiempo que necesites. Enciendes la VM a una hora especifica y que se apegue después de ejecutar el proceso. https://learn.microsoft.com/es-es/azure/architecture/guide/technology-choices/compute-decision-tree

Espero esto te ayude.

Si la respuesta te ayudó, recuerda aceptarla.