Logs de diagnóstico do Apache Spark no Azure Synapse Analytics

Para solucionar problemas relacionados aos pools do Apache Spark no workspace do Azure Synapse Analytics, Suporte da Microsoft e a equipe de engenharia do Azure Synapse Analytics podem exibir e baixar logs de diagnóstico associados aos pools do Apache Spark. A Microsoft pode acessar ou fazer cópias temporárias dos dados de log para ajudar a resolve seu incidente de suporte.

Logs coletados para solução de problemas

As tabelas a seguir listam os dados de log que serão coletados para solucionar problemas do incidente de suporte. Além disso, você pode ser solicitado a fornecer os mesmos tipos de dados de seus pools do Apache Spark usando Synapse Studio.

Tipo	Descrição
Apache Spark Driver Logs	O programa de driver do Spark é um processo crítico que é usado para negociar recursos com o gerenciador de clusters e para agendar a execução do trabalho. Os logs de driver contêm detalhes sobre como o trabalho foi executado e os recursos que foram usados. Essas informações são essenciais para solucionar problemas do aplicativo Spark.
Apache Spark Executor Logs	Os Executores do Spark são processos relacionados a nós de trabalho que são responsáveis por executar tarefas individuais em um determinado trabalho do Spark. Eles são iniciados no início de um aplicativo Spark e normalmente são executados durante todo o tempo de vida de um aplicativo. Depois que os Executores do Spark executam a tarefa, eles enviam os resultados para o aplicativo de driver. Os logs do executor contêm detalhes sobre como as tarefas individuais do aplicativo foram executadas e se alguma delas falhou.
Logs de eventos do Apache Spark	Os logs de eventos do Spark contêm métricas relacionadas à execução e ao desempenho de todos os executores. Eles também contêm a lista de estágios e tarefas do agendador e as informações do ambiente de execução.

Entre em contato conosco para obter ajuda

Se você tiver dúvidas ou precisar de ajuda, crie uma solicitação de suporte ou peça ajuda à comunidade de suporte do Azure. Você também pode enviar comentários sobre o produto para a comunidade de comentários do Azure.