Spark kullanıcı arabirimini kullanarak maliyet ve performans sorunlarını tanılama

Bu kılavuz, maliyet ve performans sorunlarını tanılamak için Spark kullanıcı arabirimini kullanma konusunda size yol gösterir. Adım adım kılavuz ve pratik bir nasıl yapılır kılavuzu. Spark kullanıcı arabirimindeki her sayfanın ne yaptığına ilişkin bir açıklama sağlamak yerine, ne arayabileceğinizi ve ne anlama geldiğini söyler. Sürücü, çalışan, yürütücü, aşama ve görev kavramlarını bilmiyorsanız Spark mimarisini gözden geçirmek isteyebilirsiniz.

Çeşitli iyileştirme araçlarının kapsamlı bir listesini arıyorsanız Databricks İyileştirme kılavuzunu kullanın. İyileştirme kılavuzunun bölümlerine bu Spark kullanıcı arabirimi kılavuzunda başvurabilirsiniz.

Bu kılavuzu kullanma

Kılavuzda gezinmek için, sonraki adıma geçmek üzere her sayfaya eklenmiş bağlantıları kullanın. Kılavuzda sırasıyla aşağıdaki adımlar yer alır:

  1. Önemli sorunları belirlemek için İşler Zaman Çizelgesi'ni kullanma
  2. En uzun aşamaya bakın
  3. Eğriltme veya taşma arayın
  4. En uzun aşamanın G/Ç bağlı olup olmadığını belirleme
  5. Yavaş aşama çalışma zamanının diğer nedenlerini arayın

Haydi başlayalım!

Spark kullanıcı arabirimini açma

  1. Kümenizin sayfasına gidin:

    İşlem'e gidin

  2. Spark Kullanıcı Arabirimi'ne tıklayın:

    SparkUI'ye gidin

Sonraki adım

Spark kullanıcı arabirimini açtığınıza göre işlem hattınız veya sorgunuz hakkında daha fazla bilgi edinmek için olay zaman çizelgesini gözden geçirin. Bkz. İşler zaman çizelgesi.