Azure Databricks'te keşif veri analizi: Araçlar ve teknikler

Azure Databricks üzerinde keşif veri analizi (EDA), veri kümelerini özetlemek, sorunları saptamak ve analize hazır olma durumunu değerlendirmek için Databricks SQL ve Databricks Runtime'daki yerleşik analiz ve görselleştirme araçlarını kullanır.

EDA nedir ve neden yararlıdır?

Keşif veri analizi (EDA), ana özelliklerini özetlemek ve verilerle ilgili sorunları belirlemek için veri kümelerini keşfetme yöntemlerini içerir. İstatistiksel yöntemleri ve görselleştirmeleri kullanarak analize hazır olduğunu belirlemek ve veri hazırlama için hangi tekniklerin uygulanacağını bildirmek için bir veri kümesi hakkında bilgi edinebilirsiniz. EDA, ml modellerini eğitmek için hangi algoritmaları uygulamayı seçtiğinizi de etkileyebilir.

Azure Databricks'teki EDA araçları nelerdir?

Azure Databricks,hem Databricks SQL'de hem de Databricks Runtime'da yerleşik analiz ve görselleştirme araçlarına sahiptir. Azure Databricks'te kullanılabilen görselleştirme türlerinin resimli listesi için bkz . Not defteri ve SQL düzenleyicisi görselleştirme türleri.

Databricks SQL'de EDA

Databricks SQL'de veri görselleştirme ve araştırma araçları hakkında bazı yararlı makaleler şunlardır:

Databricks Runtime'da EDA

Databricks Runtime, popüler veri araştırma kitaplıklarının zaten yüklü olduğu önceden oluşturulmuş bir ortam sağlar. yerleşik kitaplıkların listesinisürüm notlarında görebilirsiniz.

Ayrıca, aşağıdaki makaleler Databricks Runtime'daki görselleştirme araçlarının örneklerini gösterir:

Databricks Python not defterinde SQL ve Python'ı birleştirerek verileri keşfedebilirsiniz. Python not defterindeki bir SQL dil hücresinde kod çalıştırdığınızda, tablo sonuçları otomatik olarak Python DataFrame olarak kullanılabilir hale getirilir. Ayrıntılar için bkz. Python not defterlerinde SQL hücre sonuçlarını keşfetme.