Yönetilen sanal ağ içindeki tümleştirme çalışma zamanını izleme

UYGULANANLAR: Azure Data Factory Azure Synapse Analytics

İpucu

Kuruluşlar için hepsi bir arada analiz çözümü olan Microsoft Fabric'te Data Factory'yi deneyin. Microsoft Fabric , veri taşımadan veri bilimine, gerçek zamanlı analize, iş zekasına ve raporlamaya kadar her şeyi kapsar. Yeni bir deneme sürümünü ücretsiz olarak başlatmayı öğrenin!

Veri kaynaklarınızı Data Factory hizmetinin yönettiği bir sanal ağa güvenli bir şekilde bağlamak için Azure Data Factory yönetilen bir sanal ağ kullanabilirsiniz. Bu özelliği kullanarak, veri tümleştirme ve düzenleme işlemleriniz için özel ve yalıtılmış bir ortam oluşturabilirsiniz.

Yönetilen bir sanal ağ kullandığınızda Data Factory'deki veri tümleştirme ve düzenleme özelliklerini Azure sanal ağlarının güvenliği ve esnekliğiyle birleştirirsiniz. İster şirket içinde ister bulutta olsun, ağ kaynaklarınıza sorunsuz bir şekilde bağlanan güçlü, ölçeklenebilir ve güvenli veri tümleştirme işlem hatları oluşturmanıza olanak tanır.

Yönetilen işlemin yaygın sorunlarından biri, özellikle yönetilen bir sanal ağ ortamında performans ve sistem durumuyla ilgili görünürlüğün olmamasıdır. Düzgün izleme olmadan, sorunların tanımlanması ve çözülmesi zorlaşır ve olası gecikmelere, hatalara ve performans düşüşlerine yol açabilir.

Data Factory'de gelişmiş izleme özelliğini kullanarak veri tümleştirme süreçlerinizle ilgili değerli içgörüler elde edebilirsiniz. Bu içgörüler verimliliğin artırılmasına, daha iyi kaynak kullanımına ve genel performansın artırılmasına yol açabilir. Proaktif izleme ve zamanında uyarılar sayesinde sorunları giderebilir, iş akışlarını iyileştirebilir ve yönetilen sanal ağ ortamında veri tümleştirme işlem hatlarınızın sorunsuz bir şekilde yürütülmesini sağlayabilirsiniz.

Yeni ölçümler

Yeni ölçümlerin kullanıma sunulması, yönetilen sanal ağ ortamlarında görünürlük ve izleme özelliklerini geliştirir.

Azure Data Factory üç farklı işlem havuzu türü sağlar:

• Kopyalama etkinliği için işlem
• Arama gibi işlem hattı etkinliği için işlem
• Azure Databricks not defteri gibi bir dış etkinlik için işlem

Bu işlem havuzları, çeşitli iş yüklerini barındırmak ve kaynakları en iyi şekilde ayırmak için esneklik ve ölçeklenebilirlik sunar. Her biri belirli etkinlik yürütme gereksinimlerini işlemek için uyarlanmıştır.

Tüm işlem havuzlarında tutarlı ve kapsamlı izleme sağlamaya yardımcı olmak için aynı izleme ölçümleri kümelerini uyguladık:

• Kapasite kullanımı
• Kullanılabilir kapasite yüzdesi
• Kuyruk uzunluğu bekleniyor

Kullandığınız işlem havuzunun türünden bağımsız olarak, veri tümleştirme etkinliklerinizin performansı ve durumu hakkında içgörüler elde etmek için standartlaştırılmış bir ölçüm kümesine erişebilir ve bunları analiz edebilirsiniz.

Not

Bu ölçümler yalnızca yönetilen bir sanal ağ içindeki tümleştirme çalışma zamanında yaşam süresi (TTL) etkinleştirdiğinizde geçerlidir.

Metric	Unit	Açıklama
MVNet tümleştirme çalışma zamanının kapasite kullanımını kopyalama	Yüzde	Yönetilen sanal ağın tümleştirme çalışma zamanındaki TTL kopyalama etkinlikleri için 1 dakikalık bir süre içinde en fazla Veri Entegrasyonu Birimi (DIU) kullanımı yüzdesi.
MVNet tümleştirme çalışma zamanının kullanılabilir kapasite yüzdesini kopyalama	Yüzde	1 dakikalık bir süre içinde yönetilen sanal ağın tümleştirme çalışma zamanındaki TTL kopyalama etkinlikleri için kullanılabilir DIU'nun en yüksek yüzdesi.
MVNet tümleştirme çalışma zamanının bekleme kuyruğu uzunluğunu kopyalama	Sayı	Yönetilen bir sanal ağın tümleştirme çalışma zamanındaki TTL kopyalama etkinliklerinin bekleme kuyruğu uzunluğu 1 dakikalık bir süre içinde.
MVNet tümleştirme çalışma zamanının işlem hattı kapasitesi kullanımı	Yüzde	1 dakikalık bir süre içinde yönetilen sanal ağın tümleştirme çalışma zamanında işlem hattı etkinlikleri için DIU kullanımının maksimum yüzdesi.
MVNet tümleştirme çalışma zamanının kullanılabilir kapasite yüzdesi	Yüzde	Yönetilen bir sanal ağın tümleştirme çalışma zamanındaki işlem hattı etkinlikleri için 1 dakikalık bir süre içinde kullanılabilir DIU'nun maksimum yüzdesi.
MVNet tümleştirme çalışma zamanının kuyruk uzunluğunu bekleyen işlem hattı	Sayı	Yönetilen sanal ağın tümleştirme çalışma zamanındaki işlem hattı etkinliklerinin bekleme kuyruğu uzunluğu 1 dakikalık bir süre içinde.
MVNet tümleştirme çalışma zamanının dış kapasite kullanımı	Yüzde	1 dakikalık bir süre içinde yönetilen sanal ağın tümleştirme çalışma zamanındaki dış etkinlikler için DIU kullanımının maksimum yüzdesi.
MVNet tümleştirme çalışma zamanının dış kullanılabilir kapasite yüzdesi	Yüzde	Yönetilen bir sanal ağın tümleştirme çalışma zamanındaki dış etkinlikler için 1 dakikalık bir süre içinde kullanılabilir diu maksimum yüzdesi.
MVNet tümleştirme çalışma zamanının dış bekleme kuyruğu uzunluğu	Sayı	1 dakikalık bir süre içinde yönetilen sanal ağın tümleştirme çalışma zamanındaki dış etkinliklerin bekleme kuyruğu uzunluğu.

Bu ölçümler hakkında daha fazla bilgi için bkz . Microsoft.DataFactory/factorys için desteklenen ölçümler.

Performans iyileştirme için ölçümleri kullanma

Ölçümleri kullanarak, yönetilen bir sanal ağ içindeki tümleştirme çalışma zamanınızın performansını ve sağlamlığını sorunsuz bir şekilde izleyebilir ve değerlendirebilirsiniz. Verimliliği en üst düzeye çıkarmak için işlem ayarlarını ve iş akışını iyileştirerek sürekli iyileştirme için olası alanları da ortaya çıkarabilirsiniz.

Bu ölçümlerin pratik uygulaması hakkında daha fazla netlik sağlamak için birkaç örnek senaryo aşağıda verilmiştir.

Dengeli

Kapasite kullanımının yüzde 100'in altında olduğunu ve kullanılabilir kapasite yüzdesinin yüksek olduğunu gözlemlerseniz, ayırdığınız işlem kaynakları verimli bir şekilde kullanılır.

Bekleme kuyruğu uzunluğu sürekli olarak düşük kalırsa veya zaman zaman kısa ani artışlarla karşılaşırsa kapasite kullanımı yüzde 100'e ulaşana kadar diğer etkinlikleri kuyruğa almanızı öneririz. Bu yaklaşım, kaynakların en iyi şekilde kullanımını sağlamaya yardımcı olur ve minimum gecikmelerle sorunsuz bir iş akışının korunmasına yardımcı olur.

Performans odaklı

Kapasite kullanımının tutarlı olarak düşük olduğunu ve bekleme kuyruğu uzunluğunun tutarlı olarak düşük kaldığını veya zaman zaman kısa artışlarla karşılaştığınızı gözlemlerseniz, ayırdığınız işlem kaynakları etkinliklere olan talepten daha yüksektir.

Bu gibi durumlarda, kullanılabilir kapasite yüzdesinin yüksek veya düşük olmasına bakılmaksızın maliyetlerinizi düşürmek için ayrılan işlem kaynaklarını azaltmanızı öneririz. İşlemi iş yükü gereksinimleriyle eşleşecek şekilde haklarlayarak, işlemlerinizin verimliliğinden ödün vermeden kaynak kullanımınızı iyileştirebilir ve maliyetlerden tasarruf edebilirsiniz.

Maliyet odaklı

Tüm ölçümlerin (kapasite kullanımı, kullanılabilir kapasite yüzdesi ve bekleme kuyruğu uzunluğu dahil) yüksek olduğunu fark ederseniz, ayırdığınız işlem kaynakları etkinlikleriniz için büyük olasılıkla yetersizdir.

Bu senaryoda, kuyruk süresini kısaltmak için ayrılan işlem kaynaklarını artırmanızı öneririz. Daha fazla işlem kapasitesi eklemek, etkinliklerinizin verimli bir şekilde çalışması için yeterli kaynağa sahip olduğundan emin olmanıza yardımcı olur ve bu da kalabalık bir kuyruğun neden olduğu gecikmeleri en aza indirir.

Aralıklı etkinlik yürütme

Kullanılabilir Kapasite Yüzdesi'nin belirli bir süre içinde düşük ve yüksek arasında dalgalandığını fark ederseniz, bunun nedeni büyük olasılıkla etkinliklerinizin aralıklı olarak yürütülmesidir ve burada yapılandırdığınız Yaşam Süresi (TTL) dönemi etkinlikleriniz arasındaki aralıktan daha kısadır. Bunun iş akışınızın performansı üzerinde önemli bir etkisi olabilir. Bu sorunu çözmek için iki olası çözüm vardır. İlk olarak, tutarlı bir iş yükünü korumak ve kullanılabilir işlem kaynaklarını daha etkili bir şekilde kullanmak için daha fazla etkinliği kuyruğa alabilirsiniz. İşlemi sürekli çalışır durumda tutarak, ısınma süresini önleyebilir ve daha iyi performans elde edebilirsiniz. Alternatif olarak, etkinlikleriniz arasındaki aralıkla uyumlu olacak şekilde TTL dönemini büyütebilirsiniz. Bu, işlem kaynaklarının daha uzun süre kullanılabilir kalmasını sağlayarak ısınma dönemlerinin sıklığını azaltır ve maliyet verimliliğini en iyi duruma getirmenizi sağlar.

Bu çözümlerden birini uygulayarak iş akışınızın performansını artırabilir, maliyet etkilerini en aza indirebilir ve aralıklı etkinliklerinizin daha sorunsuz yürütülmesini sağlayabilirsiniz.

İlgili içerik

Yönetilen sanal ağlar ve yönetilen özel uç noktalar hakkında bilgi edinmek için aşağıdaki makaleye ilerleyin: Azure Data Factory yönetilen sanal ağı.