Bulut ölçeğinde analiz veri yönetimi giriş bölgesine genel bakış
Veri yönetimi giriş bölgesi bir yönetim işlevidir ve bulut ölçeğinde analizin merkezinde yer alır. Analiz platformunuzun idaresinin sorumluluğundadır.
Veri yönetimi giriş bölgeniz, aynı standart Azure giriş bölgesi hizmetlerine sahip ayrı bir aboneliktir. Veri göllerinize ve veri giriş bölgelerinizdeki çok teknolojili depolamaya bağlanan geziniciler aracılığıyla verilerinizin veri idaresine olanak tanır. Sanal ağ eşlemesi, veri yönetimi giriş bölgenizi veri giriş bölgelerinize ve bağlantı aboneliğinize bağlar.
Bu mimariyi başlangıç noktası olarak kullanın. Visio dosyasını indirin ve veri yönetimi giriş bölgesi uygulamanızı planlarken belirli iş ve teknik gereksinimlerinize uyacak şekilde değiştirin.
Dekont
Çok teknolojili kalıcılık, çeşitli veri türlerinizi ve bunların depolama gereksinimlerini desteklemek için farklı veri depolama/veri deposu teknolojileri arasındaki seçiminizi açıklayan bir depolama terimidir. Temelde, çok teknolojili kalıcılık, bir uygulamanın birden fazla çekirdek veritabanı veya depolama teknolojisi kullanabileceği kavramıdır.
Önemli
Veri yönetimi giriş bölgeniz, uygun idareye sahip bir yönetim grubu altında ayrı bir abonelik olarak dağıtılmalıdır. Ardından kuruluşunuz genelinde idareyi denetleyebilirsiniz. Azure giriş bölgesi hızlandırıcısı, Azure giriş bölgelerine nasıl yaklaşmanız gerektiğini gösterir.
Veri kataloğu
Kaynak grubu: governance-rg
Veri kataloğu, veri bilgilerini merkezi bir yerde kaydedip tutar ve kuruluş için kullanılabilir hale getirir. Kuruluşların farklı proje ekipleri tarafından yedekli veri alımından kaynaklanan yinelenen veri ürünlerinden kaçınmasını sağlar.
Veri giriş bölgelerinde depolanan veri ürünlerinin meta verilerini tanımlamak için bir veri kataloğu hizmeti sağlamanızı öneririz.
Bulut ölçeğinde analiz, aşağıdaki gibi hizmet vermek için Microsoft Purview'a dayanır:
- Kayıt sistemi
- Kurumsal veri kaynakları için bulma
- Veri sınıflandırma altyapısı
- İlke deposu
- Veri bilgilerini kaydetmeye ve okumaya yönelik bir API
- Uyumluluk panosu hub'ı
Veri kataloğu veri yönetimi giriş bölgesinin bir parçası olduğundan, sanal ağ (VNet) eşlemesi ve şirket içinde barındırılan tümleştirme çalışma zamanları aracılığıyla her veri giriş bölgesiyle iletişim kurabilir. Şirket içi depolarda ve diğer genel bulutlarda veri ürünlerinin bulunması, şirket içinde barındırılan tümleştirme çalışma zamanlarının daha fazla dağıtımıyla elde edilir.
Dekont
Bu belge öncelikli olarak veri kataloğu özellikleri ve veri sınıflandırması için Microsoft Purview'u kullanmaya odaklansa da kuruluşlar Alation, Okera veya Collibra gibi diğer ürünlere yatırım yapmış olabilir. Böyle bir durumda, satıcınızla birlikte çalışarak yakınlardaki bir veri yönetimi giriş bölgesi için açıklanan ilkeleri mümkün olduğunca uygulayın. Bazı özel tümleştirmelerin gerekli olabileceğini unutmayın.
Daha fazla bilgi için bkz. Bulut ölçeğinde analiz için veri kataloğu ve Microsoft Purview dağıtımı en iyi yöntemleri.
Veri kalitesi yönetimi
Kaynak grubu: governance-rg2
Geçerli çözümünüzle devam edin.
Analiz ve yapay zeka varlığınızda kalite sorunlarının çoğaltılmasını önlemek için veri kalitesini mümkün olduğunca veri kaynağınıza yakın bir şekilde yönetmeniz gerekir. Kalite ölçümlerini ve doğrulamayı veri tümleştirmenize taşımak, kalite sürecini verilerinize en yakın ekiplerle uyumlu hale getirmenizi sağlar. Bu ekipler, veri varlığınızı en derin şekilde anlar.
Veri kökeni ayrıca veri kalitesi güveni sağlar ve bunu tüm veri ürünleri ve ürünleri için sağlamanız gerekir.
Veri kalitesi yönetimi hakkında daha fazla bilgi için bkz . Veri kalitesi.
Veri modelleme deposu
Kaynak grubu: governance-rg2
Varlık ilişkisi modellerini yakalamalı ve veri yönetimi giriş bölgenizde merkezi bir konumda depolamalısınız. Bu, veri tüketicilerine kavramsal diyagramları bulmak için tek bir yer sağlar.
Birçok müşteri veri ürünlerini alımdan önce modellemek için ER Studio ve iServer kullanır.
Ana veri yönetimi
Kaynak grubu: governance-rg2
Ana veri yönetimi denetimi, veri yönetimi giriş bölgesinde bulunur. Veri ağındaki ana veri yönetimi, veri ağı için dikkate alınması gereken belirli noktaları içerir.
Birçok ana veri yönetimi çözümü, Microsoft Entra ID ile tamamen tümleştirilir. Bu tümleştirme, verilerinizin güvenliğini sağlamanıza ve farklı kullanıcı grupları için farklı görünümler sağlamanıza olanak tanır.
Daha fazla bilgi için bkz . Ana veri yönetimi sistemi.
API kataloğu
Kaynak grubu: governance-rg2
Veri uygulaması ekipleriniz büyük olasılıkla kendi veri uygulamaları için çeşitli API'ler oluşturur. Bu API'leri kuruluşunuz genelinde bulmak zor olabilir. Veri yönetimi giriş bölgenize bir API kataloğu yerleştirmek bu sorunu çözebilir.
API kataloğu, belgelerinizi standartlaştırmanıza yardımcı olabilir ve API'ler üzerinde iç işbirliği için bir yer sunar. Ayrıca kuruluşunuz genelinde tüketim, yayımlama ve idare denetimlerini de yönlendirebilir.
Veri paylaşımı ve sözleşmeler
Kaynak grubu: governance-rg2
Bulut ölçeğinde analiz, veri paylaşımına erişimi denetlemek için Microsoft Entra yetkilendirme yönetimini veya Microsoft Purview ilkelerini kullanır. Yine de paylaşım ve sözleşme deposuna ihtiyacınız olabilir. Bu depo bir kuruluş işlevidir ve veri yönetimi giriş bölgenizde bulunmalıdır.
Sözleşmeleriniz veri doğrulama, modeller ve güvenlik ilkeleri hakkında bilgi sağlamalıdır.
Daha fazla bilgi için bkz. Veri sözleşmeleri
Azure Container Registry
Kaynak grubu: containers-rg
Veri yönetimi giriş bölgeniz bir Azure Container Registry barındırır. Azure Container Registry, veri platformu işlemlerinizin veri uygulama ekiplerinizin kullandığı veri bilimi projelerinde kullanılmak üzere standart kapsayıcılar dağıtmasına olanak tanır.
Azure Synapse Özel Bağlantı hub'ları
Kaynak grubu: synapse-link-rg
Azure Synapse Analytics Özel Bağlantı hub'ları, güvenli ağınızı ve Azure Synapse Studio web deneyimini bağlayan Azure kaynaklarıdır. Bulut ölçeğinde analiz, bu hub'ların özel bağlantılarını kullanarak Azure Sanal Ağ Azure Synapse Studio'ya güvenli bir şekilde bağlar.
Özel bağlantıları kullanarak Azure Synapse studio'ya bağlanmanın iki adımı vardır.
- bir Özel Bağlantı hub kaynağı oluşturun.
- Azure Sanal Ağ'nizden bu Özel Bağlantı hub'ına özel bir uç nokta oluşturun.
Ardından Azure Synapse Studio ile güvenli bir şekilde iletişim kurmak için özel uç noktaları kullanabilirsiniz. Bu özel uç noktaları şirket içi çözümünüzle veya Azure Özel DNS ile DNS çözümünüzle tümleştirin.
Daha fazla bilgi için bkz. Özel bağlantıları kullanarak Azure Synapse studio'ya Bağlan.
Otomasyon arabirimleri (isteğe bağlı)
Kuruluşunuz, bulut ölçeğinde analiz özelliklerini artırmak için birçok otomasyon hizmeti oluşturmaya karar verebilir. Bu otomasyon hizmetleri analiz durumunuz için uyumluluk ve ekleme çözümleri sağlar.
Bu otomasyon hizmetlerini oluşturmaya karar verirseniz, hem veri marketi hem de işlem konsolu işlevi gören bir kullanıcı arabirimine sahip olmanız gerekir. Bu arabirim, meta veri standartlarında daha önce ele aldığımız gibi temel alınan bir meta veri deposuna dayanmalıdır.
Veri marketiniz veya işlem konsolunuz ekleme, meta veri kaydı, güvenlik sağlama, veri yaşam döngüsü ve gözlemlenebilirliği kolaylaştırmak için mikro hizmetlerin orta katmanını çağırır.
Meta veri deponuzu barındırmak için automationdb-rg kaynak grubunu sağlayabilirsiniz.
Önemli
Bu otomasyon hizmetlerinin hiçbiri ürün değildir ve hiçbir yol haritası öğesi sunmaz. Bunlar, otomatikleştirmek isteyebileceğiniz öğeleri düşünmenize yardımcı olmak için listelenir.
Hizmetler
| Service | Hizmet Kapsamı |
|---|---|
| Veri giriş bölgesi sağlama | Bu hizmet yeni bir veri giriş bölgesi oluşturur. Yüksek kullanıma sahip olma olasılığı düşüktür, ancak uçtan uca ekleme çözümü eksiksizliği için dahil edilir. Daha fazla bilgi için bkz . Bulut ölçeğinde analiz sağlama |
| Veri ürünü ekleme | Bu hizmet, eklenen bir kiracıyla ilgili kaynak gruplarını oluşturur ve bunları düzelter. Ayrıca SKU'ları yükseltme ve düşürme ve eklenen kiracı veya hizmet için kaynak gruplarını etkinleştirme ve devre dışı bırakma özellikleri de içerir. Yeni bir veri giriş bölgesi DevOps oluşturur. Daha fazla bilgi için bkz . Bulut ölçeğinde analiz sağlama |
| Erişim sağlama | Bu hizmet SPN/UPN kullanarak erişim paketleri, erişim ilkeleri ve varlık erişim onay işlemi (el ile veya otomatik) oluşturur. Ayrıca, kullanıcıların son 90 gün içinde gönderdiği abonelik isteklerinin (varlıkların) listesini sağlamak için bir API'yi kullanıma sunabilir. Daha fazla bilgi için bkz. Veri erişim yönetimi |
| Veri agnostik alımı | Bu mikro hizmet, veri giriş bölgelerinize veri alımı için yeni veri kaynakları oluşturur. Bunu, her veri giriş bölgesindeki bir Azure Data Factory SQL Veritabanı meta veri deposuyla iletişim kurarak yapar. Daha fazla bilgi için bkz. Otomatik alma çerçeveleri Azure'da bulut ölçeğinde analizi nasıl destekler? |
| Meta veri | Bu hizmet kullanıma sunuldu ve platform için meta veriler oluşturur. Daha fazla bilgi için bkz. Meta veri standartları |
| Veri yaşam döngüsü | Bu hizmet, meta verilere dayalı olarak veri yaşam döngünüzü korumakla sorumludur. Bu bakım verileri soğuk depolama alanına taşımayı ve artık saklanması gerekmeyen kayıtları silmeyi içerebilir. Daha fazla bilgi için bkz. Veri yaşam döngüsü yönetimi |
| Veri etki alanı ekleme | YALNıZCA VERI AĞı IÇIN GEÇERLIDIR. Bu hizmet, yeni etki alanlarıyla ilgili meta verileri yakalar ve gerektiğinde yeni etki alanlarını ekler. Ayrıca mikro hizmette oluşturabileceğiniz herhangi bir etki alanı veya hizmet satırını oluşturabilir, güncelleştirebilir, etkinleştirebilir ve devre dışı bırakabilirsiniz. Daha fazla bilgi için bkz . Bulut ölçeğinde analiz sağlama |
Veri standardizasyonu
Veri yönetimi giriş bölgenizin belirli bir özelliği veya ürünü olmasa da, tüm hizmetler genelinde veri standartlaştırmayı dikkate almalısınız. Veri standartlaştırması, verilerinizin hangi biçime inmesi ve depolanması gerektiğini tanımlar.
Bahşiş
Delta-lake biçimini mümkün olduğunca tüm hizmetler ve depolamada defacto standardı olarak kullanın.
Daha fazla bilgi için bkz . Veri standartlaştırma.