Veri içe aktarma
Sürdürülebilirlik muhasebesi ve raporlaması dünyasında veri dönüşümü ve veri içeri aktarma işlemleri doğru, güvenilir ve kapsamlı sürdürülebilirlik içgörüleri sağlanmasında çok önemli rol oynar. Bununla birlikte kuruluşlar, raporlama amaçlarıyla sürdürülebilirlik verilerinin etkin bir şekilde yönetilmesi ve kullanılması konusunda teknik ve işle ilgili güçlüklerle karşılaşır.
Başlıca güçlüklerden bazıları şunlardır:
Veri ayrıntı düzeyleri ve karmaşıklık: Çeşitli kaynaklardan ve kategorilerden farklı sürdürülebilirlik verilerinin yönetilmesi karbon, su ve atık verimliliğini kapsayan, çevresel verimlilik ilerlemesinin kapsamlı ve ayrıntılı bir resminin oluşturulması için gereklidir.
Veri kalitesi ve tutarlılığı: Bir kuruluşun sürdürülebilirlik yolculuğu boyunca doğru, güvenilir ve tutarlı veriler, doğru raporlama ve uyumluluk için önemlidir.
Ölçeklenebilirlik ve performans: En iyi performansı korurken büyük veri kümelerini verimli şekilde işlemek kısa ve uzun vadede kuruluşlar için büyük önem taşır.
Veri kullanılabilirliği: Veriler farklı biçimlerde gelebilir veya el ile yakalanmaları gerekebilir.
Ayrıca işletmeler, kapsamlı sürdürülebilirlik bilgilerini açıklamaları için paydaşlar, yatırımcılar, müşteriler ve düzenleyici kurumlardan gelen baskının artmasıyla karşı karşıya kalmaktadır. Bu beklentilerin karşılanması, etkili veri dönüşümü ve veri alım süreçlerini gerektirir.
Bu bölüm, Microsoft Sustainability Manager'ın var olan yetenekleri üzerinde oluşturulan alma sürecindeki en yeni geliştirmelere ve yeteneklere odaklanmaktadır. Yeni özellikler, veri dönüşümlerini ve veri alma işlemini yönetmeye yönelik sorunsuz ve gelişmiş bir platform sağlar. Basitleştirilmiş bir kullanıcı arabirimi, verilerin alınması için birden çok yöntem, şablonlar ve eşleme yetenekleri sağlar.
Veri alma kullanıcı deneyimi
Basitleştirilmiş ve destekli bir kullanıcı arabirimi, kuruluşların çevresel verilerinin veri dönüşümünü ve alımını başarıyla yapabilmesi için çok gerekli bir özelliktir.
Sustainability Manager veri alımı deneyimi, kullanıcı hatalarını sınırlamak için alma deneyimi sırasında veri modelini ön planda tutar. Kullanıcılar, gereksinimlerine ve tasarım beklentilerine göre birçok alım yönetimden ve esneklikten faydalanabilirler. Ayrıca, aynı alım kullanılarak bir defalık içeri aktarmayla birden çok varlık ve kategorideki veriler alınabilir. Bu alım mekanizmaları karbon, su ve atık üzerinde standartlaştırılmıştır.
Veri alma işleminin en önemli özelliklerinden biri veri dönüşümünün, veri eşlemenin ve veri içeri aktarma işleminin ayrılmasıdır. Bu ayırma, verilerin ayıklanması, dönüştürülmesi ve yüklenmesinde insan hatası risklerinin azaltılmasına yardımcı olur.
Veri bağlantı işlemi sırasında kuruluş kullanıcıları, aşağıdakileri yapmak için veri dönüşümü araçlarının yan çubuklarından yararlanabilirler:
İçeri aktarılacak veri kümelerini yapılandırmak.
Veri kümelerini doğrulamak için denetim listelerini kullanmak. Denetim listeleri, başarılı veri içeri aktarma yapılmasını sağlar ve zorunlu veri sütunları, veri türü uyumsuzlukları, seçenek kümesi değerlerinin doldurulması ve başvuru verileri aramayla ilgili sorunları ele alır.
Yerleşik alma yöntemleri ve tasarım değerlendirmeleri
Sustainability Manager, aşağıdakilere bağlı olarak dört alım yöntemi sağlar:
- Veri türü
- Source
- Veri dönüştürme gereksinimleri
- Kullanıcı deneyimi düzeyi
- İçeri aktarma sıklığı
Bu farklı yöntemleri aşağıdaki dikkate alınması gereken noktalar ile kullanılabilirsiniz.
| Yöntem ve açıklama | Tasarımla ilgili dikkat edilecek noktalar | Şu durumlarda kullanılır: |
|---|---|---|
| Excel şablonları, Microsoft Sustainability Manager içinde yerleşiktir ve kullanıcılar verilerini indirebilir, verilerini hazırlayabilir ve belirli varlıklara aktarabilir. | Excel şablonları düzenli aralıkla yenilenir. Her içeri aktarma sırasında en son Excel şablonlarını indirmenizi öneririz. Excel şablonları veri modeli adlandırma kurallarını izlediklerinden, modele veri eşleme gerektirmezler. Excel şablonları, veri içeri aktarma işleminin en basit formunu temsil eder. Bunlar, bir Excel dosyasının destekleyebileceği daha küçük veri kümesi ve ilk sistem hazırlıkları için uygundur. Excel şablonları, veri içeri aktarmayı etkinleştirmek için önceden tanımlanmış varlık kümesi içerir. | Excel şablonları, veri hazırlığı/dönüşümü Sustainability Manager dışında yapıldığında ve veriler doğrudan içeri aktarma için hazır olduğunda en iyi şekilde kullanılır. Örnek: Bir Kahve üreticisi olan Contoso coffee, Reference veri şablonu kullanarak tesislerini ayarlamak için Excel şablonlarını kullanabilir, ardından Faaliyet ve Emisyon veri şablonlarını kullanarak Karbon faaliyetini ve önceden hesaplanan emisyon verilerini ayarlamaya devam edebilir. Ardından, her üç veri türünden tek bir öğelik bir içeri aktarma işlemi gerçekleştirebilirler. |
| Power Query destekli deneyimi, veri eşleme merkezli bir deneyim olup, alışveriş sepeti deneyimine sahip son kullanıcılara, alma hatalarını en aza indirme konusunda rehberlik eder. | Power Query, çeşitli veri kaynaklarını işlemeyi etkili bir hale getirerek veri dönüşümü ve alımına kapsamlı bir yaklaşım sunar. Power Query, veri içeri aktarma işlemini kolaylaştıran Microsoft Sustainability Manager'daki yerleşik bağlayıcıları bulunan veri kaynakları için bir yararlıdır. Power Query rehberli deneyimi, kullanıcıların gerektiğinde varlık eklemesine veya kaldırmasına olanak tanıyarak, alma işlemi boyunca esneklik ve ayrıntılı rehberlik sağlar. | Aşağıdaki durumlarda Power Query kullanın: - Çeşitli kaynaklardan birden çok varlık için aktarma. - Microsoft Sustainability Manager'da yerleşik Power Query bağlayıcıları olması gerektiğinde. - sık veri içeri aktarma ve yenileme gerektiğinde - alım işlemi sırasında veri dönüştürme gerekli olduğunda. - varlık manipülasyonu ve veri eşleme için esneklik sağlayan rehberli deneyim tercih edildiğinde. - veri modeline eşleme öncesinde veri dönüşümüyle farklı kaynak türlerinin ele alınması gerektğinde. Örnek: Kahve üreticisi olan Contoso Coffee, tedarik zinciri ERP'sinden emisyon verilerini ve Azure Synapse'ta tedarikçi tarafından sağlanan verileri içeri aktarmak istemektedir. Contoso, düzenleyicide sağlanan ayrıntılı kılavuzu kullanarak dönüştürmek ve eşlemek için Power Query destekli deneyimini kullanabilir. |
| İş Ortağı Bağlayıcıları - iş ortağı çözümlerinden veri içeri aktarmak için bağlayıcı kataloğudur. | Sustainability Manager, iş ortağı çözümlerinden veri içeri aktarmaya yönelik bağlayıcılar içerir. Platform, operasyonel veri sağlayıcılarında önceden oluşturulmuş ve özel bağlayıcılardan oluşan sağlam bir katalog sunar. İş ortağı bağlayıcıları kullanılarak veri içeri aktarma işleminin en önemli yönlerinden biri veri eşlemenin ve dönüşümün bağlayıcı içinde kapsanıyor olmasıdır. İçeri aktarma işlemi sırasında gerçekleştirilmeleri gerekmez. | İş ortağı çözümünden veri içeri aktarmanız gerektiğinde ve buna karşılık gelen bağlayıcı katalogda var olduğunda kullanın. Örnek: Contoso Coffee, tesislerinde satın alınan elektrik ve doğal gaz verilerini yakalamak için Arcadia'nın Utility Cloud çözümünü kullanıyor. Satın alınan elektrik verilerini Sustainability Manager'a aktarmak için Arcadia bağlayıcısını kullanıyorlar. Bu bağlayıcı, tüm küresel tesisleri için kapsam 2 emisyonu hesaplamalarına olanak tanıyor. |
| Verileri Sustainability Manager'a el ile aktarma | Microsoft Sustainability Manager, verileri el ile içer aktarmak için iki yöntem sağlar. İlk yöntem, bireysel kayıtların girilmesine olanak tanır ve Referans veriler gibi Yapılandırma verilerinin içeri aktarılmasında kullanışlıdır. İkinci yöntem, faaliyet kayıtlarının ve referans veri kayıtlarının toplu olarak içeri aktarılmasına olanak tanır. Kapsam 3, kategori 8 ve kategori 13 için, toplu karşıya yükleme seçeneklerine erişmek üzere veri alt kategorisini seçmeniz gerekir. Faaliyet verisi kayıtlarını güncelleştirirken, daha önce içeri aktarılan verileri silip tüm verileri yeniden içeri aktarmanız gerekir. | Ayrı faaliyet, su veya atık verilerini içeri aktarmanız gerektiğinde, Sustainability Manager'daki el ile veri içeri aktarma seçeneklerini kullanın.Ayrıca, referans verilerini içeri aktarma istediğinizde veya toplu olarak içeri aktarılacak çok miktarda faaliyet verisi olduğunda bu seçeneklerden yararlanın. Toplu içeri aktarma için Excel, CSV veya XML gibi belirli veri biçimleriniz varsa, el ile toplu yükleme seçeneği ideal bir seçimdir. Örneğin, kuruluş verilerini ayarlayan bir sürdürülebilirlik uzmanı, kuruluşun özniteliklerini el ile tanımlamak için Ayarlar > Şirket profili > Genel'e gider. |
Aşağıdaki tabloda, kuruluşların veri içeri aktarma işlemlerini tasarlarken dikkate alacakları tasarım önemli noktaları özetlenmektedir. Her alım yönteminin artılarını ve eksilerini ve tasarım dezavantajlarını dikkatle değerlendirmenizi öneririz.
| Alım yöntemi | Excel şablonları | Power Query destekli deneyimi | İş ortağı bağlayıcıları | El ile giriş |
|---|---|---|---|---|
| Tipik kullanıcı kişileri | İş Kişilikleri | İş/Teknik Kişileri | Teknik Kişiler | İş Kişileri |
| Zamanlanabilir mi? | ✗ | ✓ | ✓ | ✗ |
| Veri yükü hacmi | Toplu | Toplu | Toplu | Tek, toplu |
| Veri dönüşümüne izin veriyor mu? | ✗ | ✓ | ✗ | ✗ |
| Artımlı yenileme sağlar mı? | ✗ | ✓ | ✓ | ✗ |
| Veri içeri aktarma sırasında veri geçersiz kılma? | ✗ | ✓ | ✗ | ✗ |
| Birden çok varlık içeri aktarabilir mi? | ✓ | ✓ | ✗* | ✗ |
| Alma hatası işleme sağlıyor mu? | ✓ | ✓ | ✓ | Uygulanmaz |
Not
İş ortağı bağlayıcılarını kullanarak tek bir alımda birden fazla varlık içeri aktarma ürün yol haritasında yer alır.
Daha fazla bilgi için, Microsoft Sustainability Manager'da veri içeri aktarmaya genel bakış bölümünü inceleyin.
Özet olarak, Microsoft Sustainability Manager'a veri aktarırken aşağıdaki dikkat edilmesi gereken noktalar önemlidir:
Alma deneyimi için daha basit Excel şablonu yöntemiyle başlayın. Veri karmaşıklık düzeyine ve veri modelinin anlaşılmasına dayalı olarak, Power Query destekli deneyimini kullanarak sürekli veri içeri aktarmaları oluşturmaya geçin.
Power Query destekli alım deneyimi sırasında aşağıdaki ipuçlarını göz önünde bulundurun:
- Veri dönüşümlerini gerçekleştirmek için Power Query yeteneklerini kullanın.
- Veri tablolarını ve bunların ilgili veri türlerini gözden geçirmek için veri dönüşüm araçlarını ve denetim listesini kullanın.
- Kaynak verileri eşlerken otomatik eşleme özelliğini kullanın.
Bağlantı oluşturulup doğrulandıktan sonra gerekli verilerin sürekli olarak içeri aktarılmasına izin vermek için yenileme zaman aralıklarını ve kurallarını zamanlayın.
Tam ve artımlı veri yenileme
Veri kaynaklarından verileri düzenli olarak içeri aktarma, kuruluşların raporlama amaçlarıyla en son sürdürülebilirlik verilerini hesaplamaları için bir gerekliliktir. Kuruluşlar kaynak sistemlerinden iki modda veri alabilirler.
Tam veri yenileme: Kaynak sistem verilerinin tam kopyasını Microsoft Sustainability Manager uygulamasına aktarın.
Artımlı veri yenilemesi: Son yenilemeden itibaren yalnızca kaynak sistemlerden güncelleştirilmiş veya yeni oluşturulmuş kayıtları getirin ve içeri aktarın.
Artımlı veri yenilemesi, kuruluşların her bir veri yenilemesi için kullanılabilir olduğunda yeni verileri getirmesine olanak tanır. Ayrıca, her sorgu sırasında verilerin tamamen yenilenmesi gerekiyorsa, kuruluşlar tam yenilemeyi de seçebilir. Bu özellik yalnızca Power Query tabanlı içeri aktarma için kullanılabilir.
Bu yerleşik özellikten yararlanmak için, veri kaynakları için bağlantı oluşturulurken ilkeleri yenileyin. Microsoft Sustainability Manager, Power Query tabanlı içeri aktarma yöntemi için bu özelliği sağlar. Bağlantı oluşturma işlemi sırasında, kullanıcılar veri alma işlerini çalıştırmak için zamanlamayı ve sıklığı tanımlayabilir ve gerekirse daha önce içeri aktarılan verileri kaldırma seçeneğini belirleyebilir. Bu eylem, artımlı yenileme zamanlama olanağı sağlar.
Aşağıdaki durumlarda tam veri yenileme önerilir:
Kaynak sistem veri modelinde değişiklik yapıldığında, değişikliklerin veri dönüşümleri veya eşlemesi için uygulamaya yansıtılmaları gerekir.
Kaynak veriler önemli ölçüde değiştiğinde ve değişiklikleri yakalamak için artırımlı yenileme yeterli olmadığında.
Kaynak sistemin iş mantığı değiştirildiğinde ve varolan verinin yeniden hesaplanması gerektiğinde.
Hata, bozulma veya kötü amaçlı saldırılar nedeniyle veri kalitesi veya veri bütünlüğü bozulduğunda.
Aşağıdaki durumlarda artımlı veri yenileme önerilir:
Kuruluşlar birden çok veri kaynağından toplu olarak veri almayı gerektirdiğinde
Kuruluşlar için belirli zaman çizelgelerine göre zamanında veri yenileme gerektiğinde
Kaynak sistemler geçmiş, toplu veriler sağladığında ve kuruluşların ilk veri yükünden sonra yeni kullanılabilir verileri (ekleme veya upsert) içeri aktarmaları gerektiğinde
Örneğin, Sustainability Manager, tedarikçiler tarafından güncelleştirilen bir SharePoint belge kitaplığında Excel dosyalarından veri aldıysa, en yeni verileri düzenli aralıklarla kullanmak için yenileme ilkesi gerekir.
Veri bağlantı düzeyinde zamanlama, veri içeri aktarma zamanlamasını tasarlamak için bir yol sağlar. Yalnızca çeşitli kaynak sistemlerden delta verilerini getirme sorununu çözmez. Artan yenileme işlemiyle, veri yöneticileri yalnızca artımlı verileri getirmek için ayrıntılı kurallar yapılandırabilir. Bu işlem, bir veri bağlantısındaki her sorgu düzeyinde ekstra filtreler, kurallar ve zaman damgası sağlayabilir.
Artımlı yenileme hakkında daha fazla bilgi için Microsoft Sustainability Manager'da artımlı veri yenileme bölümüne bakın
Veri kaynaklarına ağ bağlantısı
Veri içeri aktarma stratejilerinin tasarlanması sırasında, kuruluşlar genellikle uzak veri kaynaklarına güvenli ve verimli bir şekilde bağlanma zorluklarıyla karşılaşır. Bu uzak veri kaynakları bulutta veya şirket içinde olabilir. Kuruluşların veri varlıklarını korumak için kullandıkları farklı güvenlik standartları ve önlemleri bu güçlükle daha birleşiktir. Bu nedenle ağ bileşenleri, veri güvenliği ve güvenilirliğini sağlamak için çeşitli seçeneklerin dikkatli bir şekilde ele alınmasını zorunlu kılmaktadır.
Bu bölüm, uzak veri kaynaklarına bağlanmanın iki yöntemini ele alır. Bu veri kaynakları sanal bir ağ içinde Azure Bulut'ta veya şirket içi bir konumda bulunabilir. Kuruluşlar, Sustainability Manager'dan Azure Veri Hizmetleri'ne sanal bir ağ içinde bağlanmak için sanal ağ veri ağ geçidini kullanabilirler. Şirket içi veri kaynaklarına bağlanmak için şirket için veri ağ geçidini kullanabilirsiniz.
Aşağıdaki tabloda, şirket içi altyapısında bulunan uzak bir kaynaktan veri içeri aktarılırken dikkat edilmesi gereken önemli ağ konularından bazıları ve tasarımdaki önemli noktalar yer almaktadır:
| Başlık | Tasarımla ilgili dikkat edilecek noktalar |
|---|---|
| Sanal ağ veri ağ geçidi | Azure'da bulunan ve bir sanal ağ tarafından güvenliği sağlanan veri kaynaklarına bağlanmak için bir sanal ağ veri ağ geçidi kullanın. Bu yaklaşım, veri kaynağı genel olarak erişilebilir olmadığında yararlı olabilir. Sanal ağ veri ağ geçidini nasıl yapılandıracağınızı öğrenmek için Sanal ağ veri ağ geçidini ve veri kaynaklarını kullanma bölümüne gidin |
| Şirket içi veri ağ geçidi | Şirket içi ağ geçitlerini şirket içi sürdürülebilirlik veri kaynakları ve Sustainability Manager arasında güvenli bir köprü olarak kullanın. Yerinde veri ağ geçidini indirmeniz, yüklemeniz ve yapılandırmanız gerekir. Daha fazla bilgi edinmek Şirket içi veri ağ geçidi nedir? |
| Veri kaynağı kimlik doğrulaması | Sürdürülebilirlik verilerine erişmek için güçlü kimlik doğrulama mekanizmasını önceliklendirin. Zayıf kimlik bilgileri kullanmaktan kaçının ve gelişmiş güvenlik için Windows veya OAuth tabanlı kimlik doğrulama kullanmayı düşünün. |
| IP'leri giden şirket için veri kaynağından izin verilenler listesine ekleme | Şirket için kaynaklar ve Sustainability Manager arasında giden iletişimi etkinleştirmek için IP adreslerini izin verilenler listesine aldığınızdan emin olun. İzin verilenler listesine alınacak IP adresleri aralığını gözden geçirmek için bkz. Yönetilen bağlayıcılar giden IP adresleri |
| Performans | Ağ üzerinden aktarılan verileri en aza indirmek için sorguları en iyi duruma getirin. En iyi duruma getirilmiş sorgular gecikmeyi azaltır, performansı artırır ve ağ kaynaklarını korur. |
| İzleme ve denetleme | Ağ geçitleri için izleme ve günlüğe kaydetme işlemi gerçekleştirerek ve kuruluşun güvenlik paydaşlarıyla düzenli incelemeler gerçekleştirerek güvenlik ihlallerini önleyin. Veri ağ geçidinden günlükleri toplama hakkında daha fazla bilgi için bkz. Şirket içi veri ağ geçidinde sorun giderme |
Özet olarak, güvenli ve güvenilir ağ tasarımı seçimleri yapmak, uzak veri kaynakları için güçlü bir içeri aktarma mekanizmasının sağlanması açısından kritik önem taşır. Bunlar arasında, aşağıdakiler için gerekli adımların gerçekleştirilmesi yer alır:
- Uzak şirket içi veri kaynakları ve sanal ağ ile güvenliği sağlanan Azure'da barındırılan veri kaynakları için ağ geçidi yükleyin.
- Güçlü kimlik doğrulama mekanizmaları kullanma.
- Şirket için veri konumlarından iletişimi etkinleştirmek için izin verilenler listesine giden IP adreslerini ekleyin.
- Ağ üzerinden aktarılan verileri en aza indirin.
- Düzenli güvenlik denetimleri gerçekleştirin.
Hata işleme
Veri içeri aktarma sırasında hataların ele alınması, verilerinizin doğru şekilde içeri aktarıldığından ve panoların Sürdürülebilirlik raporları ve analizleri için en son bilgileri gösterdiğinden emin olmada önemli bir rol oynar. Sustainability Manager, kullanıcıların veri içeri aktarımlarındaki hataları incelemesine ve düzeltmesine olanak tanır. Bu hata raporları artık şablonlar, Power Query destekli akış ve iş ortağı deneyimi olmak üzere üç içeri aktarma türünün tümünde kullanılabilir.
Daha fazla bilgi için bkz. Microsoft Sustainability Manager'da veri içeri aktarma için hata işleme