Aracılığıyla paylaş


Kopyalama etkinliğinde Azure SQL Veritabanı'nın yapılandırılması

Bu makalede, azure SQL Veritabanı'ndan ve azure sql veritabanına veri kopyalamak için işlem hattındaki kopyalama etkinliğinin nasıl kullanılacağı özetlenmiştir.

Desteklenen yapılandırma

Kopyalama etkinliği altındaki her sekmenin yapılandırması için sırasıyla aşağıdaki bölümlere gidin.

Genel

Genel ayarları sekmesini yapılandırma yönergeleri Genel ayarlarına bakın.

Kaynak

Kopyalama etkinliğinin Kaynak sekmesinin altında Azure SQL Veritabanı için aşağıdaki özellikler desteklenir.

Aşağıdaki özellikler gereklidir:

  • bağlantı : Bağlantı listesinden bir Azure SQL Veritabanı bağlantısı seçin. Bağlantı yoksa Yeni seçerek yeni bir Azure SQL Veritabanı bağlantısı oluşturun.
  • Bağlantı türü: Azure SQL Veritabanı seçin.
  • Tablo : Açılan listeden veritabanınızdaki tabloyu seçin. Ya da tablo adınızı manuel olarak girmek için Düzenle seçeneğini kontrol edin.
  • Önizleme verileri: Tablonuzdaki verilerin önizlemesini görüntülemek için Önizleme verileri seçin.

Gelişmişaltında, aşağıdaki alanları belirtebilirsiniz:

  • Sorgukullan: Tablo, Sorguveya Saklı yordamseçebilirsiniz. Aşağıdaki listede her ayarın yapılandırması açıklanmaktadır:

    • Tablo: Bu düğmeyi seçerseniz Tablo'nde belirttiğiniz tablodan verileri okuyun.

    • Sorgu: Verileri okumak için özel SQL sorgusunu belirtin. Örneğin select * from MyTable. İsterseniz kod düzenleyicisinde düzenlemek için kalem simgesini de seçebilirsiniz.

      Sorgu seçmeyi gösteren ekran görüntüsü.

    • Saklı yordam: Kaynak tablodan verileri okuyan saklı yordamı kullanın. Son SQL ifadesi, saklı prosedürde bir SELECT ifadesi olmalıdır.

      • Saklı yordam adı: Saklı yordamı seçin veya Düzenle kutusunu işaretleyerek kaynak tablodan verileri okuyacak şekilde el ile saklı yordam adını belirtin.

      • Saklı yordam parametreleri: Saklı yordam parametreleri için değerleri belirtin. İzin verilen değerler ad veya değer çiftleridir. Parametrelerin adları ve büyük/küçük harf değerleri, saklı yordam parametrelerinin adları ve büyük/küçük harf değerleriyle uyumlu olmalıdır.

        saklı yordam ayarlarını gösteren ekran görüntüsü .

  • Sorgu zaman aşımı (dakika): Sorgu komutu yürütme zaman aşımını belirtin; varsayılan değer 120 dakikadır. Bu özellik için bir parametre ayarlandıysa, izin verilen değerler "02:00:00" (120 dakika) gibi zaman aralığıdır.

    Sorgu zaman aşımı ayarlarını gösteren ekran görüntüsü.

  • Yalıtım düzeyi: SQL kaynağı için işlem kilitleme davranışını belirtir. İzin verilen değerler şunlardır: None, ReadCommitted, ReadUncommitted, RepeatableRead, Serializableveya Snapshot. Belirtilmediği takdirde, Hiçbiri izolasyon seviyesi kullanılır. Daha fazla bilgi için IsolationLevel Enum bakın.

    Yalıtım düzeyi ayarlarını gösteren ekran görüntüsü.

  • Bölüm seçeneği: Azure SQL Veritabanı'ndan veri yüklemek için kullanılan veri bölümleme seçeneklerini belirtin. İzin verilen değerler şunlardır: Yok (varsayılan), Tablofiziksel bölümleri ve Dinamik aralık. Bir bölüm seçeneği etkinleştirildiğinde (yani, Hiçbirideğil), Azure SQL Veritabanından verileri eşzamanlı olarak yüklemek için paralellik derecesi, kopyalama aktivitesindeki paralel kopya ayarı tarafından kontrol edilmektedir.

    bölüm seçeneği ayarlarını gösteren ekran görüntüsü .

    • Hiçbiri: Bölümleme kullanmamak için bu ayarı seçin.

    • Tablo'in fiziksel bölümleri: Fiziksel bir bölümlendirme kullandığınızda, bölüm sütunu ve mekanizması fiziksel tablo tanımınıza dayanarak otomatik olarak belirlenir.

    • Dinamik aralık: Paralel etkin bir sorgu kullandığınızda, aralık bölüm parametresi (?DfDynamicRangePartitionCondition) gerekir. Örnek sorgu: SELECT * FROM <TableName> WHERE ?DfDynamicRangePartitionCondition.

      • Bölüm sütun adı: Paralel kopyalama için aralık bölümleme tarafından kullanılan kaynak sütunun adını tamsayı veya tarih/tarih saat türünde (int, smallint, bigint, date, smalldatetime, datetime, datetime2veya datetimeoffset) belirtin. Belirtilmezse, tablonun dizini veya birincil anahtarı otomatik olarak algılanır ve bölüm sütunu olarak kullanılır.
      • Bölüm üst sınır: Bölüm aralığını bölmek için bölüm sütununun en yüksek değerini belirtin. Bu değer, tablodaki satırları filtrelemek için değil bölüm adımlarını belirlemek için kullanılır. Tablo veya sorgu sonucundaki tüm satırlar bölümlenir ve kopyalanır.
      • Bölüm alt sınırı: Bölüm aralığını bölmek için bölüm sütununun en düşük değerini belirtin. Bu değer, tablodaki satırları filtrelemek için değil bölüm adımlarını belirlemek için kullanılır. Tablo veya sorgu sonucundaki tüm satırlar bölümlenir ve kopyalanır.
  • Ek sütunlar: Kaynak dosyaların göreli yolunu veya statik değerini depolamak için daha fazla veri sütunu ekleyin. İfade, ikincisi için desteklenir. Daha fazla bilgi için Kopyalama sırasında ek sütun eklemebölümüne gidin.

Hedef

Kopyalama etkinliğinin Hedef sekmesinin altında Azure SQL Veritabanı için aşağıdaki özellikler desteklenir.

Hedef sekmesini gösteren ekran görüntüsü .

Aşağıdaki özellikler gereklidir:

  • bağlantı : Bağlantı listesinden bir Azure SQL Veritabanı bağlantısı seçin. Bağlantı yoksa Yeni seçerek yeni bir Azure SQL Veritabanı bağlantısı oluşturun.
  • Bağlantı türü: Azure SQL Veritabanı seçin.
  • Tablo : Açılan listeden veritabanınızdaki tabloyu seçin. Ya da tablo adınızı manuel olarak girmek için Düzenle seçeneğini kontrol edin.
  • Önizleme verileri: Tablonuzdaki verilerin önizlemesini görüntülemek için Önizleme verileri seçin.

Gelişmişaltında, aşağıdaki alanları belirtebilirsiniz:

  • Yazma davranışı: Kaynak dosya tabanlı bir veri deposundaki dosyalar olduğunda yazma davranışını tanımlar. EkleUpsert veya saklı yordam seçebilirsiniz.

    Yazma davranışı sekmesinin ekran görüntüsü.

    • Ekle: Kaynak verilerinizde eklemeler varsa bu seçeneği belirleyin.

    • Upsert : Kaynak verilerinizde hem eklemeler hem de güncelleştirmeler varsa bu seçeneği belirtin.

      • TempDBkullan: Upsert için geçici tablo olarak genel geçici tablo mu yoksa fiziksel tablo mu kullanılacağını belirtin. Varsayılan olarak, hizmet geçici tablo olarak genel geçici tabloyu kullanır ve bu onay kutusu seçilidir.

        'Use TempDB' seçeneğini gösteren ekran görüntüsü.

      • Kullanıcı veritabanı şemasını seçin: TempDB kullan onay kutusu seçili olmadığında, fiziksel tablo kullanılıyorsa geçici tablo oluşturmak için ara şemayı belirtin.

        Not: Dikkat Edilecek Noktalar

        Tablo oluşturma ve silme izniniz olmalıdır. Varsayılan olarak, bir geçici tablo hedef tabloyla aynı şemayı paylaşır.

        TempDB Kullan seçeneğinin gösterilmediğini gösteren ekran görüntüsü.

      • Anahtar sütunları: Benzersiz satır belirleme için sütun adlarını belirtin. Tek bir anahtar veya bir dizi anahtar kullanılabilir. Belirtilmezse, birincil anahtar kullanılır.

    • Saklı yordam: Kaynak verilerin hedef tabloya nasıl uygulanacağını tanımlayan saklı yordamı kullanın. Bu saklı yordam, toplu başınaçağrılır.

      • Saklı yordam adı: Saklı yordamı seçin veya Düzenle kutusunu işaretleyerek kaynak tablodan verileri okuyacak şekilde el ile saklı yordam adını belirtin.

      • Saklı yordam parametreleri: Saklı yordam parametreleri için değerleri belirtin. İzin verilen değerler ad veya değer çiftleridir. Parametrelerin adları ve büyük/küçük harf değerleri, saklı yordam parametrelerinin adları ve büyük/küçük harf değerleriyle uyumlu olmalıdır.

        saklı yordam ayarlarını gösteren ekran görüntüsü .

  • Tablo kilidini toplu olarak ekle: Evet seçin veya Yok. Birden çok istemciden dizin içermeyen bir tabloda toplu ekleme işlemi sırasında kopyalama performansını geliştirmek için bu ayarı kullanın. Daha fazla bilgi için BULK INSERT (Transact-SQL) gidin

  • tablo seçeneği : Kaynak şemaya göre tablo yoksa hedef tablo otomatik olarak oluşturulup oluşturulmayacağını belirtir. Yok veya Tabloyu otomatik oluşturseçin. Hedef bir saklı yordam belirttiğinde otomatik tablo oluşturma desteklenmez.

  • Ön kopyalama betiği: Her çalıştırmada hedef tabloya veri yazmadan önce Yürütülecek Kopyalama Etkinliği için bir betik belirtin. Önceden yüklenmiş verileri temizlemek için bu özelliği kullanabilirsiniz.

  • Toplu yazma zaman aşımı: Toplu ekleme işleminin zaman aşımına uğramadan önce bitmesini bekleme süresini belirtin. İzin verilen değer bir zaman aralığıdır. Varsayılan değer :"00:30:00" (30 dakika).

  • Toplu iş boyutu yazma: Toplu iş başına SQL tablosuna eklenecek satır sayısını belirtin. İzin verilen değer tamsayıdır (satır sayısı). Varsayılan olarak, hizmet satır boyutuna göre uygun toplu iş boyutunu dinamik olarak belirler.

  • En fazla eşzamanlı bağlantı: Etkinlik çalıştırması sırasında veri deposuna kurulan eş zamanlı bağlantıların üst sınırını belirtin. Yalnızca eşzamanlı bağlantıları sınırlamak istediğinizde bir değer belirtin.

  • Performans ölçümleri analizini devre dışı bırakma: Bu ayar, kopyalama performansı iyileştirme ve öneriler için DTU, DWU, RU gibi ölçümleri toplamak için kullanılır. Bu davranışla ilgileniyorsanız bu onay kutusunu seçin.

Haritalama

Eşleme sekmesi yapılandırması için, hedef olarak Azure SQL Veritabanı'nı otomatik tablo oluşturma özelliğiyle kullanmıyorsanız, Eşlemebölümüne gidin.

Eşlemeyapılandırması dışında hedef olarak otomatik oluşturma tablosuyla Azure SQL Veritabanı uygularsanız, hedef sütunlarınızın türünü düzenleyebilirsiniz. Şemaları içeri aktar seçtikten sonra, hedefinizde sütun türünü belirleyebilirsiniz.

Örneğin, kaynakta kimliği sütununun türü int türüdür ve bunu hedef sütuna eşlenirken float türüne değiştirebilirsiniz.

Eşlemenin hedef sütun türünün ekran görüntüsü.

Ayarlar

Ayarlar sekmesi yapılandırması için, Ayarlar sekmesialtında Diğer ayarlarınızı yapılandırma bölümüne gidin.

Azure SQL Veritabanı'ndan paralel kopyalama

Kopyalama etkinliğindeki Azure SQL Veritabanı bağlayıcısı, verileri paralel olarak kopyalamak için yerleşik veri bölümleme sağlar. Veri bölümleme seçeneklerini kopyalama etkinliğinin Kaynak sekmesinde bulabilirsiniz.

Bölümlenmiş kopyalamayı etkinleştirdiğinizde kopyalama etkinliği, verileri bölümlere göre yüklemek için Azure SQL Veritabanı kaynağınızda paralel sorgular çalıştırır. Paralel derece, kopyalama etkinliği ayarları sekmesindeki Kopya paralellik derecesi tarafından denetlenilir. Örneğin, Derece kopyalama paralelliği dört olarak ayarlarsanız, hizmet aynı anda belirtilen bölüm seçeneğinize ve ayarlarınıza göre dört sorgu oluşturur ve çalıştırır ve her sorgu Azure SQL Veritabanınızdan verilerin bir bölümünü alır.

Özellikle Azure SQL Veritabanınızdan büyük miktarda veri yüklediğinizde veri bölümleme ile paralel kopyalamayı etkinleştirmeniz önerilir. Farklı senaryolar için önerilen yapılandırmalar aşağıdadır. Verileri dosya tabanlı veri deposuna kopyalarken, bir klasöre birden çok dosya olarak yazmanız önerilir (yalnızca klasör adını belirtin), bu durumda performans tek bir dosyaya yazmaktan daha iyidir.

Senaryo Önerilen ayarlar
Fiziksel bölümleri olan büyük tablodan tam yük. Bölüm seçeneği: Tablonun fiziksel bölümleri.

Yürütme sırasında, hizmet fiziksel bölümleri otomatik olarak algılar ve bölümlere göre verileri kopyalar.

Tablonuzda fiziksel bölüm olup olmadığını denetlemek için bu sorguyabakabilirsiniz.
Veri bölümleme için bir tamsayı veya tarih saat sütunuyla birlikte fiziksel bölümler olmadan büyük tablodan tam yük. Bölüm seçenekleri: Dinamik aralık bölümü.
Bölüm sütunu (isteğe bağlı): Verileri bölümlemede kullanılan sütunu belirtin. Belirtilmezse, dizin veya birincil anahtar sütunu kullanılır.
Bölüm üst sınır ve bölüm alt sınır (isteğe bağlı): Bölüm adımını belirlemek isteyip istemediğinizi belirtin. Bu, tablodaki satırları filtrelemek için değildir, tablodaki tüm satırlar bölümlenir ve kopyalanır. Belirtilmezse, kopyalama etkinlikleri değerleri otomatik olarak algılar.

Örneğin, bölüm sütununuz "ID" 1 ile 100 arasında değerlere sahipse ve alt sınırı 20, üst sınırı 80 ve paralel kopya sayısını 4 olarak ayarladıysanız, hizmet verileri 4 bölüme göre alır - <=20, [21, 50], [51, 80] ve >=81 aralığındaki kimlikler.
Özel bir sorgu kullanarak, fiziksel bölümler olmadan ve veri bölümleme için bir tamsayı veya tarih/tarih saat sütunu kullanarak büyük miktarda veri yükleyin. Bölüm seçenekleri: Dinamik aralık bölümü.
Sorgu: SELECT * FROM <TableName> WHERE ?DfDynamicRangePartitionCondition AND <your_additional_where_clause>.
Bölüm sütunu: Verileri bölümlemede kullanılan sütunu belirtin.
Bölüm üst sınır ve bölüm alt sınır (isteğe bağlı): Bölüm adımını belirlemek isteyip istemediğinizi belirtin. Bu tablodaki satırları filtrelemek için değildir, sorgu sonucundaki tüm satırlar bölümlenir ve kopyalanır. Belirtilmezse kopyalama etkinliği değeri otomatik olarak algılar.

Örneğin, "ID" bölüm sütununuzun değerleri 1 ile 100 arasındaysa ve alt sınırı 20, üst sınırı ise 80 olarak belirlediyseniz ve paralel kopyalama olarak 4 ayarladıysanız, hizmet verileri sırasıyla şu 4 bölüme göre çeker: <=20, ID'ler [21, 50], [51, 80] ve >=81 aralığında.

Farklı senaryolar için daha fazla örnek sorgu aşağıda verilmiştir:
• Tablonun tamamını sorgula:
SELECT * FROM <TableName> WHERE ?DfDynamicRangePartitionCondition
• Sütun seçimi ve ek koşul filtreleri içeren bir tablodan sorgu:
SELECT <column_list> FROM <TableName> WHERE ?DfDynamicRangePartitionCondition AND <your_additional_where_clause>
• Alt sorgularla sorgu:
SELECT <column_list> FROM (<your_sub_query>) AS T WHERE ?DfDynamicRangePartitionCondition AND <your_additional_where_clause>
• Alt sorguda bölüm içeren sorgu:
SELECT <column_list> FROM (SELECT <your_sub_query_column_list> FROM <TableName> WHERE ?DfDynamicRangePartitionCondition) AS T

Bölüm seçeneğiyle veri yüklemek için en iyi yöntemler:

  • Veri dengesizliği önlemek için bölüm sütunu (birincil anahtar veya benzersiz anahtar gibi) olarak ayırt edici sütunu seçin.
  • Tabloda yerleşik bir bölüm varsa, daha iyi performans elde etmek için tablo 'ın fiziksel bölümleri bölüm seçeneğini kullanın.

Fiziksel bölümü denetlemek için örnek sorgu

SELECT DISTINCT s.name AS SchemaName, t.name AS TableName, pf.name AS PartitionFunctionName, c.name AS ColumnName, iif(pf.name is null, 'no', 'yes') AS HasPartition
FROM sys.tables AS t
LEFT JOIN sys.objects AS o ON t.object_id = o.object_id
LEFT JOIN sys.schemas AS s ON o.schema_id = s.schema_id
LEFT JOIN sys.indexes AS i ON t.object_id = i.object_id 
LEFT JOIN sys.index_columns AS ic ON ic.partition_ordinal > 0 AND ic.index_id = i.index_id AND ic.object_id = t.object_id 
LEFT JOIN sys.columns AS c ON c.object_id = ic.object_id AND c.column_id = ic.column_id 
LEFT JOIN sys.partition_schemes ps ON i.data_space_id = ps.data_space_id 
LEFT JOIN sys.partition_functions pf ON pf.function_id = ps.function_id 
WHERE s.name='[your schema]' AND t.name = '[your table name]'

Tabloda fiziksel bölüm varsa, "HasPartition" öğesini aşağıdaki gibi "evet" olarak görürsünüz.

Sql sorgu sonucu.

Tablo özeti

Aşağıdaki tablolar, Azure SQL Veritabanı'ndaki kopyalama etkinliği hakkında daha fazla bilgi içerir.

Kaynak

Ad Açıklama Değer Gerekli JSON script özelliği
Bağlantı Kaynak veri deposuyla bağlantınız. <Bağlantınız> Evet bağlantı
Bağlantı türü Bağlantı türünüz. Azure SQL Veritabanıseçin. Azure SQL Veritabanı Evet /
tablo Kaynak veri tablonuz. Hedef tablonuzun <adı> Evet şema
masa
Sorgu kullan Verileri okumak için özel SQL sorgusu. •Hiç kimse
•Sorgu
• Saklı prosedür
Hayır

• sqlReaderQuery
• sqlReaderSaklıYordamAdı, saklıYordamParametreleri
sorgu zaman aşımı Sorgu komutu yürütme zaman aşımı varsayılan olarak 120 dakikadır. zaman aralığı Hayır queryTimeout
Yalıtım düzeyi SQL kaynağı için işlem kilitleme davranışını belirtir. •Hiç kimse
• OkumaTaahhütlü
• Okunmamış
• Tekrarlanabilir Okuma
•Serileştirilebilir
• Anlık görüntü
Hayır izolasyonDüzeyi
Bölme seçeneği Azure SQL Veritabanı'ndan veri yüklemek için kullanılan veri bölümleme seçenekleri. •Hiç kimse
• Tablonun fiziksel bölümleri
• Dinamik aralık
Hayır bölümSeçeneği:
Tablonun Fiziksel Bölümleri
• DynamicRange
Ek sütunlar Kaynak dosyaların göreli yolunu veya statik değerini depolamak için daha fazla veri sütunu ekleyin. İfade, ikincisi için desteklenir. •Ad
•Değer
Hayır additionalColumns:
•ad
•değer

Hedef

Ad Açıklama Değer Gerekli JSON script özelliği
Bağlantı Hedef veri deposuna bağlantınız. <Bağlantınız > Evet bağlantı
Bağlantı türü Bağlantı türünüz. Azure SQL Veritabanıseçin. Azure SQL Veritabanı Evet /
tablo Hedef veri tablonuz. Hedef tablonuzun <adı> Evet şema
masa
Yazma davranışı Kaynak, dosya tabanlı bir veri deposundaki dosyalar olduğunda yazma davranışını tanımlar. • Ekle
• Güncelle-Ekle
• Saklı prosedür
Hayır writeBehavior:
• eklemek
• güncelle veya ekle
• sqlWriterStoredProcedureName, sqlWriterTableType, storedProcedureParameters
Toplu ekleme tablo kilidi Birden çok istemciden dizin içermeyen bir tabloda toplu ekleme işlemi sırasında kopyalama performansını geliştirmek için bu ayarı kullanın. Evet veya Hayır Hayır sqlWriterUseTableLock:
doğru veya yanlış
Tablo seçeneği Kaynak şemaya göre mevcut değilse hedef tablonun otomatik olarak oluşturulup oluşturulmayacağını belirtir. •Hiç kimse
• Otomatik tablo oluşturma
Hayır tabloSeçeneği
• otomatik Oluştur
Ön kopyalama betiği Her çalıştırmada hedef tabloya veri yazmadan önce yürütülmesi gereken bir Kopyalama Aktivitesi betiği. Önceden yüklenmiş verileri temizlemek için bu özelliği kullanabilirsiniz. <ön kopyalama betiği>
(dize)
Hayır preCopyScript
Yazma işlem zaman aşımı Toplu ekleme işleminin zaman aşımına uğramadan önce bitmesini bekleme süresi. İzin verilen değer zaman aralığıdır. Varsayılan değer :"00:30:00" (30 dakika). zaman aralığı Hayır writeBatchZamanAşımı
Yazma küme boyutu Toplu iş başına SQL tablosuna eklenecek satır sayısı. Varsayılan olarak, hizmet satır boyutuna göre uygun toplu iş boyutunu dinamik olarak belirler. <satır sayısı>
(tamsayı)
Hayır writeBatchSize
en fazla eşzamanlı bağlantı Etkinlik çalıştırması sırasında veri deposuna kurulan eş zamanlı bağlantıların üst sınırı. Yalnızca eşzamanlı bağlantıları sınırlamak istediğinizde bir değer belirtin. eş zamanlı bağlantıların üst sınırı <>
(tamsayı)
Hayır maksimum Eşzamanlı Bağlantılar
Performans ölçümleri analizini devre dışı bırakma Bu ayar, kopyalama performansı iyileştirme ve öneriler için DTU, DWU, RU gibi ölçümleri toplamak için kullanılır. Bu davranışla ilgileniyorsanız bu onay kutusunu seçin. seçme veya seçimini kaldırma Hayır disableMetricsCollection:
doğru veya yanlış