Aracılığıyla paylaş


Kopyalama etkinliğinde Oracle veritabanını yapılandırma

Bu makalede, oracle veritabanından ve veritabanından veri kopyalamak için veri işlem hattındaki kopyalama etkinliğinin nasıl kullanılacağı özetlenmiştir.

Desteklenen yapılandırma

Kopyalama etkinliği altındaki her sekmenin yapılandırması için sırasıyla aşağıdaki bölümlere gidin.

Genel

Genel ayarlar sekmesini yapılandırmak için Genel ayarlar kılavuzuna bakın.

Kaynak

Aşağıdaki özellikler, kopyalama etkinliğinin Kaynak sekmesinde Oracle veritabanı için desteklenir.

Kaynak sekmesini ve özellik listesini gösteren ekran görüntüsü.

Aşağıdaki özellikler gereklidir:

  • Bağlantı: Bağlantı listesinden bir Oracle veritabanı bağlantısı seçin. Bağlantı yoksa, bağlantı listesinin alt kısmındaki Diğer'i seçerek yeni bir Oracle veritabanı bağlantısı oluşturun.
  • Sorguyu kullan: Tablo veya Sorgu'dan öğesini seçin.
    • Tablo'ya seçerseniz:

      • Tablo: Oracle veritabanında veri okunacak tablonun adını belirtin. Şemayı ve tablo adını girmek için açılan listeden tabloyu seçin veya El ile gir'i seçin.

        Sorgu kullan - Tablo'yu gösteren ekran görüntüsü.

    • Sorgu'yu seçerseniz:

      • Sorgu: Verileri okumak için özel SQL sorgusunu belirtin. Örneğin: SELECT * FROM MyTable.

        Bölümlenmiş yükü etkinleştirdiğinizde, sorgunuzda ilgili yerleşik bölüm parametrelerini bağlamanız gerekir. Örnekler için Oracle veritabanından paralel kopya bölümüne bakın.

        Sorgu kullan - Sorgu'yu gösteren ekran görüntüsü.

Gelişmiş'in altında aşağıdaki alanları belirtebilirsiniz:

  • Bölüm seçeneği: Oracle veritabanından veri yüklemek için kullanılan veri bölümleme seçeneklerini belirtir. Bölüm seçeneği etkinleştirildiğinde (Hiçbiri değil), Oracle veritabanından verileri eşzamanlı olarak yüklemek için paralellik derecesi, kopyalama etkinliği ayarları sekmesindeki Kopyalama paralelliği derecesi tarafından denetlenmektedir.

    Hiçbiri'ni seçerseniz bölüm kullanmamayı seçersiniz.

    Tablonun Fiziksel bölümleri'ne seçerseniz:

    • Bölüm adları: Kopyalanması gereken fiziksel bölümlerin listesini belirtin.

      Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfTabularPartitionName . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın.

      Tablonun Fiziksel bölümleri'ni seçtiğinizde yapılandırmayı gösteren ekran görüntüsü.

    Dinamik aralık'ı seçerseniz:

    • Bölüm sütunu adı: Paralel kopyalama için aralık bölümleme tarafından kullanılacak tamsayı türünde kaynak sütunun adını belirtin. Belirtilmezse, tablonun birincil anahtarı otomatik olarak algılanır ve bölüm sütunu olarak kullanılır.

      Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfRangePartitionColumnName . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın.

    • Bölüm üst sınırı: Verileri kopyalamak için bölüm sütununun en yüksek değerini belirtin.

      Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfRangePartitionUpbound . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın.

    • Bölüm alt sınırı: Verileri kopyalamak için bölüm sütununun en düşük değerini belirtin.

      Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfRangePartitionLowbound . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın.

      Dinamik aralık'ı seçtiğinizde yapılandırmayı gösteren ekran görüntüsü.

  • Sorgu zaman aşımı (dakika):Sorgu komutu yürütme için zaman aşımını belirtin; varsayılan değer 120 dakikadır. Bu özellik için bir parametre ayarlandıysa, izin verilen değerler "02:00:00" (120 dakika) gibi zaman aralığıdır.

  • Ek sütunlar: Kaynak dosyaların göreli yolunu veya statik değerini depolamak için ek veri sütunları ekleyin. İfade, ikincisi için desteklenir.

Hedef

Aşağıdaki özellikler, kopyalama etkinliğinin Hedef sekmesi altında Oracle veritabanı için desteklenir.

Hedef sekmesini gösteren ekran görüntüsü.

Aşağıdaki özellikler gereklidir:

  • Bağlantı: Bağlantı listesinden bir Oracle veritabanı bağlantısı seçin. Bağlantı yoksa, bağlantı listesinin en altındaki Diğer'i seçerek yeni bir Oracle veritabanı bağlantısı oluşturun.
  • Tablo: Açılan listeden veritabanınızdaki tabloyu seçin. Veya şemayı ve tablo adını girmek için El ile Enter'ı işaretleyin.

Gelişmiş'in altında aşağıdaki alanları belirtebilirsiniz:

  • Kopyalama öncesi betiği: Her çalıştırmada Oracle veritabanına veri yazmadan önce yürütülecek kopyalama etkinliği için bir SQL sorgusu belirtin. Önceden yüklenmiş verileri temizlemek için bu özelliği kullanabilirsiniz.
  • Toplu iş yazma zaman aşımı: Toplu ekleme işleminin zaman aşımına uğramadan önce tamamlanması için bekleme süresi. İzin verilen değer zaman aralığıdır. Örnek olarak 00:30:00 (30 dakika) gösteriliyor.
  • Toplu iş boyutu yazma: Toplu iş başına Oracle veritabanı tablosuna eklenecek satır sayısını belirtin. İzin verilen değer tamsayıdır (satır sayısı). Varsayılan değer 10.000'dir.
  • En fazla eşzamanlı bağlantı: Etkinlik çalıştırması sırasında veri deposuna kurulan eş zamanlı bağlantıların üst sınırı. Yalnızca eşzamanlı bağlantıları sınırlamak istediğinizde bir değer belirtin.

Eşleme

Eşleme sekmesi yapılandırması için Eşleme sekmesinin altında Eşlemelerinizi yapılandırma bölümüne gidin.

Ayarlar

Ayarlar sekmesi yapılandırması için ayarlar sekmesinin altındaki Diğer ayarlarınızı yapılandırma bölümüne bakın.

Oracle veritabanından paralel kopyalama

Oracle veritabanı bağlayıcısı, Oracle veritabanındaki verileri paralel olarak kopyalamak için yerleşik veri bölümleme sağlar. Veri bölümleme seçeneklerini kopyalama etkinliğinin Kaynak sekmesinde bulabilirsiniz.

Bölümlenmiş kopyalamayı etkinleştirdiğinizde hizmet, bölümlere göre veri yüklemek için Oracle veritabanı kaynağınızda paralel sorgular çalıştırır. Paralel derece, kopyalama etkinliği ayarları sekmesindeki Kopya paralelliği derecesi ayarıyla denetlenilir. Örneğin, Kopyalama paralelliği Derecesini dört olarak ayarlarsanız, hizmet aynı anda belirtilen bölüm seçeneğinize ve ayarlarınıza göre dört sorgu oluşturur ve çalıştırır ve her sorgu Oracle veritabanınızdan verilerin bir bölümünü alır.

Özellikle Oracle veritabanınızdan büyük miktarda veri yüklediğinizde veri bölümleme ile paralel kopyalamayı etkinleştirmeniz önerilir. Farklı senaryolar için önerilen yapılandırmalar aşağıdadır. Verileri dosya tabanlı veri deposuna kopyalarken, bir klasöre birden çok dosya olarak yazmanız önerilir (yalnızca klasör adını belirtin), bu durumda performans tek bir dosyaya yazmaktan daha iyidir.

Senaryo Önerilen ayarlar
Fiziksel bölümleri olan büyük tablodan tam yük. Bölüm seçeneği: Tablonun fiziksel bölümleri.

Yürütme sırasında, hizmet fiziksel bölümleri otomatik olarak algılar ve bölümlere göre verileri kopyalar.
Veri bölümleme için bir tamsayı sütunuyla birlikte fiziksel bölümler olmadan büyük tablodan tam yük. Bölüm seçenekleri: Dinamik aralık bölümü.
Bölüm sütunu: Verileri bölümleme için kullanılan sütunu belirtin. Belirtilmezse birincil anahtar sütunu kullanılır.
Fiziksel bölümler içeren özel bir sorgu kullanarak büyük miktarda veri yükleyin. Bölüm seçenekleri: Tablonun fiziksel bölümleri.
Sorgu: SELECT * FROM <TABLENAME> PARTITION("?DfTabularPartitionName") WHERE <your_additional_where_clause>.

Bölüm adı: Veri kopyalanacak bölüm adlarını belirtin. Belirtilmezse, hizmet Oracle veritabanı verilerinde belirttiğiniz tablodaki fiziksel bölümleri otomatik olarak algılar.
Yürütme sırasında hizmet ?DfTabularPartitionName yerine gerçek bölüm adını alır ve Oracle veritabanına gönderir.
Veri bölümleme için bir tamsayı sütunuylayken fiziksel bölümler olmadan özel bir sorgu kullanarak büyük miktarda veri yükleyin. Bölüm seçenekleri: Dinamik aralık bölümü.
Sorgu: SELECT * FROM <TABLENAME> WHERE ?DfRangePartitionColumnName <= ?DfRangePartitionUpbound AND ?DfRangePartitionColumnName >= ?DfRangePartitionLowbound AND <your_additional_where_clause>.
Bölüm sütunu: Verileri bölümleme için kullanılan sütunu belirtin. Tamsayı veri türüne sahip sütuna göre bölümleyebilirsiniz.
Bölüm üst sınırı ve bölüm alt sınırı: Yalnızca alt ve üst aralık arasındaki verileri almak için bölüm sütununa göre filtrelemek isteyip istemediğinizi belirtin.

Yürütme sırasında, hizmet , ?DfRangePartitionUpboundve ?DfRangePartitionLowbound yerine ?DfRangePartitionColumnNameher bölüm için gerçek sütun adı ve değer aralıkları ekler ve Oracle veritabanına gönderir.
Örneğin, "ID" bölüm sütununuz alt sınır 1 ve üst sınır 80 olarak ayarlanırsa, paralel kopya 4 olarak ayarlanırsa, hizmet verileri 4 bölüme göre alır. Kimlikleri sırasıyla [1,20], [21, 40], [41, 60] ve [61, 80] arasındadır.'

İpucu

Bölümlenmemiş bir tablodan veri kopyalarken, bir tamsayı sütununa göre bölümleme yapmak için "Dinamik aralık" bölümleme seçeneğini kullanabilirsiniz. Kaynak verilerinizde bu tür bir sütun yoksa, bir sütun oluşturmak ve bunu bölüm sütunu olarak kullanmak için kaynak sorgudaki ORA_HASH işlevinden yararlanabilirsiniz.

Tablo özeti

Aşağıdaki tablolar Oracle veritabanındaki kopyalama etkinliği hakkında daha fazla bilgi içerir.

Kaynak bilgileri

Veri Akışı Adı Açıklama Değer Zorunlu JSON betik özelliği
Bağlantı Kaynak veri deposuyla bağlantınız. <Oracle veritabanı bağlantınız> Yes bağlantı
Sorguyu kullanma Oracle veritabanından veri okumanın yolu. Belirtilen tablodan verileri okumak için Tablo uygula veya SQL sorgularını kullanarak verileri okumak için Sorgu'yu uygulayın. Tablo
Sorgu
Yes /
Tablo için
şema adı Şemanın adı. < şema adınız > Hayır schema
tablo adı Tablonun adı. < tablonuzun adı > Hayır table
Sorgu için
Sorgu Verileri okumak için özel SQL sorgusunu kullanın. SELECT * FROM MyTable bunun bir örneğidir.
Bölümlenmiş yükü etkinleştirdiğinizde, sorgunuzda ilgili yerleşik bölüm parametrelerini bağlamanız gerekir. Örnekler için Oracle veritabanından paralel kopya bölümüne bakın.
< SQL sorguları > Hayır oracleReaderQuery
Bölüm seçeneği Oracle veritabanından veri yüklemek için kullanılan veri bölümleme seçenekleri. Yok (varsayılan)
Tablonun fiziksel bölümleri
Dinamik aralık
Hayır /
Tablonun Fiziksel bölümleri için
Bölüm adları Kopyalanması gereken fiziksel bölümlerin listesi. Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfTabularPartitionName . < bölüm adlarınız > Hayır partitionNames
Dinamik aralık için
Bölüm sütunu adı Paralel kopyalama için aralık bölümleme tarafından kullanılacak tamsayı türünde kaynak sütunun adını belirtin. Belirtilmezse, tablonun birincil anahtarı otomatik olarak algılanır ve bölüm sütunu olarak kullanılır.
Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfRangePartitionColumnName . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın.
< bölüm sütun adlarınız > Hayır partitionColumnName
Bölüm üst sınırı Verileri kopyalamak için bölüm sütununun en yüksek değerini belirtin. Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfRangePartitionUpbound . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın. < bölümünüzün üst sınırı > Hayır partitionUpperBound
Bölüm alt sınırı Verileri kopyalamak için bölüm sütununun en düşük değerini belirtin. Kaynak verileri almak için bir sorgu kullanırsanız WHERE yan tümcesine bağlanın ?DfRangePartitionLowbound . Bir örnek için Oracle veritabanından paralel kopya bölümüne bakın. < bölümünüzün alt sınırı > Hayır partitionLowerBound
Sorgu zaman aşımı Sorgu komutu yürütme zaman aşımı varsayılan olarak 120 dakikadır. timespan Hayır queryTimeout
Ek sütunlar Kaynak dosyaların göreli yolunu veya statik değerini depolamak için ek veri sütunları ekleyin. İfade, ikincisi için desteklenir. • Adı
•Değer
Hayır additionalColumns:
•ad
•değer

Hedef bilgileri

Veri Akışı Adı Açıklama Değer Zorunlu JSON betik özelliği
Bağlantı Hedef veri deposuna bağlantınız. <Oracle veritabanı bağlantınız> Yes bağlantı
Table Hedef veri tablonuz. <hedef tablonuzun adı> Yes /
şema adı Şemanın adı. < şema adınız > Yes schema
tablo adı Tablonun adı. < tablonuzun adı > Yes table
Ön kopyalama betiği Her çalıştırmada Oracle veritabanına veri yazmadan önce yürütülecek kopyalama etkinliği için bir SQL sorgusu. Önceden yüklenmiş verileri temizlemek için bu özelliği kullanabilirsiniz. < kopyalama öncesi betiğiniz > Hayır preCopyScript
Toplu iş yazma zaman aşımı Toplu ekleme işleminin zaman aşımına uğramadan önce tamamlanması için bekleme süresi. timespan Hayır writeBatchTimeout
Toplu iş boyutu yazma Toplu iş başına SQL tablosuna eklenecek satır sayısı. integer
(varsayılan değer 10.000'dir)
Hayır writeBatchSize
En fazla eşzamanlı bağlantı Etkinlik çalıştırması sırasında veri deposuna kurulan eş zamanlı bağlantıların üst sınırı. Yalnızca eşzamanlı bağlantıları sınırlamak istediğinizde bir değer belirtin. < en fazla eşzamanlı bağlantı > Hayır maxConcurrentConnections