Wyszukiwanie treści tomów katalogu Unity

Content Search przygotowuje i indeksuje dokumenty w tomie Unity Catalog. Wyszukiwania i pytania agentów następnie nalegają na indeks, dzięki czemu użytkownicy i agenci szybciej i dokładniej pobierają najbardziej istotne informacje. Ponieważ indeks obejmuje zawartość każdego pliku, agent może korzystać z konkretnych fragmentów w wielu plikach, zamiast pobierać kilka całych plików.

Wyszukiwanie treści jest szczególnie przydatne w tomach powiązanych z agentem Genie. Zobacz Analizowanie plików w woluminach za pomocą agenta Genie.

Important

Ta funkcja jest dostępna w wersji beta. Aby go używać, administrator obszaru roboczego musi włączyć opcję Analizuj pliki w woluminach za pomocą agentów Genie na stronie Podglądy . Zobacz Zarządzanie wersjami zapoznawczami usługi Azure Databricks.

Requirements

Zanim włączysz wyszukiwanie treści dla tomu Unity Catalog, popewnij, że spełniasz następujące wymagania:

Dostępność regionalna

Wyszukiwanie treści jest dostępne w regionach wymienionych w tej sekcji. Nie jest dostępny w regionach, które nie są wymienione. W niektórych regionach działa tylko wtedy, gdy administrator konta umożliwia przetwarzanie cross-Geo, co pozwala Azure Databricks przetwarzać Twoje pliki poza Geo Twojego workspace. Zobacz Włączanie przetwarzania międzyregionalnego.

Regiony, które nie wymagają przetwarzania cross-geo

Wyszukiwanie treści działa w regionie twojego workspace dla następujących regionów:

  • Środkowe stany USA
  • Wschodnie stany USA
  • Wschodnie stany USA 2
  • Francja Środkowa
  • Niemcy Środkowo-Zachodnie
  • Północno-środkowe stany USA
  • Południowo-środkowe stany USA
  • Szwecja Środkowa
  • Szwajcaria Północna
  • Zachodnie stany USA
  • Zachodnie stany USA 2
  • Zachodnie stany USA 3

Regiony wymagające przetwarzania cross-geo

Dla następujących regionów administrator konta musi włączyć przetwarzanie cross-geo, zanim będziesz mógł włączyć wyszukiwanie treści:

  • Australia Środkowa
  • Australia Środkowa 2
  • Australia Wschodnia
  • Australia Południowo-Wschodnia
  • Brazylia Południowa
  • Kanada Środkowa
  • Kanada Wschodnia
  • Indie Środkowe
  • Azja Wschodnia
  • Japonia Wschodnia
  • Japonia Zachodnia
  • Korea Środkowa
  • Meksyk Środkowy
  • Europa Północna
  • Norwegia Wschodnia
  • Katar Środkowy
  • Północna Republika Południowej Afryki
  • Indie Południowe
  • Azja Południowo-Wschodnia
  • Szwajcaria Zachodnia
  • Północne Zjednoczone Emiraty Arabskie
  • Południowe Zjednoczone Królestwo
  • Zachodnie Zjednoczone Królestwo
  • Zachodnio-środkowe stany USA
  • Europa Zachodnia
  • Indie Zachodnie

Włączasz i wyłączasz wyszukiwanie treści na stronie woluminu w Eksploratorze katalogu.

Aby umożliwić wyszukiwanie treści:

  1. W obszarze roboczym Azure Databricks kliknij pozycję Ikona danych.Catalog.
  2. Wyszukaj lub przeglądaj tom, który zawiera pliki, które chcesz zindeksować, i zaznacz go.
  3. Na zakładce Przegląd znajdź sekcję wyszukiwania treści w prawym pasku bocznym.
  4. Kliknij przycisk Włącz.

Po włączeniu wyszukiwania treści Azure Databricks uruchamia początkową synchronizację, aby przeanalizować i zindeksować obsługiwane pliki w woluminie. Sekcja wyszukiwania treści na zakładce Przegląd pokazuje status pobierania, wynik ostatniej synchronizacji oraz czas, w którym dany tom jest indeksowany.

Wyszukiwanie treści nie analizuje automatycznie zmian w wolumnie, takich jak nowo dodane pliki czy edycje istniejących plików. Aby odświeżyć wyszukiwanie treści, aby odzwierciedlało Twoje zmiany, kliknij Synchronizuj teraz w sekcji wyszukiwania treści . Musisz CAN MANAGE włączyć głośność, żeby wywołał synchronizację.

Aby wyłączyć wyszukiwanie treści, kliknij Wyłącz w sekcji wyszukiwania treści . Wyłączenie wyszukiwania treści usuwa wygenerowany indeks oraz przetworzoną treść. Jeśli włączysz to ponownie, Azure Databricks indeksuje woluminat od zera i ponownie ponosisz koszt pobierania.

Databricks zaleca włączenie wyszukiwania treści dla woluminów, które dołączasz do agenta Genie. Zobacz Analizowanie plików w woluminach za pomocą agenta Genie.

Jak rozlicza się wyszukiwanie treści

Wyszukiwanie treści składa się z dwóch komponentów kosztowych:

  • Pobieranie: Gdy włączasz wyszukiwanie treści lub uruchamiasz synchronizację, Azure Databricks używa ai_parse_document funkcji AI do parsowania plików w woluminie przed zbudowaniem indeksu. Databricks rozlicza to przetwarzanie według cen AI Functions.
  • Serwowanie zapytań: Lakebase przechowuje i serwuje uzyskane indeksy. Databricks fakturuje obliczenia i przechowywanie na podstawie jednostek obliczeniowych (CU), które zapewnia Lakebase. Obsługa zapytań skaluje się od 2 do 12 CU w zależności od wielkości indeksu i współbieżności zapytań. Po trzech dniach bez ruchu punkt końcowy skaluje się do zera i przestaje generować koszty obliczeniowe obsługi zapytań. Aby uzyskać aktualne stawki, zobacz stronę cennika usługi Lakebase.

Gdy agent Genie zadaje zapytanie do wolumenu indeksowanego, zapytanie może również generować koszty Agenta Genie. Zobacz Jak ta funkcja jest reklamowana?.

Limitations

Następujące ograniczenia dotyczą wyszukiwania treści podczas bety:

  • Tylko tomy zarządzane przez Unity Catalog obsługują wyszukiwanie treści. Zewnętrzne woluminy, wolumeny Moje Pliki oraz tomy w katalogach z powiązaniami przestrzeni roboczej nie są obsługiwane. Zobacz Przechowywanie plików w obszarze Moje pliki.
  • Włączasz wyszukiwanie treści dla całego tomu. Nie możesz indeksować podzbioru folderów lub plików w wolumnie.
  • Każda przestrzeń robocza może mieć do 100 woluminów przy włączonym wyszukiwaniu treści.
  • Każdy zindeksowany tom może zawierać do 10 000 plików.
  • Wyszukiwanie treści pomija pliki większe niż 50 MB.
  • Wyszukiwanie treści obsługuje pliki PDF, JPG, JPEG, PNG, TIFF, TIF, DOC, DOCX, PPT lub PPTX. Pomija wszystkie inne typy plików.
  • Wyszukiwanie treści nie jest dostępne w AWS GovCloud, w regionach Azure Government ani w przestrzeniach roboczych zgodnych z FedRAMP.

Dodatkowe zasoby

Aby uzyskać powiązane informacje, zobacz następujące zasoby: