Informazioni sull'incorporamento

Completato

Un incorporamento è un tipo di rappresentazione dei dati usata dai modelli di Machine Learning. Un incorporamento rappresenta il significato semantico di una parte del testo. È possibile visualizzare un incorporamento come una matrice di numeri e la distanza numerica tra due incorporamenti rappresenta la relativa somiglianza semantica. Ad esempio, se due testi sono simili, anche le relative rappresentazioni dovrebbero essere simili.

Incorporamento di modelli

L'efficacia dei risultati della ricerca è direttamente correlata all'efficacia del modello incorporato.

Esistono modelli creati appositamente per eseguire in modo ottimale un'attività specifica. Utilizzare gli incorporamenti di ricerca per Somiglianza per acquisire la somiglianza semantica tra parti di testo. Un incorporamento di ricerca del Testo può esaminare la pertinenza di un documento lungo rispetto a una query breve; incorporare frammenti di codice e query di ricerca in linguaggio naturale tramite un incorporamento di ricerca del Codice.

Gli utenti forniscono un input a una query per un modello di incorporamento che viene convertito dal testo in un vettore tramite, ad esempio, il modello text-embedding-ada-002 per generare incorporamenti di testo.

Il risultato sarà qualsiasi documento corrispondente alla query contenuta nell'indice di ricerca. I documenti, con incorporamenti contenenti campi vettoriali, devono esistere nell'indice di ricerca e lo stesso modello deve essere usato per l'indicizzazione e la query.

Spazio di incorporamento

Lo spazio di incorporamento è il nucleo delle query vettoriali che comprendono tutti i campi vettoriali dello stesso modello di incorporamento. Comprende tutti i campi vettoriali popolati usando lo stesso modello.

In questo spazio di incorporamento, gli elementi simili si trovano vicini e quelli dissimili sono più distanti.

Ad esempio, i documenti che riguardano gli hotel con un parco acquatico sarebbero vicini nello spazio di incorporamento. Al contrario, gli hotel privi di questa struttura sarebbero più distanti, pur rimanendo comunque nelle vicinanze rispetto agli altri hotel. Concetti diversi, ad esempio i ristoranti, sarebbero ancora più lontani. In pratica, gli spazi di incorporamento sono astratti e non hanno significati ben definiti e comprensibili per l’utente, sebbene l'idea principale rimanga la stessa.