Förhandsversion av Bonsai hjärnans principprestanda

Du kan använda funktionen Visa principprestanda i Bonsai för att bekräfta att hjärnan kommunicerar korrekt med simuleringen innan du påbörjar en formell utvärdering. Använd testavsnitten för direktuppspelning för att granska det inlärda beteendet och testsvaren i simuleringen.

Innan du börjar

• Du måste ha en simulator. Du kan inte träna eller bedöma en hjärna utan en simulator. Simulatorn kan vara lokal (ohanterad) eller paketerad i Bonsai (hanterad).
• Du måste ha en tränad (eller delvis tränad hjärna) som inte aktivt tränar. Du kan inte förhandsgranska principen för en hjärnversion som är otränad eller håller på att tränas. Du kan sluta träna manuellt när du är nöjd med prestandamåtten eller vänta tills träningen stoppas automatiskt när hjärnan når iterationsgränsen för inga framsteg.

Steg 1: Bekräfta att hjärnan är stoppad

För att stoppa en hjärna som för närvarande tränar:

• I CLI: Kör bonsai brain version stop-training -n {BRAIN_NAME} --version {BRAIN_VERSION}
• I användargränssnittet: Klicka på den röda knappen Stoppa träning .

  

  Skärmbild av knappen Stoppa träning som måste klickas på innan utvärderingen kan starta.

Tips

Bonsai stoppar automatiskt träningen och markerar att träningen slutförs om inlärningen inte fortskrider inom det NoProgressIterationLimit fönster som angetts för AI-läroplanen. :::image-end:::

Steg 2: Starta förhandsversionen

1. Öppna användargränssnittetBonsai
2. Välj den hjärnversion som du vill granska.
3. Välj fliken Träna .
4. Välj fliken Visa principprestanda längst ned på datapanelen.

Om du förhandsgranskar en hjärna som tränats med en hanterad simulator börjar förhandsversionen automatiskt med paketet som konfigurerats i Inkling-filen.

Steg 3: Granska dataströmmen

Använd de interaktiva, strömmande prestandadiagrammen i förhandsgranskningspanelen för att granska principsvar från Bonsai hjärnan.

Strömningsdiagrammen visar hur datapunkter i simuleringen ändras under träningssessioner. Du kan använda data för att kontrollera att din AI svarar på miljöförändringar på rätt sätt och gör framsteg mot träningsmålen.

Om simulatorn spårar flera datapunkter kan du klicka på knappen + Lägg till diagram för att replikera datadiagrammet. Aktivera eller inaktivera tillgängliga fält i varje diagram för att göra analysen enklare.

Tips

Att förhandsgranska en delvis tränad hjärna är ett bra sätt att utföra tidig verifiering av din kontrollprincip och bekräfta att hjärnan utvecklar lösningar på det problem som du faktiskt vill lösa med AI.

Förhandsgranska prestanda med en ohanterad (lokal) simulator

Om du vill förhandsgranska hjärnans prestanda med en lokal simulator måste du ansluta simulatorn till Bonsai med Bonsai CLI innan du väljer fliken Visa principprestanda :

1. Kommentera ut -instruktionen package i Inkling-filen (om den finns).
2. Starta simulatorn lokalt.
3. Anslut den ohanterade simulatorn för utvärdering:

   bonsai simulator unmanaged connect \
     --simulator-name=SIMULATOR_NAME  \
     --brain-name=BRAIN_NAME          \
     --brain-version=VERSION          \
     --concept_name CONCEPT_NAME      \
     --action Assess
   
   Simulators Found: 1
   Simulators Connected: 1
   Simulators Not Connected: 0
   

När du väljer fliken Visa principprestanda kan du välja din ohanterade simulator i den tillgängliga listan.

Nästa steg

När hjärnan verkar uppfylla dina prestandaförväntningar kan du formellt utvärdera beteendet med en formell utvärdering.