Afbeeldingsbijschriften (versie 4.0 preview)

Afbeeldingsbijschriften in Image Analysis 4.0 (preview) zijn beschikbaar via de functies Bijschriften en Dichte bijschriften .

Bijschrift genereert een beschrijving van één zin voor alle afbeeldingsinhoud. Dense Captions biedt meer details door beschrijvingen van maximaal 10 gebieden van de afbeelding in één zin te genereren, naast het beschrijven van de hele afbeelding. Dense Captions retourneert ook begrenzingsvakcoördinaten van de beschreven afbeeldingsgebieden. Beide functies maken gebruik van de nieuwste baanbrekende, op Florence gebaseerde AI-modellen.

Op dit moment is bijschriften van afbeeldingen alleen beschikbaar in het Engels.

Genderneutrale bijschriften

Alle bijschriften bevatten standaard geslachtstermen: 'man', 'vrouw', 'jongen' en 'meisje'. U hebt de mogelijkheid om deze termen te vervangen door 'persoon' in uw resultaten en genderneutrale bijschriften te ontvangen. U kunt dit doen door de optionele API-aanvraagparameter gender-neutral-caption in te true stellen op in de aanvraag-URL.

Belangrijk

Afbeeldingsondertiteling in Image Analysis 4.0 is op dit moment alleen beschikbaar in de volgende Azure-datacenterregio's: VS - oost, Frankrijk - centraal, Korea - centraal, Europa - noord, Azië - zuidoost, Europa - west, VS - west. U moet een Computer Vision resource in een van deze regio's gebruiken om resultaten te verkrijgen van de functies Bijschriften en Dichte bijschriften.

Als u een Computer Vision resource buiten deze regio's moet gebruiken om bijschriften voor afbeeldingen te genereren, gebruikt u Afbeeldingsanalyse 3.2, die beschikbaar is in alle Computer Vision regio's.

Probeer de functies voor bijschriften van afbeeldingen snel en eenvoudig uit in uw browser met behulp van Vision Studio.

Vision Studio uitproberen

Voorbeelden van bijschriften en dichte bijschriften

Caption

Het volgende JSON-antwoord illustreert wat de Api analysis 4.0 retourneert bij het beschrijven van de voorbeeldafbeelding op basis van de visuele kenmerken.

"captions": [
    {
        "text": "a man pointing at a screen",
        "confidence": 0.4891590476036072
    }
]

Dichte bijschriften

Het volgende JSON-antwoord illustreert wat de Analysis 4.0-API retourneert bij het genereren van compacte bijschriften voor de voorbeeldafbeelding.

{
  "denseCaptionsResult": {
    "values": [
      {
        "text": "a man driving a tractor in a farm",
        "confidence": 0.535620927810669,
        "boundingBox": {
          "x": 0,
          "y": 0,
          "w": 850,
          "h": 567
        }
      },
      {
        "text": "a man driving a tractor in a field",
        "confidence": 0.5428450107574463,
        "boundingBox": {
          "x": 132,
          "y": 266,
          "w": 209,
          "h": 219
        }
      },
      {
        "text": "a blurry image of a tree",
        "confidence": 0.5139822363853455,
        "boundingBox": {
          "x": 147,
          "y": 126,
          "w": 76,
          "h": 131
        }
      },
      {
        "text": "a man riding a tractor",
        "confidence": 0.4799223840236664,
        "boundingBox": {
          "x": 206,
          "y": 264,
          "w": 64,
          "h": 97
        }
      },
      {
        "text": "a blue sky above a hill",
        "confidence": 0.35495415329933167,
        "boundingBox": {
          "x": 0,
          "y": 0,
          "w": 837,
          "h": 166
        }
      },
      {
        "text": "a tractor in a field",
        "confidence": 0.47338250279426575,
        "boundingBox": {
          "x": 0,
          "y": 243,
          "w": 838,
          "h": 311
        }
      }
    ]
  },
  "modelVersion": "2023-02-01-preview",
  "metadata": {
    "width": 850,
    "height": 567
  }
}

De API gebruiken

Afbeeldingsbijschriften

De functie voor het bijschriften van afbeeldingen maakt deel uit van de Afbeelding analyseren-API . Opnemen Caption in de queryparameter functies . Wanneer u vervolgens het volledige JSON-antwoord krijgt, parseert u de tekenreeks voor de inhoud van de "captionResult" sectie.

Dichte bijschriften

De functie voor dichte ondertiteling maakt deel uit van de Afbeelding analyseren-API . U kunt deze API aanroepen met behulp van REST. Opnemen denseCaptions in de queryparameter functies . Wanneer u vervolgens het volledige JSON-antwoord krijgt, parseert u de tekenreeks voor de inhoud van de "denseCaptionsResult" sectie.

Volgende stappen

• Meer informatie over het gerelateerde concept van objectdetectie.
• Quickstart: REST API of clientbibliotheken voor afbeeldingsanalyse
• De Analyze Image-API aanroepen