Megoldási ötletek
Ez a cikk egy megoldási ötlet. Ha azt szeretné, hogy további információkkal bővítsük a tartalmat, például a lehetséges használati eseteket, alternatív szolgáltatásokat, megvalósítási szempontokat vagy díjszabási útmutatást, a GitHub visszajelzésével tudassa velünk.
Ez a megoldás egy vizuális asszisztenst mutat be, amely a kép tartalmán alapuló részletes információkat nyújt.
Architektúra
Töltse le az architektúra Visio-fájlját.
Adatfolyam
- A felhasználók mobilalkalmazáson vagy webalkalmazáson keresztül kommunikálnak a robotokkal.
- A robot az alkalmazásba beépített Language Understanding Intelligence Service (LUIS) használatával azonosítja a felhasználói szándékot és a beszélgetési környezetet.
- A robot átadja a vizuális környezetet, például egy képet a Bing Visual Search API-nak.
- A robot adatokat kér le a Bing Entity Search API-ból a képhez kapcsolódó személyekről, helyekről, műalkotásokról, műemlékekről és objektumokról.
- A robot beolvassa az adatokat a vonalkódokból.
- A robot a Bing Custom Search API használatával további információt kap a felhasználó tartományára korlátozott vonalkódokról vagy lekérdezésekről.
- A vizuális segéd bemutatja a felhasználónak a kapcsolódó termékekre, úti célokra, hírességekre, helyekre, műemlékekre és műalkotásokra vonatkozó információkat.
Összetevők
- Azure-alkalmazás szolgáltatás egy teljes mértékben felügyelt HTTP-alapú szolgáltatás webalkalmazások, REST API-k és mobil háttérrendszerek üzemeltetéséhez.
- Az Azure Bot Service olyan környezetet kínál intelligens, nagyvállalati szintű robotok fejlesztéséhez, amelyek gazdagítják az ügyfélélményt. Az integrált környezet lehetővé teszi az adatok felügyeletének fenntartását is.
- A Bing Custom Search API segítségével testre szabott keresési élményeket hozhat létre a Bing hatékony rangsorolási és globális szintű keresési indexével.
- A Bing Entity Search API keresési képességeket kínál, amelyek azonosítják a releváns entitásokat, például ismert személyeket, helyeket, filmeket, tévéműsorokat, videojátékokat, könyveket és vállalkozásokat.
- A Bing Visual Search API egy adott képhez kapcsolódó adatokat ad vissza, például hasonló képeket, vásárlási forrásokat a kép elemének megvásárlásához, valamint a képet tartalmazó weblapokat.
- A Bing Web Search API egyetlen API-hívás kiadása után keresési eredményeket biztosít. Az eredmények weblapok, képek, videók és hírek milliárdjaiból gyűjtenek releváns információkat.
- Az Azure Cognitive Service for Language az Azure Cognitive Services része, amely számos természetes nyelvi feldolgozási szolgáltatást kínál.
- A társalgási nyelv megértése a Cognitive Service for Language egyik funkciója. Ez a felhőalapú API-szolgáltatás gépi tanulási intelligenciát kínál beszélgetési alkalmazások létrehozásához. A LUIS használatával előre jelezheti a beszélgetések jelentését, és releváns, részletes információkat vonhat le.
Forgatókönyv részletei
Ez a megoldás egy vizuális asszisztenst mutat be, amely a kép tartalmán alapuló részletes információkat nyújt. Az asszisztens képességei közé tartozik a névjegykártyák olvasása, a vonalkódok dekódolása, valamint a jól ismert személyek, helyek, objektumok, műalkotások és műemlékek felismerése.
Lehetséges használati esetek
A szervezetek a következő megoldásokat használhatják:
- Találkozó ütemezése.
- Megrendelés és kézbesítés nyomon követése gyártási, autóipari és szállítási alkalmazásokban.
- Vonalkód vásárlások a kiskereskedelemben.
- Fizetésfeldolgozás a pénzügyben és a kiskereskedelemben.
- Előfizetés-megújítások a kiskereskedelemben.
- Ismert emberek, helyek, tárgyak, művészetek és műemlékek azonosítása az oktatási, média- és szórakoztatóiparban.
Következő lépések
Ha olyan alkalmazást szeretne megtervezni, amely észleli az Ön számára fontos környezetet, olvassa el a rövid útmutatót: Objektumészlelési projekt létrehozása a Custom Vision ügyfélkódtárával.
A Bing keresési képességeinek megismeréséhez tekintse meg a Bing keresési API-k családját.
Ha LUIS-t szeretne beépíteni a robotba, olvassa el a Természetes nyelvfelismerés hozzáadása a robothoz című témakört.
A LUIS működésével kapcsolatos Learn-modul megismeréséhez tekintse meg a Nyelvi modell létrehozása beszélgetési nyelvfelismeréssel című témakört.
A Robot Service használatával történő buildelésről további információt a Language Service és az Azure Bot Service használatával rendelkező robotok létrehozása című témakörben talál.
A QnA Makert és a Bot Service-t tartalmazó robot létrehozásához lásd : Beszélgetési AI-megoldások létrehozása.
A LUIS, a Bot Service és a Bing Visual Search API megismerésének megszilárdításához tekintse meg az AI-900 vizsgát: A Microsoft Azure AI alapjai.
A Cognitive Services szolgáltatásokkal kapcsolatos ismeretei minősítéséhez tekintse meg a Microsoft Certified: Azure AI-mérnök Associate című témakört.
A megoldás összetevőiről az alábbi forrásokból tudhat meg többet: