エピソード

azure-ai-generative SDK を使用した LLM アプリの自動評価 |Python Data Science Day

代入 Pamela Fox

Python Data Science Day

Azure ai-generative SDK を使用した LLM アプリの自動評価。

章

  • 00:00 - azure-ai-generative SDK を使用した LLM アプリの自動評価
  • 00:55 - LLM アプリの種類
  • 01:09 - プロンプトのみの LLM アプリ
  • 03:14 - 取得拡張生成 (RAG) LLM アプリ
  • 07:05 - RAG フロー
  • 08:10 - 回答は高品質ですか?
  • 11:21 - LLM アプリの LLM Ops
  • 12:46 - 品質要因の実験
  • 14:55 - AI RAG チャット エバリュエーター https://aka.ms/rag/eval
  • 16:07 - 地上の真理データ
  • 18:32 - 評価
  • 25:29 - 評価アプローチ
  • 25:57 - グラウンド・トゥルース・データ・セットの改善
  • 26:17 - 次の手順

のインスタンスに接続するときには、

  • パメラ・フォックス |Twitter/X: @pamelafox

開発者
Python