Evaluation
3件
LATEST DROP
13 September, 2025記事を読む
LLMアプリ評価指標と実装ガイド【2025年版】：自動評価・人手評価・オンライン評価の設計
RAG/対話/要約/分類などLLMアプリの品質評価を、オフライン自動評価・人手評価・本番オンライン評価の3層で設計。メトリクス、ゴールドデータ作り、評価プロンプト、A/Bテスト、コスト管理まで。
13 September, 2025編集部おすすめ
気になるテーマをショートリストでチェック
0113 September, 2025
LLM評価パイプライン自動化【2025年版】：CIナイトリーで品質を継続監視する
RAG/要約/対話の評価をGitHub ActionsなどのCIで自動実行。ゴールドデータ管理、評価プロンプト、基準値ゲート、レポート生成、トレンド可視化まで。テンプレWorkfl…
13 September, 2025#LLM#Evaluation
0213 September, 2025
LLM品質×コストのPareto最適化【2025年版】：多目的最適化で最適点を選ぶ
品質（正確性/有用性）とコスト（トークン/レイテンシ）を同時に改善する多目的最適化フレーム。Paretoフロントの作り方、グリッド探索、ナッジ（ゲート/しきい値）、意思決定手順をコ…
13 September, 2025#LLM#Optimization
カテゴリハイライト
よく読まれているテーマから深掘り
最新記事
新着順にコンテンツをピックアップ
LLM評価パイプライン自動化【2025年版】：CIナイトリーで品質を継続監視する
RAG/要約/対話の評価をGitHub ActionsなどのCIで自動実行。ゴールドデータ管理、評価プロンプト、基準値ゲート、レポート生成、トレンド可視化まで。テンプレWorkflow付き。
13 September, 2025
LLM品質×コストのPareto最適化【2025年版】：多目的最適化で最適点を選ぶ
品質（正確性/有用性）とコスト（トークン/レイテンシ）を同時に改善する多目的最適化フレーム。Paretoフロントの作り方、グリッド探索、ナッジ（ゲート/しきい値）、意思決定手順をコード例で解説。
13 September, 2025
