Promptfoo
提供: Promptfoo
概要
再現可能なテストでプロンプト評価とLLMアプリの攻撃検査を行うCLIとライブラリ。
eval developer-tools
- ライセンス
- 未記録
- カテゴリ
- プラットフォームとインフラ
- ビジネスモデル
- フリーミアム
- 提供状況
- 未記録
- 公開
- 未記録
概要
主な用途はエージェント障害の調査、AIアプリの回帰評価です。資料に記載された機能:アサーションに基づくモデルとプロンプト出力比較;AI安全検査用の敵対的プローブ生成;開発とCIでの評価スイート実行。
主な機能
- アサーションに基づくモデルとプロンプト出力比較
- AI安全検査用の敵対的プローブ生成
- 開発とCIでの評価スイート実行
ユースケース
- エージェント障害の調査
- AIアプリの回帰評価
料金
Communityは無料で、ホスト型推論が必要なレッドチーム検査を月10000プローブまで含みます。Enterpriseは見積もり制で、対象モデルのAPI利用料は別途発生し得ます。
レコードの詳細
出典・日付・リンクはここにまとめ、本文は製品そのものに絞っています。
リンク・日付・出典
- レコード更新
- 2026-11-03
- ドキュメント
- www.promptfoo.dev ↗
選定プロファイル
各項目には値の根拠を表示します。「不明」は未確認という意味で、機能がないという意味ではありません。
選定プロファイル11 項目未確認 8 件
- 向くタスク
- データ分析
記録された機能に基づく編集上の分類であり、性能の実測ではありません。
訂正を提案 - 利用形態
- コマンドライン
記録された機能に基づく編集上の分類であり、性能の実測ではありません。
訂正を提案 - 対応プラットフォーム
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - 実行場所
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - オフライン動作
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - 公式サービス地域
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - 公開API
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - ライセンス
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - 商用利用
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - UI言語
- 未記録
この項目の資料確認では、この製品固有の情報は未確認です。
訂正を提案 - 課金
- オープンソース 法人見積り 無料枠: 限定的 サブスク必須: いいえ
価格はベンダー公表の最安値で税抜きです。必ず公式ページで確認してください。
訂正を提案
各値の根拠
- 向くタスク
- 当サイトの推測
- 利用形態
- 当サイトの推測
- 対応プラットフォーム
- 不明
- 実行場所
- 不明
- オフライン動作
- 不明
- 公式サービス地域
- 不明
- 公開API
- 不明
- ライセンス
- 不明
- 商用利用
- 不明
- UI言語
- 不明
主要な事実と根拠
各事実には適用条件・出典ページ・確認日を記載します。
-
機能: アサーションに基づくモデルとプロンプト出力比較 確認済み 2026-11-03 www.promptfoo.dev ↗
訂正を提案
よくある質問
Promptfooはワークフローのどの部分に向いていますか?
再現可能なテストでプロンプト評価とLLMアプリの攻撃検査を行うCLIとライブラリ。 アサーションに基づくモデルとプロンプト出力比較.
Promptfooを選ぶ前に比較すべき費用や制限は何ですか?
Communityは無料で、ホスト型推論が必要なレッドチーム検査を月10000プローブまで含みます。Enterpriseは見積もり制で、対象モデルのAPI利用料は別途発生し得ます。
類似製品
- Arize Phoenix — モデル呼出、検索、ツール実行を追跡するソース公開型AI観測プロジェクト。
- Braintrust — 本番エージェントのトレースと品質実験を結び付ける観測・評価基盤。
- CoreWeave Forge — Weights & Biasesの実験追跡、Weave評価、モデル運用を統合するAI開発環境。
- Evidently AI — データ品質、予測モデル、LLMアプリを監視するPython評価フレームワーク。
- Giskard — エージェントのセキュリティと業務上の失敗を調べるAI評価・レッドチーム基盤。
- Helicone — リクエスト、セッション、アプリ費用を調査するLLMゲートウェイ兼可観測性基盤。
出典
- Promptfoo — official product ↗
- Promptfoo — official documentation and terms ↗
- Promptfoo — official documentation and terms ↗
このレコードは 2026-11-03 に最終確認されました。
機械可読レコード: /api/products/promptfoo.json · 誤りを見つけましたか? 修正を提案