promptfoo - 本地化提示词调试评估工具

https://github.com/promptfoo/promptfoo

promptfoo 是一个开发者友好的本地工具，用于测试 LLM 应用程序。

它可以帮助您停止反复试错的方法，开始交付安全可靠的 AI 应用程序。

● 使用自动化评估测试您的提示和模型
● 使用红队渗透测试和漏洞扫描来保护您的 LLM 应用程序
● 并行比较 OpenAI、Anthropic、Azure、Bedrock、Ollama 等多种模型的性能
● 在 CI/CD 中自动执行检查
● 与团队成员分享结果

#Prompt #AI #Tool #GitHub

GitHub

GitHub - promptfoo/promptfoo: Test your prompts, agents, and RAGs. AI Red teaming, pentesting, and vulnerability scanning for LLMs.…

Test your prompts, agents, and RAGs. AI Red teaming, pentesting, and vulnerability scanning for LLMs. Compare performance of GPT, Claude, Gemini, Llama, and more. Simple declarative configs with co...