promptfoo

用于实验、测试、评估和监控LLM应用的Python SDK - Parea AI (YC S23)

🪢 开源AI工程平台：LLM评估、可观测性、指标、提示管理、游乐场、数据集。集成OpenTelemetry、LangChain、OpenAI SDK、Lite

通过全面的追踪、自动化评估和生产级仪表板，调试、评估和监控您的LLM应用、RAG系统和代理工作流。

用于评估LLM生成响应的Python SDK。