prompttools

一句话定位

开源工具包，用于提示词测试和实验，支持多种LLM和向量数据库。

核心价值

• 提供开源、可自托管的工具，用于实验、测试和评估LLM、向量数据库和提示词
• 支持开发者使用熟悉的代码、笔记本和本地playground界面进行测试
• 只需几行代码即可在不同模型上测试提示词和参数

功能亮点

• 支持多种LLM：OpenAI、Anthropic、LLaMA、HuggingFace、Mistral AI、Google Gemini等
• 支持向量数据库：Chroma、Weaviate、Qdrant、LanceDB、Pinecone等
• 支持框架集成：LangChain、MindsDB、LlamaIndex
• 提供本地Playground界面和Streamlit社区云版本
• 支持结果持久化：CSV、JSON、MongoDB等导出格式

适用人群

• AI开发者和研究人员
• 需要测试和优化提示词的团队
• 向量数据库用户
• LLM应用开发者

使用场景

• 在不同LLM模型上测试提示词效果
• 评估向量数据库的检索准确性
• 对比不同模型和参数组合的性能
• 构建和测试AI应用的工作流

综合说明

prompttools是一个专注于提示词工程和LLM测试的开源工具包，为开发者提供了一套完整的实验和评估框架。它支持多种主流LLM和向量数据库，帮助用户快速测试和优化AI应用。