microsoft/promptflow

项目概览

提供将提示词工程与代码、评估测试串联的流程化开发体验，适合关注 LLM 应用工程化落地的团队。

项目类型

AI 工作流 · 评测观测

应用场景

知识问答

部署方式

Python 环境

License

MIT

适合谁

• 需要将提示词、代码与 LLM 串联为结构化流程并进行工程化管理的开发者。
• 希望为 LLM 应用建立批量测试与评估机制以保障交付质量的 AI 工程师。

核心能力

• 做什么：创建将 LLM、提示词、Python 代码及其他工具链接在一起的流程。如何工作：通过逻辑编排将各组件组合为可执行整体。用户价值：将开发逻辑结构化串联，辅助构建完整应用。状态：可用。
• 做什么：调试和迭代构建的流程。如何工作：支持追踪与 LLM 的交互过程。用户价值：辅助在开发阶段定位流程问题。状态：可用。
• 做什么：在更大数据集上评估流程的质量和性能。如何工作：支持将测试集成到 CI/CD 中。用户价值：为 LLM 应用提供批量测试手段以辅助保障质量。状态：可用。
• 做什么：将流程部署到选择的服务平台或集成到应用代码库中。如何工作：提供由流程转化为生产服务或代码的途径。用户价值：支撑 LLM 流程从开发走向上线。状态：可用。
• 做什么：通过命令行初始化流程、创建连接并交互式测试流程。如何工作：提供基于终端的指令工具。用户价值：便于习惯命令行操作的用户进行项目管理。状态：可用。
• 做什么：基于聊天模板快速初始化流程以创建聊天机器人。如何工作：提供预设的模板结构供用户起步。用户价值：降低起步门槛，快速搭建原型。状态：可用。

限制与风险

• 需要 Python 环境，官方推荐版本为 python >= 3.9 且 <= 3.11。
• 遥测数据收集功能默认处于开启状态，用户可选择手动关闭。

如何开始

• 需准备 Python 环境（建议版本 3.9 至 3.11），通过 pip 安装 promptflow 及 promptflow-tools。
• 使用 CLI 运行 pf flow init 初始化流程；使用 pf connection create 配置 API 连接；最后使用 pf flow test 进行交互式测试。

核验依据

• README: **Prompt flow** is a suite of development tools designed to streamline the end-to-end development cycle of LLM-based AI applications, from ideation, prototyping, testing, evaluati…
• README: Ensure you have a python environment, `python>=3.9, <=3.11` is recommended.
• README: For OpenAI key, establish a connection by running the command, using the `openai.yaml` file in the `my_chatbot` folder, which stores your OpenAI key (override keys and name with -…
• README: The software may collect information about you and your use of the software and send it to Microsoft if configured to enable telemetry.
• README: Telemetry collection is on by default.

内容核验时间：