ChainForge 简单介绍

官网：

ChainForge: A visual programming environment for prompt engineering

github 地址：

GitHub - ianarawjo/ChainForge: An open-source visual programming environment for battle-testing prompts to LLMs.

简介

使用场景

评估提示词

攻击性测试

评估模型

评估某项指标

实践

这两个例子单独拿出来讲

TODO

1. 内部环境运行
2. 内网环境 proxy [Add Custom Providers - ChainForge Documentation](https://chainforge.ai/docs/custom_providers/ 提供了自定义 llm

参考

使用案例：

X

自动化 Prompts

[2402.10949] The Unreasonable Effectiveness of Eccentric Automatic Prompts

相关的视频

LLM Prompt Injection Attacks & Testing Vulnerabilities With ChainForge - YouTube

使用 ChainForge 进行 LLM 提示注入攻击和漏洞测试