GPT Prompt Engineer是一个将指令提示实验推向一个全新水平的工具,使用GPT Prompt Engineer让GPT提示词的工程超越以往的精确和高效领域。只需输入任务描述和一些测试案例,系统将生成、测试和排名大量提示词,找出表现最佳的那些。GPT Prompt Engineer将创意与数据驱动能力完美融合,将您的提示词转变为成功的杰作。
主要特点:
提示词生成:释放GPT-4和GPT-3.5-Turbo的能力,为您生成一系列针对您的用例和测试案例量身定制的指令提示。
提示词测试:观察系统将每个生成的提示词与测试案例进行对比,细致评估其表现。
ELO评分系统:目睹指令提示的ELO评分如炼金般变幻,通过与回应的互动展现其有效性。
分类版本:针对分类任务,笔记本会评估测试案例的准确性,并为每个提示词呈现综合评分表。
Weights & Biases日志记录:支持将您的配置记录到Weights & Biases,记录温度、最大标记、提示、测试案例和ELO评分。
使用场景:
最佳指令提示设计:寻找在您的任务中实现最佳性能的完美提示。
高效实验:让GPT Prompt Engineer处理繁重工作,减少试错的过程。
数据驱动决策:利用数据驱动的ELO评分,在选择提示词时做出明智决策。
卓越分类:通过系统性评估和评分,提升您的分类任务的水平。
用GPT Prompt Engineer,揭示前所未有的指令提示工程艺术。让AI驱动成为您的引路人,为您打造在任务领域中引领卓越表现的提示词,同时编织出优雅而精确的图景。
https://github.com/mshumer/gpt-prompt-engineer