你是如何更精准地指引模型,激发其无尽的创造力?

2024-08-23 09:36

本文主要是介绍你是如何更精准地指引模型,激发其无尽的创造力?,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

随着大型语言模型日益凸显其重要性,发掘并充分利用它们的潜力,很大程度上依赖于我们如何巧妙构思和构造指令——即Prompt的精炼艺术。优化Prompt撰写技巧,将能够更好地引导大模型,为各类应用场景生成高质量的文本输出。分享出你的Prompt写作秘籍吧,你是如何更精准地指引模型,激发其无尽的创造力?

这是被人优质回答:

示例一:

一、大语言模型是什么?

大语言模型是基于大量数据进行预训练的超大型深度学习模型,由具有许多参数(通常数十亿个权重或更多)的人工神经网络组成,这些神经网络由具有自注意力功能的编码器和解码器组成。

简单理解的话,大语言模型通过学习海量的人类知识,经过了复杂的训练过程,最后得到了一个真正听得懂人话的机器模型。这个模型,可以针对任何输入的信息,生成一个对应的回答,并且回答的准确和匹配程度远远超过了一般人类的平均水准。

二、什么是Prompt

Prompt是指一段给定的文本或语句,用于启动和引导机器学习模型生成特定类型、主题或格式的输出。
简单来说,可以看做是我们给大模型的一个指令,例如:“写一篇作文”、“画一幅画”等。

三、如何写出完美的Prompt-以slogan为例

让我们看看最简单的Prompt效果:

image.png

好像还可以?那记住这次通义的回答,等到最后我们对比下。

注:本次测试均以通义千问为例。

  1. 给身份
    告诉大模型,【你是谁】。给它一个专业领域专业人士的身份,以及他会什么技能。

    image.png

  2. 专业名词解释
    要知道大模型可是基于大量数据进行预训练的超大型深度学习模型,涉及知识范围之广。为了能明确任务,有必要解释一下我们需要的东西是什么。

    image.png

  3. 给限制
    给AI一些使用限制,明确我们的要求

    image.png

  4. 给出示例

    image.png

  5. 工作流程
    最后我们来给AI一个明确的工作流程

    image.png

    四、效果展示

    image.png

     

    image.png


    怎么样,是不是焕然一新
    甚至我们可以根据AI提供的内容进一步延伸

    image.png

    五、总结

    大模型的预测错误是无法完全避免的,但我们可以通过控制Prompt来权衡生成结果的精度与召回率,一般来说,Prompt表述越细致,越严格时,生成结果的精度越高,召回率越低。
    掌握上述技巧,你也可以写出优质的prompt!

示例二:

Prompt工程与实践

PS:本文全部出自个人博客经验总结,非GPT生成。

一、Prompt与大模型

1.1 大模型的定义

大模型本质上就是一个概率生成模型,该模型的模型参数足够大,并且在训练过程中阅读了非常多的各个领域的语料。这个时候,如果通过一个正确的、有效的指令去引导这个模型,就能够生成我们想要的内容。

1.2 大模型的用途
  • 信息抽取

将长段文字提取出结构化信息

  • 信息检索

通读结果并根据你的查询生成针对性的回答

  • 对话系统

根据制定规则进行对话

  • 辅助开发

辅助编写代码,降低门槛

  • Agent

Agent模型加上外围的技术架构可以让大模型去完成一个具体的任务,将任务背后的若干个工作都做好。
 

image.png


其中的智能工单系统就一边跟你沟通,一边去调用后端的一些接口,将自身的诉求下发到接口里帮助你直接去问完成。比如说智能导购系统,通过我们在前端构建一个用户和这个机器的一个聊天的一个交互的界面,然后在背面我们把更多丰富的像商品搜索的接口、下订单的接口都连接起来,让用户和模型在对话的过程中,执行各种后端的工具,完成一个闭环的完整任务。

Agent的价值就是模型可以充分利用多个API,换而言之,每个人都可以构建一个垂直领域的Agent的机器人,然后调用平台各种开发的工具,完成自己想让他完成的一个特定领域的任务。
 

image.png


预训练环节是模型厂商会大量做的工作,目的是让模型具备一个基础的智能,然后它可以面对各行各业的问题,能够有一个比较好的基础的认知,能够去分析、推理。进一步到了这个具体的场景当中,我们可以通过微调和指令工程这俩个方式,然后去调用大模型的能力去解决具体的业务问题。特别是微调这个环节,可以使用较多的监督性语料,从而去改变模型的参数,使其在这个具体的事情上做得更加充分。

对于指令工程,我们要考虑如何用工程化的方式写好一个指令?它没有特别多的模板,更多的是一些指导性的思路。我个人的建议是,写好一个Prompt,在刚接触的情况下,可以先基于一些基本的框架进行套用,结合原理以及一些指导性的思路对指令进行添加和改写。如果在可以的情况下,可以预先准备好数据集,包含了InputOutputOutput tipsReason等等部分,并且不断地通过LLM的反馈来进一步修正Prompt。

二、Prompt框架

不同的任务类型对应不同的Prompt框架,不同的Prompt框架对应不同的思考逻辑;每个框架都有自身适合的场景。

2.1 CO-STAR框架
介绍

CO-STAR Framework是最新一届的新加坡政府举办的Prompt工程大赛的冠军选手的框架,可以予以借鉴。

如何应用CO-STAR框架:

·(C)上下文:为任务提供背景信息,通过为大语言模型(LLM)提供详细的背景信息,可以帮助它精确理解讨论的具体场景,确保提供的反馈具有相关性。
·(O)目标:明确你要求大语言模型完成的任务 清晰地界定任务目标,可以使大语言模型更专注地调整其回应,以实现这一具体目标
·(S)风格:明确你期望的写作风格 你可以指定一个特定的著名人物成某个行业专家的写作风格。如商业分析师或CEO。这将指导大语言模型以一种符合你需求的方式和词汇选择进行回应。
·(T)语气:设置回应的情感调 设定话当的语气,确保大语言模型的回应能够与预测的情感或情绪背景相协调。可能的语气包括正式、幽默、富有同情心等。
·(A)受众:识别目标受众 针对特定受众定制大语言模型的回应,无论是领域内的专家,初学者还是儿童,都能确保内容在特定上下文中适当且容易理解。
·(R)响应:规定输出的格式 确定输出格式是为了确保大语言模型按照你的具体需求进行输出,便于执行下游任务。常见的格式包括列表、JSON格式的数据、专业报告等。对于大部分需要程序化处理大语言模型输出的应用来说,JSON格式是理想的选择。

2.2 其他框架

image.png

image.png

  • ICIO框架

将指令的内容分为四个部分,第一部分是介绍角色、任务和背景知识,第二部分是给出执行的步骤、思维链、样例数据,第三部分是给出输入数据,第四部分是给出输出的定义和指引。

  • LangGPT

这个框架更偏向开发,给了很多的细节要求,里面有一部分涉及到洞察力,比如说工程师需要自行判断这个指令的目标用户是什么?因此写指令不仅需要我们的逻辑能力,也需要我们的产品能力。

三、Prompt原则

3.1 清晰明确

image.png


可以考虑==将我的理想输出内容细化为多个部分,限定字数==,来使其更加清晰明确。

3.2 给模型思考的空间和路径

image.png


将模型做这件事情的思考过程尽可能地讲清楚,比如说在标黄的三部分,对开头、主体和结尾三大部分给模型一个具体的思考逻辑。写好一个指令的前提是需要有一个清晰的目标,有些问题可能比较有难度,光给他目标也不够,此时就应该附加一些具体的思考逻辑和路径。

四、Prompt的指导性思路

4.1 Few Shot

image.png


给出示例来解释内容

Few Shot其实是一个Context Learning的思路,通过说不改变模型的思路,仅仅通过指令的上下文窗口去调优模型生产内容,提供一些示例,让模型自己去学

4.2 COT(Chain Of Thought)

让其输出思考过程,将COT量化出来,提升模型输出的准确性。

image.png

进一步强化的话,可以给一些具体的COT的示例。

4.3 Temperature

temperature用于控制模型输出内容的多样性。temperature越低,内容越稳定;temperature越高,内容越多样。

利用指令追求正确性的过程中,大模型的创造性在很多场景对于一些难题或者一些需要创造性答案的题很有帮助。

进一步强化的话,可以给一些具体的COT的示例。

4.3 Temperature

temperature用于控制模型输出内容的多样性。temperature越低,内容越稳定;temperature越高,内容越多样。

利用指令追求正确性的过程中,大模型的创造性在很多场景对于一些难题或者一些需要创造性答案的题很有帮助。

4.4 top_p

top_p影响每次输出选词集中的程度。

top_p越低,选词词数越集中;top_p越高,选词词数越发散。

4.4 top_p

top_p影响每次输出选词集中的程度。

top_p越低,选词词数越集中;top_p越高,选词词数越发散。

4.5 Tree Of Thought

将任务拆分为多个子任务,再通过不同的Prompt指令进行实现。

image.png

4.6 Agent

此处我们以定义一个"智能客服"的Agent为例。

第一部分我要在其中定义好工具,对于一个智能客服,我们需要定义像订单情况的查询,天气的查询计算器,政策赔偿查询等等。第二部分是我要告诉指令你该怎么去做思考,遇到每个工具返回的过程性结果,应该如何去做思考?第三部分是对于每个思考,都需要有具体的行动和调用的工具,最终得到Final Action,做出行动。

Agent的明显优势就是能够独立完成一个完整的任务,这对Prompt工程设计的要求程度更高,我们至少要定义清楚这个工具的用途,以便让模型知道应该调用哪个工具,并且需要告诉模型在这个场景下应该去如何拆解任务。因此大家可以看到,随着模型能力的不断增强,指令在这其中发挥的作用只会越来越大。

五、Prompt Engineering是什么

  • 迭代:没有人能直接写出100分的指令
  • 评测:像训练算法模型一样优化你的指令

我们需要==通过评测集==对指令不断地去调优,判断该指令是否能够放到生产环境中去用。

六、调优Prompt

Prompt的调优一般从==内容==和==结构==两个方面进行入手。

6.1 从内容上调优指令
  • 角色迭代

告知大模型他应该扮演的角色,例如"你是口语对话教练"

  • 任务迭代

对于指令中的关键动作,尝试不同的近义词或其他相近的描述来提升准确性。
 

image.png


避免负向指令,通过更换概念等方式,尽量告诉模型应该输出什么。
 

image.png


逻辑完备,避免在"无"的时候,大模型自由发挥、臆造信息。

image.png

  • Few Shot迭代

    image.png


    使添加的样例比例更加均匀。
6.2 从结构上迭代指令

image.png

  • 分条目

  • 顺序

先输出的内容会影响后输出的内容。可尝试不同的顺序,避免提取项之间的干扰,找到最佳的提取效果。

image.png

  • 分隔符:将文本上下文、不同的知识模块做分隔,避免无关知识模块的影响。

    image.png

示例三:

一、找到他人已有的编写好的符合自己使用场景的prompt进行抄作业式套用结合他人prompt的优点依葫芦画瓢编写一个类似的专属于自己的prompt
所以,接下来就主要介绍本人也就是笔者我在日常学习和工作中经常用到的快速编写prompt的一些方法和技巧全是干货

一、准备环节

1、在开始编写之前,你首先需要规划好或者说确定好你想要gpt给你一个什么样的答案,也就是确定问题类型和领域。

举例来说,如果你想让GPT解释电动车的工作原理,你的提示应该包括相关的技术术语和实际应用场景。这样,第一,你的问题可以被更好更准确的理解;第二,gpt给出的回答也会限定在相关对应领域
2、(可选步骤)
根据不同的需求选择对应的GPT模型,现在GPT模型百花齐放,各有所长,有条件的各位可以根据需求首先选择一个最合适的模型,比如对上下文字数记忆要求、回答风格要求、付费要求、计算要求、编程要求、绘画要求等等,国内国外大模型还需要考虑语言要求虽然现在的大趋势还是国外如Chatgpt、claude等大模型位于领先优势,但是在国内汉语言等特定领域,国内大模型还是有其独有的一些优势;选好了模型对于后面prompt的要求可以说是事半功倍
具体的大模型差异可以参考我的另一篇相关专题回答

image.png

参考该回答以及该问答栏目下的其他回答评测

二、编写环节

1. 使用规范化格式(贯穿全部的重要步骤)
使用markdown(主要)语法或css语法等对prompt进行文本区分、结构化和标记,让gpt更好理解要求避免出现理解误差等进行文本的结构化和标记。当然,如果嫌麻烦也可以直接使用一些符号进行文本、标题之间区分,比如#、¥、|、~,在没有符号歧义的情况下这也是可以的,主要目的就是让GPT正确理解你想要表达的意思

2. 定义特定背景和语境

给定一个具体的背景或场景,可以帮助GPT更好地专注于特定领域的回答,并保持一致的语言和风格。简单来说就是给他一个人设、一个角色,比如一位生物学家、一位演讲家、一个被老板逼着加班写文章做ppt的苦逼打工人等等,可以粗略也可以具体(太具体有的时候反而适得其反
3. 设定明确的目标(限制)
告知GPT你期望它回答的最终目标,包括但不限于语言风格、语言种类、表格还是图片还是文字、有序号的排列式回答还是一大段概括式回答等等;这样可以确保GPT的回答更符合你的预期。
4. 使用思维链方法
将整个目标分解成具体的步骤和问题,以确保每个步骤都有针对性地引导GPT朝正确的方向发展。这一点不仅可以用于prompt提示词编写,更是在日常使用gpt上用处很多


完整示例(了解电动车利用电池和电动机实现驱动的工作原理)

优化前
Prompt:
"请详细解释电动车是如何利用电池和电动机实现驱动的工作原理。"

 

image.png


优化后

一、选择模型

我想使用一个免费、理解中文、实用、能同时给出文字和图片的模型

故选择使用阿里通义千问2.5大模型

二、确定领域范围

因为是了解电动车利用电池和电动机实现驱动的工作原理,所以在提示词中要提到新能源电动汽车、驱动、原理、电池、电动机等关键词

image.png

可以看到,相比直接简单的提问,GPT给出的回答更加有针对性,并且基于给其的人物角色自行对问题答案进行了其他补充。如果对某些答案感兴趣或觉得其回答不够详细可以进行再次修改和提问,有了上下文的基础支撑,它会越来越接近你想要的答案,也就是调优

个人总结:

你要告诉 AI:给谁写,为什么写,需要写什么,写成什么样。那不行,需要怎么改。你给的细节越多,ai发挥就越好。因为你描述的不具体,ai 就只会脑补,因为 ai 的实质功能是单字接龙长文由单字接龙的自回归所生成的。所以它脑补的往往不是你想要的。不管你的 prompt写的怎么样,最终很重要的一点就是【加人味】自己加工,增加复核你们公司场景、生活所需。最总你自己需要:验收润色,加人味儿,凸显个人特色,让人一眼就能看出是你写的,而不是冰冷的 AI

参考:你有哪些能写出完美Prompt的秘籍?_问答-阿里云开发者社区 (aliyun.com)

这篇关于你是如何更精准地指引模型,激发其无尽的创造力?的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1099006

相关文章

大模型研发全揭秘:客服工单数据标注的完整攻略

在人工智能(AI)领域,数据标注是模型训练过程中至关重要的一步。无论你是新手还是有经验的从业者,掌握数据标注的技术细节和常见问题的解决方案都能为你的AI项目增添不少价值。在电信运营商的客服系统中,工单数据是客户问题和解决方案的重要记录。通过对这些工单数据进行有效标注,不仅能够帮助提升客服自动化系统的智能化水平,还能优化客户服务流程,提高客户满意度。本文将详细介绍如何在电信运营商客服工单的背景下进行

Andrej Karpathy最新采访:认知核心模型10亿参数就够了,AI会打破教育不公的僵局

夕小瑶科技说 原创  作者 | 海野 AI圈子的红人,AI大神Andrej Karpathy,曾是OpenAI联合创始人之一,特斯拉AI总监。上一次的动态是官宣创办一家名为 Eureka Labs 的人工智能+教育公司 ,宣布将长期致力于AI原生教育。 近日,Andrej Karpathy接受了No Priors(投资博客)的采访,与硅谷知名投资人 Sara Guo 和 Elad G

Retrieval-based-Voice-Conversion-WebUI模型构建指南

一、模型介绍 Retrieval-based-Voice-Conversion-WebUI(简称 RVC)模型是一个基于 VITS(Variational Inference with adversarial learning for end-to-end Text-to-Speech)的简单易用的语音转换框架。 具有以下特点 简单易用:RVC 模型通过简单易用的网页界面,使得用户无需深入了

透彻!驯服大型语言模型(LLMs)的五种方法,及具体方法选择思路

引言 随着时间的发展,大型语言模型不再停留在演示阶段而是逐步面向生产系统的应用,随着人们期望的不断增加,目标也发生了巨大的变化。在短短的几个月的时间里,人们对大模型的认识已经从对其zero-shot能力感到惊讶,转变为考虑改进模型质量、提高模型可用性。 「大语言模型(LLMs)其实就是利用高容量的模型架构(例如Transformer)对海量的、多种多样的数据分布进行建模得到,它包含了大量的先验

图神经网络模型介绍(1)

我们将图神经网络分为基于谱域的模型和基于空域的模型,并按照发展顺序详解每个类别中的重要模型。 1.1基于谱域的图神经网络         谱域上的图卷积在图学习迈向深度学习的发展历程中起到了关键的作用。本节主要介绍三个具有代表性的谱域图神经网络:谱图卷积网络、切比雪夫网络和图卷积网络。 (1)谱图卷积网络 卷积定理:函数卷积的傅里叶变换是函数傅里叶变换的乘积,即F{f*g}

秋招最新大模型算法面试,熬夜都要肝完它

💥大家在面试大模型LLM这个板块的时候,不知道面试完会不会复盘、总结,做笔记的习惯,这份大模型算法岗面试八股笔记也帮助不少人拿到过offer ✨对于面试大模型算法工程师会有一定的帮助,都附有完整答案,熬夜也要看完,祝大家一臂之力 这份《大模型算法工程师面试题》已经上传CSDN,还有完整版的大模型 AI 学习资料,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

【生成模型系列(初级)】嵌入(Embedding)方程——自然语言处理的数学灵魂【通俗理解】

【通俗理解】嵌入(Embedding)方程——自然语言处理的数学灵魂 关键词提炼 #嵌入方程 #自然语言处理 #词向量 #机器学习 #神经网络 #向量空间模型 #Siri #Google翻译 #AlexNet 第一节:嵌入方程的类比与核心概念【尽可能通俗】 嵌入方程可以被看作是自然语言处理中的“翻译机”,它将文本中的单词或短语转换成计算机能够理解的数学形式,即向量。 正如翻译机将一种语言

AI Toolkit + H100 GPU,一小时内微调最新热门文生图模型 FLUX

上个月,FLUX 席卷了互联网,这并非没有原因。他们声称优于 DALLE 3、Ideogram 和 Stable Diffusion 3 等模型,而这一点已被证明是有依据的。随着越来越多的流行图像生成工具(如 Stable Diffusion Web UI Forge 和 ComyUI)开始支持这些模型,FLUX 在 Stable Diffusion 领域的扩展将会持续下去。 自 FLU

SWAP作物生长模型安装教程、数据制备、敏感性分析、气候变化影响、R模型敏感性分析与贝叶斯优化、Fortran源代码分析、气候数据降尺度与变化影响分析

查看原文>>>全流程SWAP农业模型数据制备、敏感性分析及气候变化影响实践技术应用 SWAP模型是由荷兰瓦赫宁根大学开发的先进农作物模型,它综合考虑了土壤-水分-大气以及植被间的相互作用;是一种描述作物生长过程的一种机理性作物生长模型。它不但运用Richard方程,使其能够精确的模拟土壤中水分的运动,而且耦合了WOFOST作物模型使作物的生长描述更为科学。 本文让更多的科研人员和农业工作者

线性因子模型 - 独立分量分析(ICA)篇

序言 线性因子模型是数据分析与机器学习中的一类重要模型,它们通过引入潜变量( latent variables \text{latent variables} latent variables)来更好地表征数据。其中,独立分量分析( ICA \text{ICA} ICA)作为线性因子模型的一种,以其独特的视角和广泛的应用领域而备受关注。 ICA \text{ICA} ICA旨在将观察到的复杂信号