(done) 吴恩达版提示词工程 3. 迭代 (控制输出长度、提取特定细节、输出 HTML 格式)

url: https://www.bilibili.com/video/BV1Z14y1Z7LJ?spm_id_from=333.788.videopod.episodes&vd_source=7a1a0bc74158c6993c7355c5490fc600&p=3

别人的笔记 url: https://zhuanlan.zhihu.com/p/626966526

---

3. 迭代（Iterative）

当我使用大语言模型构建应用程序时，我想我从来没有在第一次尝试时就用对提示词，在最终应用程序中还使用这个提示。没关系，只要有一个好的迭代过程能不断改进你的提示，那么你就能找到对任务实现效果较好的提示词。
有一个好的迭代过程能不断改进你的提示，那么你就能找到对任务实现效果较好的提示词。

你可能听过我说，当我训练一个机器学习模型时，它几乎从来没有第一次就成功过。事实上，如果训练的第一个模型能有效，我反而会感到非常惊讶。正如她所说，提示词在第一次是否起作用并不重要，最重要的是获得适用于应用程序的提示的过程。
提示词在第一次是否起作用并不重要，最重要的是获得适用于应用程序的提示的过程。

让我们进入代码，我向你展示一些框架，让你思考如何迭代地开发提示。

3.1 提示词的迭代开发

如果你和我一起上过机器学习课，你可能看到我使用这样的一张图。我们在机器学习开发中通常会有一个想法，然后实现它。编写代码，获取数据，训练你的模型，这会给你一个实验结果。

然后，你可以查看输出，也许进行错误分析，找出它在什么地方工作或不工作，然后甚至可能改变你要解决什么问题或如何处理的想法，然后改变你的实施方案，运行另一个实验等等，如此反复迭代，以获得一个有效的机器学习模型。如果你对机器学习不熟悉，没有见过这张图，也不要担心，这对本课程的其它余部分来说并不重要。

但是，当你使用 LLM 开发应用程序的编写提示时，这个过程可以说非常相似。你对自己想做什么、想完成的任务有一个想法，然后你就可以初步尝试编写，希望能有一个清晰和具体的提示，如果合适的话，会给系统思考的时间，然后你就可以运行它，看看会得到什么结果。

如果第一次的效果不够好，那么就需要反复迭代的过程来搞清楚为什么指令不够清晰，为什么它没有给算法足够的时间思考，这样你就可以完善想法，完善提示。在此基础上进行多次循环，直到你最终得到一个适用于你的应用程序的提示。

这也是为什么我个人没有那么关注网络上那些30个完美提示词的文章，因为我认为可能没有一个完美的提示来适用于世间万物。重要的是，你要有一个迭代过程，用来为你的特定应用挖掘出良好的提示。

让我们一起来看看代码示例。这里有上节视频中你所看到的初始代码，导入了 openai 和 os，然后我们得到 OpenAI 的 API key，这是辅助函数 get_completion()。

import openai
import osfrom dotenv import load_dotenv, find_dotenv
_ = load_dotenv(find_dotenv()) # read local .env fileopenai.api_key = os.getenv('OPENAI_API_KEY')def get_completion(prompt, model="gpt-3.5-turbo"):messages = [{"role": "user", "content": prompt}]response = openai.ChatCompletion.create(model=model,messages=messages,temperature=0, # this is the degree of randomness of the model's output)return response.choices[0].message["content"] 

在这个视频中，我将使用"“总结椅子情况介绍”"的任务作为运行示例。我把它粘贴在这里，你可以随时暂停视频，在 Notebook 上仔细阅读这些代码。

fact_sheet_chair = """
OVERVIEW
- Part of a beautiful family of mid-century inspired office furniture, 
including filing cabinets, desks, bookcases, meeting tables, and more.
- Several options of shell color and base finishes.
- Available with plastic back and front upholstery (SWC-100) 
or full upholstery (SWC-110) in 10 fabric and 6 leather options.
- Base finish options are: stainless steel, matte black, 
gloss white, or chrome.
- Chair is available with or without armrests.
- Suitable for home or business settings.
- Qualified for contract use.CONSTRUCTION
- 5-wheel plastic coated aluminum base.
- Pneumatic chair adjust for easy raise/lower action.DIMENSIONS
- WIDTH 53 CM | 20.87”
- DEPTH 51 CM | 20.08”
- HEIGHT 80 CM | 31.50”
- SEAT HEIGHT 44 CM | 17.32”
- SEAT DEPTH 41 CM | 16.14”OPTIONS
- Soft or hard-floor caster options.
- Two choices of seat foam densities: medium (1.8 lb/ft3) or high (2.8 lb/ft3)
- Armless or 8 position PU armrests MATERIALS
SHELL BASE GLIDER
- Cast Aluminum with modified nylon PA6/PA66 coating.
- Shell thickness: 10 mm.
SEAT
- HD36 foamCOUNTRY OF ORIGIN
- Italy
""" 

这是有一张椅子的说明书，上面写着它的灵感来自于一个华丽的中世纪家族，还有结构，尺寸，选项，材料，来自意大利，等等。所以，假设你想拿着这份说明书，帮助营销团队为在线零售网站编写一份描述。

然后我们会有如下的提示，我把上节课的提示策略直接粘贴过来，所以我在这里的提示说，你的任务是根据技术信息表，帮助营销团队为零售网站创建描述，编写一个产品描述，等等。这是我第一次尝试向大语言模型解释任务。

prompt = f"""
Your task is to help a marketing team create a 
description for a retail website of a product based 
on a technical fact sheet.Write a product description based on the information 
provided in the technical specifications delimited by 
triple backticks.Technical specifications: ```{fact_sheet_chair}```
"""
response = get_completion(prompt)
print(response)

让我点击 Shift+回车键，这需要几秒钟的时间运行，然后我们得到了这个结果。

Introducing our stunning mid-century inspired office chair, the perfect addition to any home or business setting. Part of a beautiful family of office furniture, including filing cabinets, desks, bookcases, meeting tables, and more, this chair is available in several options of shell color and base finishes to suit your style. Choose from plastic back and front upholstery (SWC-100) or full upholstery (SWC-110) in 10 fabric and 6 leather options. The chair is constructed with a 5-wheel plastic coated aluminum base and features a pneumatic chair adjust for easy raise/lower action. It is available with or without armrests and is qualified for contract use. The base finish options are stainless steel, matte black, gloss white, or chrome. Measuring at a width of 53 cm, depth of 51 cm, and height of 80 cm, with a seat height of 44 cm and seat depth of 41 cm, this chair is designed for ultimate comfort. You can also choose between soft or hard-floor caster options and two choices of seat foam densities: medium (1.8 lb/ft3) or high (2.8 lb/ft3). The armrests are available in either an armless or 8 position PU option. The materials used in the construction of this chair are of the highest quality. The shell base glider is made of cast aluminum with modified nylon PA6/PA66 coating and has a shell thickness of 10 mm. The seat is made of HD36 foam, ensuring maximum comfort and durability. This chair is made in Italy and is the perfect combination of style and functionality. Upgrade your workspace with our mid-century inspired office chair today!

看起来这已经完成了一个很好的描述，介绍了一把令人惊叹的中世纪风格的办公椅、完美的补充，等等。它做得很好，正是按照我的要求，从技术说明书开始，写一份产品描述。但我发现这个内容真是太长了，也许我们希望它稍微简短一点。

所以我有了一个想法，我写了一个提示，得到了一个结果。

3.2 控制输出的长度

我对它不是很满意，因为它太长了，所以我要让提示更加清晰，并说最多使用50个单词，来更清楚地要求所需的长度。

prompt = f"""
Your task is to help a marketing team create a 
description for a retail website of a product based 
on a technical fact sheet.Write a product description based on the information 
provided in the technical specifications delimited by 
triple backticks.Use at most 50 words.Technical specifications: ```{fact_sheet_chair}```
"""
response = get_completion(prompt)
print(response) 

然后我们再运行一次。好的，这看起来像是一个更好的简短描述，介绍了一款中世纪风格的办公椅，既时尚又实用等等。不错。

Introducing our mid-century inspired office chair, perfect for home or business settings. Available in a range of shell colors and base finishes, with or without armrests. Choose from 10 fabric and 6 leather options for full or plastic upholstery. With a 5-wheel base and pneumatic chair adjust, it’s both stylish and functional. Made in Italy.

我再来检查一下这段内容的长度。

 len(response) 

我把模型的答复拆开来，然后打印出长度，它是52个单词。这个大语言模型还不错，但它不太擅长遵循非常精确的单词计数的指令。有时它会输出60到65个单词之类的内容，但也在合理范围之内。

让我们再做一遍。你可以尝试不同的方法，告诉大语言模型最多使用三个句子。这些都是告诉模型你想要的输出长度的不同方法。这次模型的输出结果，有三个句子，看起来做得很好。

我也看到人们有时会做一些事情，比如最多使用280个字符。大型语言模型使用一种称为标记器解释文本，他们在计算字符方面往往表现平平。让我们看看，模型的输出是281个字符，这个结果已经非常接近了。而通常情况下，一个大语言模型对字符的控制是无法做到这样精确的，但是可以用不同的方式来控制输出的长度。

3.3 提取特定的细节

当我们继续为我们的网站完善这段文字时，我们可能会决定，天哪，这个网站不是直接向消费者销售，它实际上旨在向家具零售商销售家具，他们更关心椅子的技术细节和材料。在这种情况下，你可以接受这个提示，然后说，我想修改这个提示，使其在技术细节上更准确。

我要说的是，这个描述是为家具零售商准备的，所以它应该是技术性的，重点关注材料、产品和结构。于是我将提示修改如下。

prompt = f"""
Your task is to help a marketing team create a 
description for a retail website of a product based 
on a technical fact sheet.Write a product description based on the information 
provided in the technical specifications delimited by 
triple backticks.The description is intended for furniture retailers, 
so should be technical in nature and focus on the 
materials the product is constructed from.Use at most 50 words.Technical specifications: ```{fact_sheet_chair}```
"""
response = get_completion(prompt)
print(response) 

好吧，让我们来看看。

Introducing our mid-century inspired office chair, perfect for both home and business settings. With a range of shell colors and base finishes, including stainless steel and matte black, this chair is available with or without armrests. The 5-wheel plastic coated aluminum base and pneumatic chair adjust make it easy to move and adjust to your desired height. Made with high-quality materials, including a cast aluminum shell and HD36 foam seat, this chair is built to last.

不错。这次写着，涂层铝底座和气动座椅，优质材料。因此，通过更改提示，你可以让它更多地关注特定的特征，提取你想要的特定的细节特征。

进一步地，我可能还会决定，希望在描述的最后包括产品 ID。例如这把椅子的两个产品，SWC 110和SOC 100。以此，我可以进一步改进这个提示，让它给我产品的 ID。我可以在描述的末尾添加这样的指令：在技术规范中，用 7个字符来描述每一个产品 ID。

prompt = f"""
Your task is to help a marketing team create a 
description for a retail website of a product based 
on a technical fact sheet.Write a product description based on the information 
provided in the technical specifications delimited by 
triple backticks.The description is intended for furniture retailers, 
so should be technical in nature and focus on the 
materials the product is constructed from.At the end of the description, include every 7-character 
Product ID in the technical specification.Use at most 50 words.Technical specifications: ```{fact_sheet_chair}```
"""
response = get_completion(prompt)
print(response) 

让我们运行它，看看会发生什么。

Introducing our mid-century inspired office chair, perfect for home or business settings. With a range of shell colors and base finishes, and the option of plastic or full upholstery, this chair is both stylish and comfortable. Constructed with a 5-wheel plastic coated aluminum base and pneumatic chair adjust, it’s also practical. Available with or without armrests and suitable for contract use. Product ID: SWC-100, SWC-110.

它说，让我介绍中世纪风格的办公椅，外壳颜色，塑料涂层铝基底座，实用，一些选项，还有两个产品 ID 。所以这看起来很不错。

你刚才所看到的，就是一个简短的迭代开发示例。许多开发人员将会经历这样的迭代开发过程。

在上一个视频中 Yisa 分享了一些最佳实践。我通常会牢记这样的最佳实践，做到清晰和具体，必要时给模型时间思考。在这些原则的基础上，我们需要尝试编写提示，看看会发生什么，然后从这里开始反复迭代、完善提示，以越来越接近你需要的结果。在很多程序中使用的成功的提示语，都是在这样的迭代过程中得到的。

3.4 输出 HTML 格式

为了更加有趣，我给你展示一个更复杂的提示示例，它可能会让你更加了解 ChatGPT 的功能。

我只是在这里添加了一些额外的指令：在描述之后，包括一个给出产品尺寸的表格，然后将所有内容格式化为 HTML。你最终会得到这样的提示，我想可能不会有谁第一次就写出这样准确的提示语，让系统处理一个信息表。只有在多次迭代之后，才会出现这样的提示。

prompt = f"""
Your task is to help a marketing team create a 
description for a retail website of a product based 
on a technical fact sheet.Write a product description based on the information 
provided in the technical specifications delimited by 
triple backticks.The description is intended for furniture retailers, 
so should be technical in nature and focus on the 
materials the product is constructed from.At the end of the description, include every 7-character 
Product ID in the technical specification.After the description, include a table that gives the 
product's dimensions. The table should have two columns.
In the first column include the name of the dimension. 
In the second column include the measurements in inches only.Give the table the title 'Product Dimensions'.Format everything as HTML that can be used in a website. 
Place the description in a <div> element.Technical specifications: ```{fact_sheet_chair}```
"""response = get_completion(prompt)
print(response) 

让我们再次运行，这次输出了一些 HTML语句。

<div>
<h2>Mid-Century Inspired Office Chair</h2>
<p>Introducing our mid-century inspired office chair, part of a beautiful family of office furniture that includes filing cabinets, desks, bookcases, meeting tables, and more. This chair is available in several options of shell color and base finishes, allowing you to customize it to your liking. You can choose between plastic back and front upholstery or full upholstery in 10 fabric and 6 leather options. The base finish options are stainless steel, matte black, gloss white, or chrome. The chair is also available with or without armrests, making it suitable for both home and business settings. Plus, it's qualified for contract use, ensuring its durability and longevity.</p>
<p>The chair's construction features a 5-wheel plastic coated aluminum base and a pneumatic chair adjust for easy raise/lower action. You can also choose between soft or hard-floor caster options and two choices of seat foam densities: medium (1.8 lb/ft3) or high (2.8 lb/ft3). The armrests are also customizable, with the option of armless or 8 position PU armrests.</p>
<p>The materials used in the chair's construction are of the highest quality. The shell base glider is made of cast aluminum with modified nylon PA6/PA66 coating, with a shell thickness of 10 mm. The seat is made of HD36 foam, ensuring maximum comfort and support.</p>
<p>Made in Italy, this mid-century inspired office chair is the perfect addition to any office space. Order yours today!</p>
<h3>Product IDs:</h3>
<ul>
<li>SWC-100</li>
<li>SWC-110</li>
</ul>
</div><table><caption>Product Dimensions</caption><tr><th>Dimension</th><th>Measurement (inches)</th></tr><tr><td>Width</td><td>20.87"</td></tr><tr><td>Depth</td><td>20.08"</td></tr><tr><td>Height</td><td>31.50"</td></tr><tr><td>Seat Height</td><td>17.32"</td></tr><tr><td>Seat Depth</td><td>16.14"</td></tr>
</table>

让我们显示 HTML，看看这是否是有效的HTML，看看它是否有效。我也不知道它是否能工作，让我们看看。

from IPython.display import display, HTMLdisplay(HTML(response)) 

哦，太酷了。看起来这个 HTML 运行成功了。

一个非常好看的椅子的描述。结构、材料、产品尺寸。

哦，看起来我漏掉了最多50个单词的使用说明，所以这有点长。如果你想进行调整，你可以暂停视频，要求它更简洁，然后重新生成，看看你会得到什么结果。

3.5 小结

我希望你从这段视频中了解到，提示开发是一个迭代的过程。

尝试一些东西，看看它有哪些地方还不能满足你的要求，然后考虑如何更清晰地描述你的提示指令。或者在某些情况下，考虑如何给模型更多的思考空间，让它更接近你想要的结果。

我认为，成为一名好的提示工程师的关键，重要的不是知道多少完美的提示，而是使用一个良好的迭代流程来开发提示，使应用更加高效。

在这个视频中，我只是用一个例子说明如何迭代开发提示。对于更复杂的应用程序，有时你会有很多例子，例如有10个、50个甚至100个信息表的列表，需要迭代地开发一个提示，并根据大量案例对其进行评估。

对于大多数应用程序的早期开发，许多人会像我只有只用一个例子进行开发。对于更成熟的应用程序来说，有时根据一组更大的例子来评估提示可能会很有用，比如在几十份信息表上测试不同的提示，看看在多份信息表上的平均或最差情况的性能如何。但通常来说，只有当应用程序更加成熟时，你才会这样做，而且你必须有这些指标来推动最后几步的快速改进。

因此，请使用 Jupyter Notebook 的示例，尝试改变不同的提示，看看你会得到什么结果。

接下来，让我们继续看下一个视频，我们将讨论大型语言模型在软件应用中的一个非常普遍的用途，也就是总结文本的摘要任务。