프롬프트 A/B를 제대로 비교하는 프롬프트
한 번씩 돌려서는 승자를 정하지 않습니다. 쉬운 입력에서는 둘이 같다는 것도 짚습니다.
| 분류 | AI 사용법 › 프롬프트 작성 |
|---|---|
| 태그 | 분석검토표 |
I have two versions of a prompt. **Work out which is better and why.** 1. **Diff them.** ***List every difference, including ones that look cosmetic*** — **word order, emphasis, where a rule sits** 2. **Per difference, predict what it changes.** ***Say which ones should change nothing*** — *those are the ones to cut from whichever version wins* 3. **What to test them on** — ***the inputs where they would differ, not typical inputs.* **Two prompts agree on easy cases** 4. **What "better" means here** — ***state the judging criterion before looking at outputs.* **Otherwise I will pick the one that reads nicer** **Then, given the outputs I pasted:** - **Where they actually differed**, and ***which difference in the prompt caused it*** - ***Where the difference is noise*** — **one run each proves nothing. Say how many runs it would take to be sure** - **Whether a third version combining both would be better**, and what it would drop ⚠️ ***Do not declare a winner from a single run each.*** **Say what the evidence supports and what it does not.**
붙여 넣으면 맨 아래에 채울 칸(A안 · B안 · 각각의 결과)이 나옵니다
어떤 프롬프트인가
프롬프트 두 안을 비교할 때 흔한 실수는 보통 입력으로 한 번씩 돌려보는 것이다. 쉬운 입력에서는 두 안이 같은 답을 내고, 한 번씩으로는 편차와 차이를 구분할 수 없다. 이 프롬프트는 차이가 드러날 입력을 먼저 설계하고 판정 기준을 출력 보기 전에 정하며, 단일 실행으로 승자를 선언하지 않는다.
같은 분류의 프롬프트
| 4종 프롬프트 최적화 프롬프트 | |
| AI 프롬프트 최적화 프롬프트 | |
| 적응형 사고 프레임워크 프롬프트 | |
| 멀티에이전트 조직 프롬프트 | |
| AI 입문 코칭 프롬프트 |