<aside>
💡 Riley Goodside: 첫 프롬프트 엔지니어 및 최상위권 고수
요약: LLM Prompt Engineering & RLHF - History & Techniques
https://exchange.scale.com/home/videos/llm-prompt-engineering-and-rlhf-history-and-tec[…]KZsRlwjDc-Sn-j-4A&utm_content=249587803&utm_source=hs_email
녹화본: https://exchange.scale.com/home/videos/llm-prompt-engineering-and-rlhf-history-and-tec[…]KZsRlwjDc-Sn-j-4A&utm_content=249587803&utm_source=hs_email
</aside>
<aside>
💡 근본 논문들 컴파일
프롬프트 동향 파악
</aside>
History
- Prompt Engineering 형식은 LLM 발전과 함께 진화해 왔다. 역사를 알아야 기법을 이해한다
- 중요 이미지 [From Davinci → Davinci-003 & ChatGPT]
- 발전 개요
Technique
- Format Trick
- Specifying Tasks using code prompts
- “You are GPT-3” + External Interpreter (IPython)
Chain-of-Thought Prompting
- K-shot prompting with step by step rationals
- 한개의 예시에 대해 생각하는 방식을 보여주며, 다음 prompt에 비슷한 생각 논리를 적용
- “Let’s think step by step”
- 관련 논문
- 관련 슬라이드 - 이해를 위해 강추
- Achieving Self-Consistency & Consensus (LLM의 고질적인 문제 해결 방식)
Hardcore Example
- 목적: 배운 내용을 토대로 어려운 문제 적용 시키기