연구에 따르면 효과적인 AI 프롬프트 작성은 공학적 접근이 아닌 협력적 소통이다

공학보다 의사소통 원칙

AI 상호작용에 대한 80건 이상의 실제 사용자 불만을 분석한 Reddit 연구에 따르면, 약 60%의 불만 사항은 사용자 의사소통 측면이 상당 부분 차지합니다. 이러한 문제에는 대상이나 목적에 대한 맥락이 없는 모호한 프롬프트, '좋은' 결과의 예시 부재, 불명확한 목표, 그리고 '더 좋게 만들어라'라고 말하면서 '더 좋음'의 의미를 구체화하지 않는 피드백 루프 등이 포함됩니다.

나머지 약 40%는 환각, 아첨, 성능 저하, 컨텍스트 윈도우 드리프트, 안전 과잉 필터링 등 진정한 모델 한계입니다. 수백만 건의 LLM 상호작용을 처리하는 AI 보안 기업 Lakera는 독립적으로 동일한 결론에 도달했습니다: "대부분의 프롬프트 실패는 모델 한계가 아닌 모호함에서 비롯됩니다."

의사소통 프레임워크

언어학, HCI, AI 분야의 연구자들은 인간 대화가 작동하게 만드는 원칙이 AI 프롬프팅이 작동하게 만드는 원칙과 동일하다는 사실을 발견했습니다. 1975년, 철학자 폴 그라이스는 협력적 의사소통의 네 가지 준칙을 제시했습니다:

• 양: 충분히 정보를 제공하라
• 질: 진실하라
• 관련성: 관련성을 유지하라
• 방식: 명확하라

2024년, IBM 연구원 Miehling 등은 AI 상호작용을 위해 두 가지 새로운 준칙으로 이 프레임워크를 확장했습니다:

• 선의: 유해한 콘텐츠를 생성하지 말라
• 투명성: 알지 못하는 것을 인정하라

모든 주요 AI 실패 모드는 이 여섯 가지 준칙 중 하나에 매핑됩니다. 환각은 질 준칙 위반을 나타냅니다. 지나치게 장황한 답변은 양 준칙 위반을 나타냅니다. 아첨은 선의와 투명성 준칙 위반을 나타냅니다.

이러한 의사소통 원칙을 이해하면 '나쁜 프롬프트를 제공했다'와 '이것은 진정한 모델 한계다'를 구분하는 데 도움이 되어, 개발자가 모호한 요청을 끝없이 재구성하는 대신 한계를 인식하고, 영향 범위를 줄이며, 이를 우회할 수 있게 합니다.