AI가 내 프롬프트를 흘려듣는 이유: 원리부터 다시 본 컨텍스트 엔지니어링 | 우아한형제들 기술블로그
LLM이 프롬프트를 제대로 따르지 않는 것은 프롬프트 문제가 아니라, 모델이 텍스트를 읽는 방식을 모르고 있었기 때문이다. 컨텍스트 윈도우와 어텐션 메커니즘을 이해하고 컨텍스트 엔지니어링으로 접근하면 일관된 결과를 얻을 수 있다. LLM은 순서대로 읽지 않고 관련도 기반으로 처리 어텐션이 모든 단어 간 관련도를 동시에 계산하므로, 위치 정보도 함께 반영됨…