Can LLMs Take Retrieved Information with a Grain of Salt?

Behzad Shayegh, Mohamed Osama Ahmed, Fred Tung, Leo Feng

arXiv:2605.06919 · 2026-05-11 공개 · arXiv · PDF

llm-evaluation retrieval-augmented llm-reliability context-certainty uncertainty-handling interaction-strategy prior-reminders certainty-recalibration

Abstract

Large language models have demonstrated impressive retrieval-augmented capabilities. However, a crucial area remains underexplored: their ability to appropriately adapt responses to the certainty of the retrieved information. It is a limitation with real consequences in high-stakes domains like medicine and finance. We evaluate eight LLMs on their context-certainty obedience, measuring how well they adjust responses to match expressed context certainty. Our analysis reveals systematic limitations: LLMs struggle to recall prior knowledge after observing an uncertain context, misinterpret expressed certainties, and overtrust complex contexts. To address these, we propose an interaction strategy combining prior reminders, certainty recalibration, and context simplification. This approach reduces obedience errors by 25% on average, without modifying model weights, demonstrating the efficacy of interaction design in enhancing LLM reliability. Our contributions include a principled evaluation metric, empirical insights into LLMs' uncertainty handling, and a portable strategy to improve context-certainty obedience across diverse LLMs.

한국어 요약

📋 한 줄 요약

**[LLM/RAG]** LLM이 검색된 정보의 확실성(certainty)을 적절히 반영해 응답을 조정하는 능력(context-certainty obedience)을 평가하고, 가중치 수정 없이 상호작용 설계만으로 25% 오류 감소를 달성한 연구.

🎯 핵심 기여도

💡 핵심 아이디어

RAG가 검색해 온 정보가 늘 확정적인 것은 아니며, 의료·금융 같은 고위험 도메인에서는 "불확실한 근거"를 "그만큼만 신뢰"하는 능력이 핵심이다. 저자들은 모델 파라미터를 건드리지 않고도, 프롬프트 단계의 상호작용 디자인만으로 이 능력을 유의미하게 끌어올릴 수 있음을 보인다.

🔬 기술적 접근법

📊 주요 결과

💭 의의 및 한계

**의의**: 모델 재학습 없이 RAG 시스템의 신뢰성을 끌어올릴 수 있는 비용 효율적 경로를 제시하고, 불확실성 인지를 RAG 평가 표준으로 끌어올릴 계기를 마련했다. **한계**: 평가는 명시적으로 확실성이 표시된 컨텍스트에 집중되어, 실제 검색 결과가 암묵적 또는 모호하게 확신을 드러내는 상황 일반화에는 추가 검증이 필요하다.

🚀 실용적 활용