LLMs Get Lost In Multi-Turn Conversation

LLMs : conversational interfaces 실제로는 multiturn + underspecification evaluation 은 single turn + fully specificated setup 에서

해결방법

기존의 데이터셋에서 sharding + reveal shard

결과물로는 데이터셋 json 으로 공개해둠

ref https://arxiv.org/abs/2505.06120