방법론적 질에 대한 딜레마(methodological quality dilemma)란 질적으로 낮은 연구를 체계적인 리뷰에 포함시켜야 할지 배제시켜야 할지 결정하는 데 고민이 되는 상황에서 발생하는 딜레마이다.
어떤 연구이든 오류가 있기 마련이다. 질적으로 수준이 높은 연구만을 추구해도 문제가 되지만, 반대로 질적 수준이 낮은 연구를 추구하면 신뢰도가 떨어진다. 너무 엄격하게 질만을 추구하면 일반화를 제약할 가능성이 높아지고, 반대로 일반화 가능성만을 생각하면 신뢰도가 떨어질 수 있다. 그렇기 때문에 연구 질문의 균형을 적절히 유지해야 한다. 타당성이 높은 연구를 설계하는 데 초점을 맞추는 것이 좋다.