아마도 설문 조사 과정에서 가장 중요한 부분은 대중의 의견,경험 및 행동을 정확하게 측정하는 질문을 만드는 것입니다. 수집 된 정보가 모호하거나 편향된 질문의 불안정한 기반 위에 구축되면 정확한 무작위 샘플링이 낭비됩니다. 좋은 조치를 만드는 것은 좋은 질문을 작성하고 설문지를 형성하기 위해 조직하는 것을 모두 포함합니다.

설문 디자인은 한 번에 많은 세부 사항에주의를 필요로하는 다단계 프로세스입니다. 설문 조사 세부 사항의 다양한 각도에서 주제에 대해 질문 할 수 있기 때문에 설문지를 설계하는 것은 복잡하다,질문은 다른 방법으로 질문 할 수 있습니다,설문 조사의 이전 질문은 사람들이 나중에 질문에 응답하는 방법에 영향을 미칠 수 있습니다. 연구원은 또한 종종 시간이 지남에 따라 변화를 측정하는 데 관심이 있으므로 이전 설문 조사에서 의견이나 행동이 어떻게 측정되었는지주의를 기울여야합니다.

측량사는 사람들이 문제에 대해 어떻게 생각하는지 또는 질문을 이해하는지 더 잘 이해하기 위해 설문지 개발의 초기 단계에서 파일럿 테스트 또는 포커스 그룹을 수행 할 수 있습니다. 설문 조사를 미리 테스트하는 것은 설문지 디자인 프로세스에서 사람들이 전체 설문지와 특정 질문에 어떻게 반응하는지,특히 질문이 처음 소개 될 때 어떻게 반응하는지 평가하는 데 필수적인 단계입니다.

수년 동안 측량사들은 설문지 디자인을 예술로 접근했지만,지난 40 년 동안의 실질적인 연구는 좋은 설문지 제작에 많은 과학이 관련되어 있음을 보여주었습니다. 여기,우리는 함정 및 설문 조사 디자인의 모범 사례에 대해 설명합니다.

질문 개발

설문 조사 설문지 개발에는 몇 가지 단계가 있습니다. 첫 번째는 설문 조사에서 다루게 될 주제를 식별하는 것입니다. 퓨 리서치 센터 설문 조사의 경우,이것은 우리 나라와 세계에서 무슨 일이 일어나고 있는지,그리고 대중,정책 입안자 및 언론과 관련이 있는지에 대해 생각하는 것을 포함합니다. 우리는 또한 시간이 지남에 따라 다양한 문제에 대한 의견을 추적하므로 사람들의 의견이 변화하고 있는지 여부를 더 잘 이해하기 위해 정기적으로 이러한 추세를 업데이트 할 수 있습니다.

퓨 리서치 센터에서 설문지 개발은 직원이 설문지의 개발 과정에서 여러 번 초안을 논의하기 위해 만나는 협력적이고 반복적 인 프로세스입니다. 우리는 포커스 그룹,인지 인터뷰,사전 테스트(종종 온라인,옵트 인 샘플 사용)또는 이러한 접근 방식의 조합과 같은 질적 연구 방법을 통해 새로운 설문 조사 질문을 미리 테스트합니다. 연구원은 이 테스트에서 얻은 통찰력을 사용하여 생산 조사에서 질문하기 전에 질문을 구체화합니다.

시간 경과에 따른 변화 측정

많은 측량사는 사람들의 태도,의견 및 행동의 시간 경과에 따른 변화를 추적하려고합니다. 변화를 측정하기 위해,질문은 시간에 두 개 이상의 지점에서 묻는 메시지가 표시됩니다. 횡단면 설계는 여러 시점에서 동일한 모집단의 다른 사람들을 조사합니다. 이러한 패널은 시간이 지남에 따라 같은 사람을 조사합니다. 그러나 새로운 패널리스트가 추가되고 일부 이전 패널리스트가 탈락함에 따라 설문조사 패널의 사용자 집합이 시간이 지남에 따라 변경되는 것이 일반적입니다. 퓨 리서치 센터 설문 조사에서 질문의 대부분은 이전 여론 조사에서 요청 된. 다른 시점에서 동일한 질문을하면 일반 대중(또는 등록 된 유권자,남성 또는 흑인 미국인과 같은 대중의 부분 집합)의 전반적인 견해 변화 또는 우리가”데이터 추세”라고 부르는 것에 대해보고 할 수 있습니다.

시간 경과에 따른 변화를 측정할 때는 동일한 질문 표현을 사용하고 질문지에서 질문을 받는 위치에 민감하게 반응하여 질문을 이전에 질문했을 때와 비슷한 맥락을 유지하는 것이 중요합니다(자세한 내용은 질문 표현 및 질문 순서 참조). 우리의 모든 설문 조사 보고서에는 정확한 질문 표현 및 시퀀싱을 제공하는 상위 라인 설문지와 현재 설문 조사 및 이전 설문 조사 결과가 포함되어 있습니다.

이 센터는 실시간 전화 인터뷰를 통한 미국 설문 조사에서 온라인 패널(2014~2020 년경)으로 전환하여 일부 의견 추세를 복잡하게 만들었지 만 다른 의견은 그렇지 않았습니다. 민감한 주제(예:개인 재정 또는 종교 봉사 참석)에 대해 질문하거나 자원 봉사 답변을 이끌어 낸 의견 동향(예: 전화 설문 조사에서 온라인 설문 조사로 전환 할 때 전화를 통해 다른 추세보다 더 큰 차이를 보이는 경향이 있습니다. 이 센터는 방법론의 변화와 관련이있을 수있는 데이터 동향에 대한 변화에 대처하기위한 몇 가지 전략을 채택했습니다. 추세의 변화가 전화에서 온라인 측정으로 전환하는 데 기인한다고 제안하는 증거가있는 경우 센터 보고서는 독자가 혼란이나 잘못된 결론을 내릴 수있는 가능성을 표시합니다.

개방형 및 폐쇄형 질문

사람들이 질문에 대답하는 방식에 영향을 줄 수 있는 가장 중요한 결정 중 하나는 질문이 응답자가 자신의 말로 응답을 제공하는 개방형 질문인지 아니면 보기 목록에서 선택하도록 요청하는 폐쇄형 질문인지 여부입니다.

예를 들어,2008 년 대통령 선거 이후 실시 된 여론 조사에서 사람들은 두 가지 버전의 질문에 매우 다르게 반응했습니다.”대통령에게 투표 한 방법을 결정하는 데 가장 중요한 한 가지 문제는 무엇입니까? 하나는 폐쇄형이었고 다른 하나는 개방형이었다. 폐쇄형 버전에서는 응답자에게 5 가지 옵션이 제공되었으며 목록에없는 옵션을 자원 할 수있었습니다.

명시 적으로 응답으로 경제를 제공 할 때 응답자의 절반 이상(58%)이이 답변을 선택했으며 개방형 버전에 응답 한 사람들의 35%만이 경제에 자원했습니다. 또한 폐쇄 형 버전을 묻는 사람들 중 10 명 중 1 명(8%)이 읽은 5 명 이외의 응답을 제공했습니다. 대조적으로,개방형 버전을 묻는 사람들 중 43%는 폐쇄 형 버전의 질문에 나열되지 않은 응답을 제공했습니다. 다른 모든 문제는 개방형 버전보다 폐쇄 형 버전에서 명시 적으로 제공 될 때 적어도 약간 더 자주 선택되었습니다. (또한 참조”캠페인에 대한 높은 점수,오바마에 대한 높은 바”자세한 내용은.)

연구자들은 때로는 개방형 질문을 사용하여 가장 일반적인 답을 찾기 위해 파일럿 연구를 수행 할 것입니다. 그런 다음 가장 일반적인 응답을 답변 선택으로 포함하는 파일럿 연구를 기반으로 폐쇄형 질문을 개발합니다. 이런 식으로,질문은 대중이 생각하는 것을 더 잘 반영 할 수 있으며,특정 문제를 어떻게 보는지,또는 연구자가 알지 못했을 수도있는 특정 문제를 밝힐 수 있습니다.

폐쇄형 질문을 할 때 제공되는 옵션 선택,각 옵션 설명 방법,제공되는 응답 옵션 수 및 옵션을 읽는 순서는 모두 사람들의 응답 방식에 영향을 줄 수 있습니다. 범주가 정의되는 방법의 영향에 대한 한 가지 예는 2002 년 1 월에 실시 된 퓨 리서치 센터 설문 조사에서 찾을 수 있습니다. 표본의 절반이”부시 대통령이 국내 정책이나 외교 정책에 집중하는 것이 더 중요한지”라는 질문을 받았을 때 52%는 국내 정책을 선택했으며 34%만이 외교 정책을 말했다. “외교 정책”범주가 특정 측면,즉”테러와의 전쟁”으로 좁혀 졌을 때 훨씬 더 많은 사람들이 그것을 선택했으며 33%만이 국내 정책을 선택했고 52%는 테러와의 전쟁을 선택했습니다.

대부분의 상황에서 보기의 수는 특히 전화 설문 조사에서 상대적으로 적은 수(최대 4 개 또는 5 개)로 유지되어야합니다. 심리학 연구는 사람들이 한 번에 마음에 선택의 숫자보다 더 유지 힘든 시간을 가지고 있음을 나타냅니다. 질문이 응답자의 종교적 소속과 같은 객관적인 사실 및/또는 인구 통계에 대해 질문 할 때 더 많은 범주를 사용할 수 있습니다. 사실,그들은 포괄 성을 보장하도록 권장됩니다. 예를 들어,퓨 리서치 센터의 표준 종교 질문은 가장 일반적인 제휴(개신교와 가톨릭)로 시작,12 개 이상의 서로 다른 범주를 포함한다. 대부분의 응답자는 자기 관리 설문 조사에서 해당 목록 내에서 종교 그룹을 볼 것으로 예상 할 수 있기 때문에이 질문에 아무런 문제가 없습니다.

제공되는 응답 옵션의 수와 선택 외에도 응답 범주의 순서는 사람들이 폐쇄형 질문에 응답하는 방식에 영향을 줄 수 있습니다. 연구에 따르면 전화 설문 조사에서 응답자는 나중에 목록(“최근 효과”)에서 들었던 항목을 더 자주 선택하고 자체 관리 설문 조사에서는 목록 상단의 항목을 선택하는 경향이 있습니다(“우선 순위”효과).

폐쇄형 질문에 대한 응답에 대한 범주 순서가 미치는 영향에 대한 우려로 인해 퓨 리서치 센터의 설문 조사에서 많은 응답 옵션 세트는 각 응답자에 대해 동일한 순서로 옵션이 요청되지 않도록 무작위로 프로그래밍됩니다. 회전 또는 무작위 화는 목록의 질문이나 항목이 각 응답자에게 동일한 순서로 요청되지 않음을 의미합니다. 질문에 대한 답변은 때때로 그 앞에 오는 질문에 의해 영향을받습니다. 각 응답자에게 다른 순서로 질문을 제시함으로써 각 질문은 다른 모든 질문과 동일한 맥락에서 동일한 횟수(예:첫 번째,마지막 또는 그 사이의 위치)로 질문되도록합니다. 이것은 현재 질문에 대한 이전 질문의 잠재적 영향을 제거하지는 않지만,이 편향이 목록의 모든 질문이나 항목에 무작위로 분산되도록 보장합니다. 예를 들어,사람들의 투표에서 가장 중요한 이슈에 대해 위에서 논의한 예에서 질문의 폐쇄 형 버전의 다섯 가지 이슈의 순서는 무작위 화되어 모든 응답자의 목록에 어떤 이슈도 일찍 또는 늦게 나타나지 않았습니다. 응답 항목의 무작위화는 순서 효과를 제거하지는 않지만 이러한 유형의 편향이 무작위로 분산되도록 합니다.

서수 응답 카테고리가있는 질문–기본 순서(예:우수,양호,공정 만,불량 또는 매우 호의적인지,대부분 호의적인지,대부분 불리한 지,매우 불리한 지)가있는 질문은 일반적으로 범주의 순서가 응답자가 질문에 대답하는 데 도움이되는 중요한 정보를 전달하기 때문에 무작위로 지정되지 않습니다. 일반적으로 이러한 유형의 척도는 응답자가 연속체를 따라 응답을 쉽게 배치 할 수 있도록 순서대로 표시해야하지만 일부 응답자의 경우 순서를 되돌릴 수 있습니다. 예를 들어,퓨 리서치 센터의 낙태에 대한 질문 중 하나에서 샘플의 절반은 낙태가”모든 경우에 합법적인지,대부분의 경우 합법적인지,대부분의 경우 불법인지,모든 경우에 불법인지”여야하는지 묻는 반면,샘플의 나머지 절반은”모든 경우에 불법”으로 시작하여 반대 순서로 읽은 응답 범주와 동일한 질문을받습니다.”다시,순서를 반전하는 것은 최근 성 효과를 제거하지만 인구에 걸쳐 무작위로 배포하지 않습니다.

질문 문구

질문에서 단어와 구를 선택하는 것은 응답자에게 질문의 의미와 의도를 표현하고 모든 응답자가 동일한 방식으로 질문을 해석하는 데 중요합니다. 작은 말씨 차이조차도 사람들이 제공하는 답변에 실질적으로 영향을 줄 수 있습니다.

응답에 중대한 영향을 미친 문구 차이의 예는 2003 년 1 월 퓨 리서치 센터 설문 조사에서 나온 것입니다. “사담 후세인의 통치를 종식시키기 위해 이라크에서 군사 행동을 취하는 것을 선호하느냐 반대하느냐”는 질문을 받았을 때 68%는 군사 행동을 선호한다고 답했으며 25%는 군사 행동을 반대한다고 답했다. 그러나”미군이 수천 명의 사상자를 겪을 수도 있다고하더라도 사담 후세인의 통치를 종식시키기 위해 이라크에서 군사 행동을 취하는 것을 선호하거나 반대 할 것인가”라는 질문에 대한 응답은 극적으로 달랐으며 43%만이 군사 행동을 선호한다고 답했으며 48%는 반대했다. 미국의 소개 사상자는 문제의 맥락을 바꾸고 사람들이 이라크에서 군사 행동을 선호하는지 반대하는지에 영향을 미쳤습니다.

다양한 질문 방식의 영향과 응답자가 질문하는 내용을 해석하는 방식의 차이를 최소화하는 방법을 측정하기위한 상당한 양의 연구가있었습니다. 질문 문구와 관련된 문제는이 짧은 공간에서 적절하게 처리 할 수있는 것보다 더 많지만 다음은 고려해야 할 중요한 사항 중 일부입니다:

첫째,명확하고 구체적이며 각 응답자가 대답 할 수있는 질문을하는 것이 중요합니다. 질문이 개방형 인 경우 응답자가 자신의 말로 대답 할 수 있고 어떤 유형의 응답(문제 또는 문제,한 달,일 수 등)을 제공해야하는지 분명해야합니다.). 폐쇄형 질문에는 모든 합리적인 응답이 포함되어야 하며(예:옵션 목록이 완전함)응답 범주가 겹치지 않아야 합니다(예:응답 옵션은 상호 배타적이어야 함). 그 이상의,그것은 강제 선택 클로즈 엔드 질문을 사용하는 것이 가장 좋습니다 때 분별하는 것이 중요하다(종종 온라인 설문 조사에서 라디오 버튼으로 표시)대”선택-모두-그-적용”목록(또는 체크 박스). 2019 센터 연구에 따르면 강제 선택 질문은 특히 민감한 질문에 대해보다 정확한 응답을 산출하는 경향이 있습니다. 그 연구를 바탕으로,센터는 일반적으로 선택-모든-그-적용 질문을 사용하여 방지 할 수 있습니다.

한 번에 하나의 질문 만하는 것도 중요합니다. 응답자에게 하나 이상의 개념을 평가하도록 요청하는 질문(이중 질주 질문으로 알려짐)-“오바마 대통령이 국내외 정책을 다룰 때 얼마나 자신감을 갖고 있습니까?”-응답자가 대답하기가 어렵고 종종 해석하기 어려운 응답으로 이어집니다. 이 예에서는 국내 정책에 대한 질문과 외교 정책에 대한 두 가지 별도의 질문을하는 것이 더 효과적입니다.

일반적으로 간단하고 구체적인 언어를 사용하는 질문은 응답자가 더 쉽게 이해할 수 있습니다. 응답자가 질문을 해석하고 대답하는 것이 얼마나 쉬운 지 생각할 때 설문 조사 인구의 교육 수준을 고려하는 것이 특히 중요합니다. 이중 네거티브(예:게이 및 레즈비언이 합법적으로 결혼 할 수 없도록 허용하거나 반대합니까)또는 익숙하지 않은 약어 또는 전문 용어(예:북극 국립 야생 동물 피난처 대신 안위)는 응답자의 혼란을 초래할 수 있으므로 피해야합니다.

마찬가지로 특정 단어가 일부 응답자에게 편향되거나 잠재적으로 불쾌감을 줄 수 있는지 여부와 일부 단어가 유발할 수있는 감정적 반응을 고려하는 것이 중요합니다. 예를 들어,2005 년 퓨 리서치 센터 설문 조사에서 응답자의 51%는”의사가 말기 환자에게 자신의 삶을 끝낼 수있는 수단을 제공하는 것이 합법화”를 선호했지만 44%만이”의사가 말기 환자를 돕는 것이 합법화”를 선호한다고 답했습니다 자살.”질문의 두 버전이 같은 일에 대해 물어 있지만,응답자의 반응은 달랐다. 또 다른 예에서,응답자들은 더 일반적인”가난한 사람들에 대한 지원”과 반대로”복지”라는 단어를 사용하여 질문에 다르게 반응했습니다.”여러 실험에서”복지 확대”보다”가난한 사람들에 대한 지원”확대에 대한 대중의지지가 훨씬 더 많다는 것을 보여주었습니다.”

우리는 종종 질문의 두 가지 버전을 작성하고 설문 조사 샘플의 절반은 질문의 한 버전과 나머지 절반은 두 번째 버전을 요청합니다. 따라서 우리는 두 가지 형태의 설문지를 가지고 있다고 말합니다. 응답자는 두 양식 중 하나를 받기 위해 무작위로 할당되므로 두 응답자 그룹이 본질적으로 동일하다고 가정 할 수 있습니다. 두 가지 버전이 사용되는 질문에서 두 가지 형태 사이의 답변에서 중요한 차이는 그 차이가 우리가 두 가지 버전을 표현한 방식의 결과라는 것을 말해줍니다.

설문 조사 질문에 사용되는 가장 일반적인 형식 중 하나는”동의-동의하지 않음”형식입니다. 이 유형의 질문에서 응답자는 특정 진술에 동의하는지 또는 동의하지 않는지 묻습니다. 연구에 따르면 더 나은 교육을 받고 더 나은 정보를 얻고 교육을 덜 받고 정보를 얻지 못한 응답자는 그러한 진술에 동의하는 경향이 더 큽니다. 이것은 때때로”묵인 편견”이라고합니다(일부 응답자는 다른 응답자보다 주장을 묵인 할 가능성이 더 높기 때문에). 이 행동은 설문 조사가 자체 관리 될 때보 다 면접관이 존재할 때 더욱 두드러집니다. 더 나은 방법은 응답자에게 대체 문 중에서 선택을 제공하는 것입니다. 그 일상적으로 묻는 값 질문 중 하나와 퓨 리서치 센터 실험은 질문 형식이 만들 수있는 차이를 보여줍니다. 강제 선택 형식은 동의-동의하지 않는 형식과는 전반적으로 매우 다른 결과를 산출 할뿐만 아니라 다소 공식적인 교육을 받은 응답자 간의 답변 패턴도 매우 다른 경향이 있습니다.

설문지 개발의 또 다른 과제는”사회적 바람직 성 편향.”사람들은 받아 들여지고 좋아지기를 원하는 자연스러운 경향이 있으며,이로 인해 사람들은 민감한 주제를 다루는 질문에 부정확 한 답변을 제공 할 수 있습니다. 연구에 따르면 응답자들은 알코올 및 약물 사용,탈세 및 인종 편견을 과소 평가하는 것으로 나타났습니다. 그들은 또한 교회 출석,자선 기부금 및 선거에서 투표 할 가능성을 과장 할 수 있습니다. 연구자들은 이러한 주제에 대한 질문을 만드는 데이 잠재적 인 편견을 설명하려고 시도합니다. 예를 들어,퓨 리서치 센터 설문 조사는 과거의 투표 행동에 대해 질문 할 때,그것은 상황이 투표에서 응답자를 방지 할 수 있다는 점에 유의하는 것이 중요하다:”버락 오바마와 미트 롬니 사이의 2012 년 대통령 선거에서,일이 투표에서 당신을 유지 올 않았다,또는 당신은 투표 일이 있었나요?”응답 옵션을 선택하면 사람들이 더 쉽게 정직 할 수 있습니다. 예를 들어,교회 출석에 관한 질문에는 자주 출석을 나타내는 여섯 가지 응답 옵션 중 세 가지가 포함될 수 있습니다. 연구에 따르면 응답자가 설문 조사를 직접 완료 할 때보 다 면접관이 존재할 때(예:전화 및 대면 설문 조사)사회적 바람직 성 편향이 더 클 수 있습니다(예:종이 및 웹 설문 조사).

마지막으로,질문 문구의 약간의 수정은 응답에 영향을 미칠 수 있기 때문에 결과를 이전 설문 조사의 결과와 비교하려는 의도가 있을 때 동일한 질문 문구를 사용해야 합니다. 마찬가지로,질문 문구와 응답은 응답자를 조사하는 데 사용되는 모드에 따라 달라질 수 있기 때문에 다른 설문 조사 모드를 사용하여 시간 경과에 따른 의견 변화를 평가하는 경우 연구원은 추세 측정에 미치는 영향을 신중하게 평가해야합니다.

질문 순서

설문조사 질문이 개발되면 설문지에서 어떻게 정렬되는지에 특히 주의를 기울여야 합니다. 측량사는 설문지의 초기 질문이 응답자가 후속 질문에 대답하는 방법에 의도하지 않은 영향을 미칠 수있는 방법에 세심한주의를 기울여야합니다. 연구자들은 질문을하는 순서는 사람들이 반응하는 방법에 영향을 미칠 수 있음을 보여 주었다;이전 질문은 실수로(이러한 효과는”주문 효과”라고 함)다음에 질문에 대한 컨텍스트를 제공 할 수 있습니다.

개방형 질문에 대한 응답에서 한 종류의 주문 효과를 볼 수 있습니다. 퓨 리서치 센터 설문 조사는 일반적으로 국가 문제,지도자에 대한 의견 및 설문 시작 부분 근처의 유사한 주제에 대한 개방형 질문을합니다. 주제와 관련된 폐쇄형 질문이 서술형 질문 앞에 배치되는 경우 응답자는 서술형 질문에 응답할 때 이러한 이전 질문에서 제기된 개념 또는 고려 사항을 언급할 가능성이 훨씬 높습니다.

폐쇄형 의견 질문의 경우,두 가지 주요 유형의 순서 효과가 있습니다:대비 효과(순서가 응답의 차이를 더 많이 발생)와 동화 효과(순서의 결과로 응답이 더 유사 함).

대조 효과의 예는 미국에서 동성 결혼이 합법화되기 12 년 전인 2003 년 10 월에 실시 된 퓨 리서치 센터 설문 조사에서 볼 수 있습니다. 그 여론 조사에 따르면 사람들은 게이와 레즈비언이 결혼 할 수 있도록 허용했는지 또는 반대했는지에 대해 질문했을 때 게이와 레즈비언이 결혼 한 부부와 동일한 권리를 부여하는 법적 계약을 체결 할 가능성이 더 높다는 것을 발견했습니다(45%는 결혼 질문 후에 법적 계약을 선호했지만 37%는 동성 결혼에 관한 질문의 직전 문맥없이 법적 계약을 선호했습니다). 한편 동성 결혼에 관한 질문에 대한 답변은 법적 계약 질문 전이나 후에 그 배치에 크게 영향을받지 않았습니다.

2008 년 12 월 퓨 리서치 센터 설문 조사에 포함 된 또 다른 실험은 대비 효과 결과. 사람들이”모두 모두,당신은 만족 또는 불만족 방식으로 것 들이이 나라에서 오늘가?”질문을 받은 직후”당신은 조지 부시가 대통령으로서 자신의 일을 처리하는 방식을 승인하거나 반대합니까?”; 88%는 불만족 스러웠다 고 답했으며,이전 질문의 맥락이없는 78%에 불과했습니다.

대통령 승인에 대한 응답은 국가적 만족도가 이전이나 이후에 요청되었는지 여부에 관계없이 상대적으로 변하지 않았습니다. 비슷한 발견은 2004 년 12 월에 만족도와 대통령 승인이 모두 훨씬 높았을 때 발생했습니다(부시 승인이 먼저 요청되었을 때 57%가 불만족 스러웠고 일반 만족도가 먼저 요청되었을 때 51%).

몇몇 연구는 또한 더 일반적인 질문(예:,전반적인 행복에 대해 묻기 전에 결혼 생활에 대한 행복에 대해 묻기)대비 효과가 발생할 수 있습니다. 일부 예외가 발견되었지만 일반 평가에서 더 구체적인 질문을 제외함으로써 중복성을 피하는 경향이 있습니다.

동화 효과는 두 질문에 대한 응답이 설문지에 배치 되었기 때문에 더 일관성이 있거나 더 가까울 때 발생합니다. 우리는 2008 년 11 월에 실시 된 퓨 리서치 센터 설문 조사에서 공화당 지도자들이 오바마와 함께 일해야하는지 아니면 중요한 문제에 대해 그에게 일어 서야하는지,그리고 민주당 지도자들이 공화당 지도자들과 함께 일해야하는지 아니면 중요한 문제에 대해 그들에게 일어 서야 하는지를 물었을 때 동화 효과의 예를 발견했습니다. 사람들은 공화당 지도자들이 공화당 지도자들과 함께 일할 때 민주당 지도자들이 무엇을해야하는지 묻는 질문(81%대 66%)이 선행되었을 때 공화당 지도자들이 오바마와 협력해야한다고 말할 가능성이 더 높았다. 그러나 사람들이 오바마와 함께 일하는 공화당 지도자들에 대해 처음 질문을 받았을 때 민주당 지도자들이 공화당 지도자들과 협력해야한다고 말한 사람은 적었다(71%대 82%).

묻는 주문 질문은 시간이 지남에 따라 추세를 추적 할 때 특히 중요합니다. 따라서 질문이 제기될 때마다 문맥이 비슷하도록 주의를 기울여야 합니다. 질문의 컨텍스트를 수정하면 시간 경과에 따른 관찰 된 변경 사항에 의문을 제기 할 수 있습니다(자세한 내용은 시간 경과에 따른 변화 측정 참조).

대화와 같은 설문지는 주제별로 그룹화되어 논리적 순서로 전개되어야 합니다. 간단한 질문으로 설문조사를 시작하는 것이 종종 도움이 됩니다. 설문 조사 전반에 걸쳐 설문 조사를 흥미롭게 유지하고 응답자에게 여러 가지 어려운 질문을 한 후에 바로 부담을주지 않도록 노력해야합니다. 소득,교육 또는 연령과 같은 인구 통계 학적 질문은 설문지의 특정 섹션을 통해 설문 조사 또는 라우팅 응답자에 대한 자격을 결정하는 데 필요한 경우가 아니면 설문 조사 시작 부분에 질문해서는 안됩니다. 그렇다하더라도,그것은 더 재미 있고 매력적인 질문 등의 항목 앞에 가장 좋습니다. 인구 통계 학적 질문은 일반적으로 각 설문 조사가 아닌 일년에 한 번만 요청해야한다는 것입니다.