효과적인 온라인 설문 조사방법

1. 설문조사의 개념 및 필요성

설문지는 연구조사과정에서 조사 목적에 맞는 유용한 자료를 수집하는 수단이 되며, 얻어진 자료를 이용하여 결론을 도출하는 중요한 부분입니다. 설문지를 개발할 때는 조사 목적과 대상을 명확히 정의할 필요가 있습니다. 필요한 정보의 종류와 측정방법, 분석의 내용과 방법까지 고려하여 설문지를 작성하여야 용이하고 빠르게 결론을 유도할 수 있습니다.

조사연구에서 자료를 수집하는 방법은 다양합니다. 면접법이나 관찰법, 실험법 등의 많은 방법이 있지만 그 중에서 가장 효율적인 것은 설문지 조사법이라 할 수 있습니다. 다른 방법에 비해 비용 효과성이 높고, 출처의 무기명성을 보장하며, 수집된 자료는 정확성이 높으며, 결과 분석이 용이하기 때문입니다. 또한 개인용 PC의 보급과 인터넷 사용자의 급증으로 인해 온라인을 이용한 설문지 조사가 증가하고 있습니다. 온라인 설문 조사는 저렴한 조사비, 특정표본선정, 응답의 적극성, 조사의 다양성, 멀티미디어 기술 활용으로 인한 설문효과 증대 등의 많은 장점을 지니고 있기 때문에 어떻게 활용하느냐에 따라 그 효용성은 더욱 높아질 것입니다.

2. 온라인 설문의 특성

온라인 조사란 기존의 오프라인에서 벌였던 조사를 온라인 환경 하에서 응답자가 웹 브라우저, 전자우편, 전자설문 포럼 등을 통하여 응답하게 하고, 그 내용이 조사기관의 서버 컴퓨터에 전달되어 체계적으로 기록되도록 하는 방식을 말합니다.

기존의 조사가 조사 설계 및 질문지 작성, 면접원 등을 통한 실사, 분석 및 보고서 작성으로 이루어져 있다면, 온라인 조사는 기존의 이와 같은 단계에서 실사부분을 온라인을 통해 수행하는 것이 가장 큰 특징이라고 할 수 있습니다.

인터넷을 통해 설문을 유도하여 응답을 받는다는 것은 매우 큰 장점이라고 할 수 있습니다. 기존 오프라인 조사의 샘플 수에 대한 제약에서 벗어 날 수 있으며, 매우 저렴한 비용으로 실사를 할 수 있고 기간 또한 매우 단축될 수 있기 때문입니다.

온라인 조사의 장점에도 불구하고 면접원이 직접 조사하는 설문에 비해 응답자의 응답 성실도나 질문에 대한 이해도 등에서 정확한 조사가 이루어지기 힘들 수 있습니다. 하지만 온라인이라는 채널이 가진 가장 큰 장점을 최대한 활용하고 그 제약조건을 최소화한다면, 계속 변화하는 개인들의 성향을 즉시 파악할 수 있으므로 온라인 조사의 장점을 십분 활용할 수 있습니다.

가. 온라인 설문조사의 특성

1) 조사 실행적 차원 관련

① 신속 - 자료의 수집이 신속하며 동시에 자료의 처리도 신속(데이터 입력 없이 통계처리 단계로 바로 진입할 수 있습니다).

② 비교적 높은 비용 효율성

③ 인터넷 조사 참여자에 대한 DB 구축이 가능. 장기적 관계 성립 가능. 그러나 응답자의 사생활 보호 차원에서 조심스런 접근 필요.

2) 질문지 작성 요인과 관련

① 유연성(flexibility) : 설문 설계상에 문제가 발생하였을 때, 즉각적인 수정․보완 가능

② 시각적 자료의 활용 우수 : 그림, 사진, 더 나아가서 동영상 자료의 제시 가능. 응답자의 흥미 유발

나. 온라인 설문조사의 유형

1) 회원조사

사전에 형성되어 있는 사용자들의 풀이나 가입자 데이터베이스를 표집 틀로 사용하는 것입니다. 이 경우 회원 DB의 포괄성과 충실성이 조사의 성패를 좌우합니다.

2) 방문자조사

온라인상의 특정한 사이트나 온라인 서비스 메뉴에 질문지를 공개하거나 질문지에 대한 링크를 만든 후, 거기에 들어온 사용자들이 자발적으로 조사에 참여하게 하는 방법입니다. 방문자 조사는 익명성이 충분히 보장되므로 민감한 질문을 조사하기에 용이하지만, 중복응답자를 선별하기 어렵다는 문제를 안고 있습니다. 방문자조사는 사전조사나 간이조사에 적합한 방식이라고 할 수 있습니다.

3) 전자우편조사

질문지를 전자우편의 형태로 작성하여 다수의 사용자들에게 전송하고, 응답자들이 완성한 질문지를 다시 전자우편으로 회신하게 하는 것입니다. 전자우편은 일반우편에 비해 신속하게 오갈 수 있으며, 다수의 수신자에게 동시에 질문지를 전송할 수 있다는 장점을 지니고 있습니다. 그러나 속도나 내용의 공식성, 그리고 문제발생시 그 책임소재라는 측면에서는 전화와 우편의 중간 정도이며, 보안성이 낮다는 한계를 지니고 있습니다.

4) 전자설문조사

온라인 서비스에서 실시되는 사회조사를 일반적으로 지칭하는 것으로, 회원조사와 방문자 조사의 중간적인 성격을 띠고 있습니다. 가입자의 DB를 표집틀로 사용한다는 점에서는 회원조사와 유사하지만, DB의 성격이 아주 다릅니다. 즉, 인터넷 상에서의 회원 DB는 인터넷 사용자의 일부만을 담고 있는 반면에, 가입자 DB는 특정 온라인 서비스에 가입된 모든 사용자를 담고 있습니다. 따라서 가입자 DB에서 확률표집 방법을 사용한다면 대표성이 매우 높은 표본을 추출해 낼 수 있습니다.

3. 설문지 작성방법

아무리 훌륭한 전문가라도 한 번에 작성된 초안을 설문지로 확정하는 경우에는 모든 의도한 자료를 얻기가 쉽지 않을 것이므로, 각 단계별로 수시로 문제점을 파악하여 수정․보완해야 설문지 응답과정에서 오류를 최소화시킬 수 있습니다. 설문조사의 효과는 설문지의 질에 의해 결정된다고 할 수 있습니다. 따라서 좋은 설문지를 작성하는 요령을 알고, 설문지 작성을 위해 많은 시간과 노력을 들여야 됨을 잊어서는 안 됩니다.

효과적인 설문지를 작성하는 과정은 다음과 같습니다.

필요한 정보의 결정

↓

자료수집방법의 결정

↓

개별항목의 내용결정

↓

질문/척도 형태의 결정

↓

개별항목의 완성

↓

질문의 순서결정

↓

지시문과 표지 인사말 작성

↓

설문지의 초안완성

↓

설문지 작성을 위한 체크리스트 활용

↓

설문지의 완성

가. 필요한 정보의 결정

설문지를 작성하기 위해서는 먼저 연구문제를 해결하기 위해 가장 적절하고 유용한 정보의 종류를 결정해야 합니다. 연구자는 연구를 통해 특정 개념간의 상호관계를 파악하려고 합니다. 그러므로 설문지를 작성하기 위해서는 측정하려는 개념을 명확히 이해하고, 이러한 개념들을 어떻게 조직화하여 측정할 수 있는가에 대한 이해가 필요합니다. 필요한 정보를 결정하기 위해서는 우선 광범위한 정보와 상당히 폭넓은 리스트를 작성하여 연구목적에 맞는 구체적인 리스트를 선택하면 됩니다.

1) 설문지의 목적을 확인합니다.

우선 무엇을 설문지에 쓸 것인가를 생각하기 전에 왜 조사를 하는가를 생각해야 합니다. “무슨 정보를 얻고자 합니까?” 이미 발견한 것에서부터 지금 더 알고자 하는 것이 어떤 것인가에 대해 질문을 해 보아야 합니다.

2) 샘플을 결정합니다.

설문지의 목적이 결정되면 누구에게 설문지를 돌릴 것인지에 대해 결정해야 합니다. 즉, 대상 집단을 결정해야 합니다. 예를 들면, 설문의 대상이 고객인지, 학생인지, 강사인지를 결정해야 합니다. 또한 대상 집단 모두에게 보낼 것인가, 아니면 응답 가능성이 있다고 생각되는 사람들에게만 보낼 것인가도 결정해야 합니다. 물론 해당되는 모든 사람에게 보낸다면 가장 정확한 정보를 얻을 수 있겠지만 대상 집단이 너무 큰 경우에는 시간과 노력이 너무 많이 듭니다. 따라서 일반적으로 대상 집단을 대표하는 사람들의 샘플을 추출하게 됩니다. 샘플을 선정하는 경우에는 샘플의 크기는 어떠해야 하는지, 어떤 방법으로 샘플 대상을 선정할 것인지를 결정해야 합니다.

샘플의 크기는 대상 집단의 크기에 따라 달라집니다. 너무 적은 샘플의 수는 대상 집단을 대표한다고 할 수 없기 때문에 통계적으로 유의미한 결과를 얻기 위해서는 적절한 수준의 샘플의 크기를 고려해야 합니다. 대체로 대상 집단의 크기가 클수록 샘플의 비율은 작아집니다. 예를 들면, 설문의 대상이 되는 집단이 학생 1,000명이라면 최소한 280명 정도의 학생에게 설문지를 돌려야 합니다.

샘플을 선정하는 방법은 무작위 추출방법과 구조화된 추출방법이 사용될 수 있습니다. 무작위 추출은 어떠한 규칙 없이 무작위로 대상을 선출하는 방법으로 가장 이상적인 방법입니다. 하지만 현실적으로 완벽한 무작위 추출을 하기는 어려운 경우가 많습니다. 만약 무작위 추출로 인한 자료의 편중이 우려되는 경우에는 특정한 변인 즉, 단대별 학과별 또는 학년별로 고르게 설문 대상자의 수를 분배하는 구조화된 추출방법을 사용할 수도 있습니다.

3) 조사의 목적을 분명히 밝힙니다.

설문 조사지에 조사의 목적을 밝힐 때에는 애매하고 일반적인 표현 대신에 구체적인 말을 사용하도록 합니다. 예를 들면 “여러분의 일반적인 느낌을 얻기 위해서”보다는 “여러분이 사용하는 학습방법이 무엇인지를 알기 위해서”와 같은 표현을 쓰도록 합니다. 설문조사의 목적이 응답자에게 정확하게 알려졌을 때 응답자가 설문조사를 더 신뢰하게 되고, 더 정확하게 응답을 할 수 있을 것입니다.

4) 설문결과를 실제로 활용합니다.

설문 결과를 목적에 따라 활용하지 않는다면 응답자들은 설문지를 받아도 별로 응답하려고 들지 않을 것입니다. 설문에서 얻은 것을 실제로 반영한다는 신뢰감을 얻도록 합니다.

5) 응답하기 편하게 만듭니다.

설문지를 깨끗하고 보기 좋게 문항을 구성하고, 인쇄도 깔끔하게 하도록 합니다. 지저분하거나 너무 글씨가 작아서 읽기 힘든 설문지를 받는다면 응답자들은 설문지를 제대로 읽어보지도 않게 될 것입니다.

나. 자료수집방법의 결정

다음 단계는 자료수집방법을 결정하는 것입니다. 수집된 정보의 내용이나 양을 고려하여 우편에 의한 조사, 전화에 의한 조사, 대인면접 중 어떤 방법으로 자료를 수집할지를 결정해야 합니다. 조사수집방법의 선택에 따라 소요되는 비용과 시간, 조사의 형태가 좌우되므로 상황에 맞는 적절한 방법을 선택하여야 합니다. 그러므로 설문지를 작성하기 전에 어떤 방법으로 선택하느냐에 따라서 질문지를 다르게 작성하여야 합니다. 예를 들어 전화조사를 실시할 경우 시간의 제약 때문에 너무 길게 만들면 조사하기가 상당히 어렵고, 우편의 경우는 설문을 응답하는 동안에 커뮤니케이션이 이루어지지 않기 때문에 구체적인 진술이 필요합니다.

<표> 조사방법선택의 비교

성 격	대인면접	우 편	전 화
조사내용의 길이	좋음	보통	보통이나 부적절
복잡한 질문의 적절성	좋음	부적절	보통
과정상 편견의 최소화	부적절	좋음	보통
조사당 비용	고비용	저비용	저비용이나 보통
속도	적절	느림	빠름

자료 : Donald R. Lehmann, IRWIN, 1997, p.162

다. 개별항목의 내용결정

다음으로 조사자는 추상적 개념에 대한 개념적․조작적 정의를 토대로 응답자가 이해하기 쉬운 용어를 사용하였는지, 이 문항들이 조사문제의 해결에 꼭 필요한 문항인지, 응답자들이 각 질문에 대해 응답하여 줄 것인지 등을 검토하여야 할 것입니다.

1) 이 질문은 꼭 필요할 것입니까?

조사자는 조사하고자 하는 문제와 관련이 없다고 하더라도 가능한 한 많은 문제를 물어보려고 하는 경향이 있습니다. 그러나 응답자들은 설문의 양이 많으면 많을수록 협조 및 성실한 응답을 기대하기가 어려워 신뢰성이 저하될 염려가 있습니다. 또한 의사결정에 도움이 되지 않는 과다한 정보의 수집은 불필요한 시간과 비용을 초래할 것입니다. 따라서 조사자는 조사문제해결에 필요한 문항인지를 검토하여 불필요한 질문은 제외하는 것이 바람직할 것입니다.

2) 응답자가 필요한 정보를 알고 있습니까?

응답자가 과연 질문에 적절한 응답을 하기 위한 정보를 가지고 있는가의 문제입니다. 예를 들어 학생들이 A라는 강의를 평가하도록 요구할 경우 이 A라는 강의를 수강하지 않은 고객은 응답을 할 수가 없을 것입니다. 또한 “현재의 학교 신입생 경쟁률이 얼마인지를 아십니까?”라는 질문에 앞서 “현재의 신입생 경쟁률을 아십니까?”라는 질문을 물어본 후 알고 있는 응답자에 한에 신입생 경쟁률이 얼마인지를 물어 보아 자료를 처리하면, 이를 통해 측정상의 오류를 감소시킬 수 있습니다.

3) 응답자가 그 정보를 제공해 줄 수 있습니까?

응답자가 질문하고자 하는 정답을 알고 있는 경우라도 이를 모두 설문지에 기록하지 않는 경우가 종종 있습니다. 이는 응답을 즉시 할 수 없는 경우나 알면서도 대답을 하지 않는 경우가 있습니다. 예를 들어 “당신이 1년 동안 받은 학점은 몇 점입니까?”라는 질문에는 정확하게 몇 점인지는 모르지만 집에 가서 인터넷을 찾아보면 그 점수를 확인하여 대답을 할 수 있습니다. 그리고 정확한 대답을 알고도 대답을 회피하는 경우는 개인적인 인구통계학적 변수를 물어볼 경우입니다. 여자에게 당신의 나이나 몸무게가 얼마인지를 물어볼 경우는 응답을 거부하는 경우가 종종 있습니다. 이러한 내용의 질문은 대인면접보다는 우편이나 전화조사를 실시하면 응답자의 부담을 줄이는데 효과적입니다.

4) 한 번의 질문으로 충분합니까?

어떤 질문에는 두 가지 이상의 요소를 포함하기 때문에 응답을 해석하기가 어려워지는 경우가 있습니다. 예를 들면 “당신은 왜 A라는 강의를 수강합니까?”라는 질문에 대해 나타나는 두 가지의 응답을 생각해 봅시다.

첫째, 흥미 있을 것 같아서

둘째, 친구가 권해서

이때 첫 번째 응답은 수강하는 이유를 말하며, 두 번째 응답은 수강하게 된 계기를 말하는 것입니다. 그러므로 다음의 두 질문으로 나누어 하는 것이 타당할 것입니다.

첫째, A라는 강의를 수강하는 이유는 무엇입니까?

둘째, A라는 강의를 수강하게 된 계기는 무엇입니까?

라. 질문/척도 형태의 결정

1) 질문형태의 결정

① 개방형질문(밑에 문장과 같이 모두 줄 간격을 맞추어 주세요)

개방형질문(또는 자유응답형)은 응답자로 하여금 감정, 동기, 행동을 자유롭게 표현

하게 하는 질문방법입니다.

개방형질문은 다른 형태의 응답에 비해 응답자에게 자유롭게 응답하게 함으로써 의견을 존중하게 하는 느낌을 주게 합니다. 개방형 질문은 답안을 제한하지 않기 때문에 매우 다양한 응답을 얻을 수 있습니다. 그래서 새로운 아이디어나 어떤 요인간의 관계를 파악하고자 하는 탐색적 조사에 효과적입니다.

<개방형 질문의 예>

이 강의에 대한 소감을 자유롭게 기술하고,

가장 좋은 점과 개선할 점을 기술하십시오.

반면 개방형질문은 다음과 같은 단점을 가지고 있습니다. 다양한 응답을 받음으로써 자료처리를 위한 코딩이 어렵다는 점입니다. 코딩을 하기 위해서는

- 각 개방형질문에 대한 어떤 응답이 나왔는지를 확인하고

- 이들 응답내용을 항목으로 분류한 후

- 각 항목별로 일련의 항목번호를 부여하고

- 이 기준에 의하여 설문지의 응답내용을 수치화하는 과정을 거칩니다.

응답내용이 특정한 범주로 분류되지 않는 경우에는 분류가 어려워 자료의 많은 부분이 분석에서 제외될 수도 있습니다. 또한 수집된 자료를 처리하는 데 시간이 많이 소요됩니다.

둘째, 응답자들이 질문에 대해 즉각적으로 생각이 나지 않는 경우에 응답을 하지 않거나 모르겠다 등 성실한 응답을 기대하기가 어렵습니다.

② 폐쇄형질문

폐쇄형질문이란 응답내용을 범주화하여 보기로 제공해 주고 응답자가 그 중에서 한 가지를 선택하게 하는 유형을 말합니다. 흔히 말하는 객관식 문제 같은 것입니다. 폐쇄형 질문의 가장 큰 장점은 누구나 쉽게 응답할 수 있으므로 응답자의 부담과 무응답을 줄일 수 있다는 점입니다. 특히 소득이나 사생활 등 대답하기 민감한 문제에 쉽게 응답할 수 있도록 해 줍니다.

<폐쇄형 질문의 예>

강의내용이 전공이나 생활에 도움이 되었습니까?

___1. 매우 그렇다

___2. 그렇다

___3. 보통이다

___4. 그렇지 않다

___5. 매우 그렇지 않다

폐쇄형 질문은 선택의 보기를 제시함으로써 질문의 의미를 보다 분명하게 전달할 수 있습니다. 응답이 기계적으로 이루어지므로 면접시간을 줄일 수 있으며, 전체적으로 경비도 절약됩니다. 그리고 자료처리 과정에서 응답내용을 부호화하기 쉬우며, 선택지를 척도화하여 만들어 두면 양적으로 분석하거나 결과를 비교하기도 용이합니다.

폐쇄형 질문의 가장 큰 단점은 응답자가 질문을 진지하게 생각하지 않고 적당히 아무것에나 응답할 수 있다는 것입니다. 또한 응답내용을 조사자가 미리 인위적으로 범주화함으로써, 응답자들의 다양한 생각이나 느낌을 표출할 수 없도록 합니다.

경우에 따라서는 응답자가 전혀 생각하지 않았던 것을 선택하게 할 수 있습니다. 그리고 응답범주가 너무 많을 때는 응답을 용이하게 하기보다 오히려 혼란을 줄 수도 있습니다. 요컨대, 폐쇄형 질문은 응답자의 자발적인 자기표현 기회를 제약함으로써 얻을 수 있는 정보의 풍부함을 제한하게 됩니다.

③ 다지선다형

다지선다형은 응답자로 하여금 주어진 항목내용 중 하나 또는 그 이상을 선택하도록 하는 방법입니다. 그러므로 연구자가 가능한 항목들을 사전에 결정하여 응답자에게 제시해 주어야 합니다.

다지선다형은 자료수집 후 자료처리가 용이하며, 응답자에게 응답할 내용을 제공함으로써 응답을 얻어내기가 아주 용이합니다. 그러나 다지선다형으로 만드는 경우에는 응답의 항목을 상호배타적이고 모든 응답을 포괄할 수 있는 조건을 가지고 있어야 합니다. 이 과정에서 모든 가능한 응답을 파악하기가 어렵습니다. 또한 응답자가 원하는 응답이 없는 경우도 생길 수 있습니다.

④ 양자택일형 질문

양자택일형의 질문은 단지 두 가지의 선택만을 제시해 주고 이 중에 하나를 선택하게 하는 방법입니다. 예컨대, “예 - 아니오”, “한다 - 안 한다”, “동의한다 - 반대한다”등과 같이 두 가지 안만을 제시해 주는 경우입니다. 대개의 경우에 있어서는 이러한 대체 안에 “모르겠다”라는 항목을 추가하여 응답자들에게 선택의 여지를 조금 넓혀주기도 합니다.

양자택일형의 장점은 ⓐ신속하게 면접할 수 있으며 응답을 처리하기 쉽습니다. ⓑ편집과 집계작업이 간단합니다. ⓒ조사자에 의한 영향을 배제할 수 있습니다. ⓓ응답자가 대답하기가 쉽습니다. 그러나 양자택일형의 응답은 다지선다형의 질문보다 많은 문제점을 갖게 되는데, 두 개의 극단적인 대체안을 제시해 주고 이중 하나만을 선택하게 함으로써 중간정도(보류층)의 의견을 가지고 있는 사람도 극단적인 결론이 유도될 수 있다는 점입니다.

이러한 질문의 형태를 결정하는 데 있어서 응답자의 교육수준, 주제의 성격, 자기가 의도하는 분석과 해석의 종류 등을 고려해서 결정해야 할 것이며, 경우에 따라서 여러 가지 형태를 적절히 혼합하는 것도 좋을 것입니다.

2) 척도 형태의 결정

폐쇄형의 질문에 사용되는 자료의 척도에는 명명 척도, 서열 척도, 등간 척도의 세 가지 유형이 있습니다. 자료의 형태는 자료 분석의 유형과 자료 분석 결과의 해석에 영향을 미칩니다.

① 명명 척도

가장 초보적인 단계의 척도로 이름이나 성별, 학과명 등이 여기에 속합니다. 명명 척도는 말 그대로 이름을 붙이기 위한 척도로, 범주 간에 어떤 순서나 간격이 없는 척도를 말합니다.

<명명척도의 예>

1. 성별?  남___  여___

2. 학년?  1학년___  2학년___  3학년___  4학년____

② 서열 척도

서열 척도는 범주 간에 순서를 매길 수 있는 척도를 말합니다. 하지만 범주 간에 똑같은 절대적인 간격이 있는 것은 아닙니다. 예를 들면 중요도에 따라 순서를 매기거나 좋아하는 정도를 표시하게 하는 것들은 서열척도가 됩니다. 이들 척도는 순서가 있긴 하지만 첫 번째와 두 번째의 간격에 절대적인 점수를 부여할 수는 없습니다.

<서열척도의 예>

전체적인 교육과정에 만족하십니까?

___ 매우 그렇다

___ 그렇다

___ 보통이다

___ 안 그렇다

___ 매우 안 그렇다

③ 등간 척도

등간 척도는 범주 간의 차이가 균등하며, 예측이 가능한 척도를 말합니다. 등간 척도는 그 간격이 동등하기 때문에 2배, 3배 등의 개념을 사용할 수 있습니다. 예를 들면, 개인의 경제적 수준이나 교육 수준, 경력, 나이 등이 여기에 속합니다.

<등간 척도의 예>

당신의 나이는 다음 중 어디에 해당합니까?

① 10세 이상 ~ 20세 이하

② 21세 이상 ~ 30세 이하

③ 31세 이상 ~ 40세 이하

이와 같은 척도를 사용할 때 고려해야 할 점은 사용되는 척도에 일관성이 있어야 한다는 것입니다. 어떤 척도를 사용하든 한 번 사용한 척도의 형식을 중간에 바꾸지 않는 것이 바람직합니다. 척도의 형식이 다양해지면 응답자들이 혼란을 겪음으로써 정확한 응답을 하는 데 방해가 됩니다.

마. 개별항목의 완성

조사자는 각 질문 및 응답에 사용되는 용어를 결정하는 과정에서 다음과 같은 내용들을 고려해야 합니다.

1) 간단명료한 단어를 사용합니다.

설문지를 작성하는 과정에서 빈번히 발생하는 실수 중의 하나는 모든 응답자들이 자신과

지식수준이 동일하다고 가정하는 점입니다. 학교 교육에 대한 실태를 알아보기 위해 신입생을 대상으로 조사하는 경우에 수강신청, 복수전공, 부전공 등의 의미를 정확히 모른다는 점을 고려하여 이에 대한 상세한 기술이 필요할 것입니다.

2) 다지선다형의 질문에 대해서는 가능한 한 모든 응답을 제시해 주어야 합니다.

이는 응답에 있어서 포괄적이어야 한다는 것으로 응답자들이 생각할 수 있는 모든 응답을

제시해 주어야 합니다.

* 이번 학기 A라는 강의에서 어떤 점수를 받기를 원합니까?

① A  ② B  ③ C  ④ D  ⑤ F

3) 응답항목들 간의 내용이 중복되어서는 안 됩니다.

이는 각 항목들이 상호배타적이어야 한다는 의미로 한 응답자가 반드시 하나를 선택하도

록 한다는 것입니다. 즉, 응답 항목들 간의 내용이나 범위가 중복되어서는 안 됩니다.

* 당신은 본 주제에 관하여 학습하는 것이 흥미롭다고 느꼈습니까?

___ 매우 흥미롭다

___ 다소 흥미롭다

___ 그저 그렇다

___ 다소 흥미롭지 않다

___ 매우 흥미롭지 않다

이 경우 응답자는 ‘다소’, ‘그저’를 정확히 구분하기가 어렵습니다. 따라서 응답자간에도 각자의 느낌 정도에 따라 선택항목이 달라질 수도 있습니다.

4) 한 질문에서 두 가지 내용을 질문하지 말아야 합니다.

질문을 물어볼 때에는 응답을 얻고자 하는 속성을 하나만 물어 보아야 합니다.

* 이 강의는 해당분야에 대한 개념과 실무능력을 이해하는데 도움이 되었습니까?

① 매우 그렇다  ② 그렇다  ③ 보통이다  ④ 안 그렇다  ⑤ 매우 안 그렇다

위의 질문에서 강의의 해당분야에 대한 속성 중 개념과 실무능력 두 가지의 제품 속성을 동시에 물어보고 있습니다. 만일 학습자가 개념은 이해하고 실무능력은 이해하지 못한 경우에 학습자는 어떻게 응답하여야 합니까? 그러므로 하나의 질문에 하나의 내용만을 질문하여야 합니다.

5) 조사자 임의로 응답자에 대한 가정을 해서는 안 됩니다.

이는 조사자들이 질문을 제시할 때 질문 내용 중에 무의식적인 가정을 하여 의견을 유도하는 것입니다.

* 만일 ***가 총학생회장이 되면 어떤 일을 최우선으로 해야 한다고 생각하십니까?

① 단과대 행사참여 ② 강의실환경 개선 ③ 타 단과대와의 교류 ④ 교육정보제공

이 질문에서 ***후보를 지지할 생각이 없고 그 후보가 학생회장이 되리라고 생각하지 않으면 질문에 대한 응답을 하지 않을 수도 있습니다.

6) 유도하는 질문을 하지 말아야 합니다.

예를 들어 수업에 교수매체를 사용하기 위해서 다음과 같은 질문을 하였다고 합시다.

* 최근 교수매체는 수업에 있어서 학습내용을 좀 더 효과적으로 나타난다고 알려져 있습니다. 당신은 수업에서 교수매체를 사용하는데 있어 어떻게 생각하십니까?

① 매우 필요하다 ② 필요하다 ③ 보통이다 ④ 필요없다  ⑤ 매우 필요없다

⑥ 기타______

이 경우에는 질문의 서두에 서술된 유도성 문구의 영향으로 응답자들을 유도하여 수업에 교수매체를 사용하여야 할 것으로 나타날 것입니다.

7) 너무 지나치게 자세한 응답을 요구해서는 안 됩니다.

조사자는 응답한 자료를 얻기 위해서 자세하게 질문하려 하지만 응답자는 매우 자세한 응답을 요구하는 질문에 대해서는 응답을 회피하는 경우가 많습니다.

* 지난 1년 동안 받은 학점은 얼마인지 다음과 같이 정확히 기록해 주십시오.

- A 학점 ( )개

- B 학점 ( )개

- C 학점 ( )개

- D 학점 ( )개

위의 질문에 대해 정확하게 대답을 제시할 수 있는 응답자들은 거의 없기 때문에 이러한 상세한 질문은 별로 의미가 없습니다.

8) 대답하기 곤란한 질문은 간접적으로 물어보십시오.

응답자체가 사회적으로 민감한 주제나 윤리․규범에 관한 질문에 대해서는 일반적으로 응답자로부터 정확한 응답을 얻어내기가 쉽지 않습니다. 즉, 다음과 같은 질문에 대해서 실제로 그러한 행동을 하고 있는 사람도 ‘예’라는 대신에 ‘아니오’라는 대답을 하게 됩니다. 따라서 민감하게 반응할 수 있는 주제에 대해서는 응답자 본인이 아니라 제 3자의 입장에서 간접적으로 질문을 함으로써 응답자 자신의 생각을 유도해 낼 수 있습니다.

* 귀하의 친구 한 명을 생각해 보세요. 당신은 그 친구가 학교 생활에 적응을 잘 하고  있다고 생각하십니까?

①예  ②아니오  ③잘 모르겠다

바. 질문의 순서결정

개별 질문항목이 완성되면 조사자는 질문항목의 순서를 결정하여야 합니다. 질문지에 포함될 다수의 항목들은 가급적 이론적인 관련성이 있어야 하며, 동시에 심리적으로 일관성이 있어서 질문지가 전체의 통일성을 이루도록 배열하는 것이 중요합니다.

이를 위해 다음과 같은 요소들을 고려하여야 합니다.

첫 번째 질문은 응답자의 부담감을 덜어 주기 위해 쉽고 재미있는 문항을 선정해야 합니다. 어려운 질문이 처음에 나오면 이 조사는 어려운 것으로 판단되어 이 조사를 거절할 것입니다.  응답자의 사고를 연구의 주제 쪽으로 유도할 수 있는 문항일수록 좋다고 할 수 있습니다.

일반적으로 인구통계학적 질문에 대해서는 마지막에 질문을 하는 것이 좋을 것입니다. 응답자들은 인구통계학적 변수인 직업, 소득, 나이, 학력 등에 민감하게 반응하므로 응답을 회피하는 경우가 많습니다. 그러므로 연구의 주제에 대한 사항은 앞부분으로 위치시키고 민감한 반응을 보이는 사항은 뒤쪽에서 질문하여 응답률을 높일 수 있을 것입니다.

질문항목간의 관계를 고려해야 합니다. 앞의 질문이 어떤 연상 작용을 일으켜 다음 질문에 영향을 미칠 수 있는 문항은 멀리 떨어뜨려야 합니다. 또한 질문의 주제가 바뀌는 경우는 설문지의 장을 달리하여야 하고, 어떤 내용의 질문이라는 것을 설명하고 시작하는 것이 좋습니다.

응답자의 응답내용에 따라 다음 질문을 대답하지 않고 넘어가는 경우, 어떤 질문으로 가는지를 명확히 표시해야 합니다. 그렇지 않으면 질문에 혼돈을 가져올 수 있습니다.

* 당신은 A라는 강의를 수강 하셨습니까?

예 - 3번으로

아니오 - 다음문항으로

일반적으로 질문은 주어진 조사 주제에 대한 개방형 질문에서 폐쇄형 질문으로, 전반적 질문에서 구체적이거나 특수한 질문으로 옮겨가는 것이 좋습니다.

사. 지시문과 표지 인사말을 작성합니다.

1) 지시문

응답자에게 적절한 질문을 작성했으면, 응답자들이 질문에 어떻게 응답해야 하는지 지시문을 작성합니다. 지시문은 반복적이지 않고, 알기 쉽게 간략하게 작성해야 하며, 필요한 경우 예를 들어줄 수도 있습니다. 지시문은 대상 집단에 적합해야 하고, 질문 작성자가 알고자 하는 것이 무엇인지를 분명하게 말해주어야 합니다.

<지시문의 예>

아래 문항은 A라는 강의에 대한 귀하의 생각을 알아보기 위한 것입니다.

귀하가 동의하는 정도에 따라 1점에서 5점까지 점수 중 하나에 0 을 표시해 주십시오.

* 본 교과에 요구되는 학습량은 적절합니까?

그렇다                       그렇지 않다

|      |      |      |       |

1      2      3      4       5

2) 표지 인사말

표지 인사말은 설문지의 맨 앞에 제시되는 것으로 일반적으로 다음과 같은 내용이 포함될 수 있습니다.

① 왜 질문지를 받게 됐는지에 대한 설명

“본 설문지는 미래의 첨단 강의환경 설계를 위해 현재 강의를 담당하시고 계시는 강사님들의 요구를 알아보기 위해 작성된 것입니다.”

② 질문지의 목적에 대한 분명한 진술

“강의를 하시면서 평소에 생각하시고 느끼신 점, 또는 불편했던 사항들에 대해 알아보고자 합니다.”

③ 왜 응답을 해야만 하는지에 대한 이유

“강사님들이 응답하신 결과는 첨단 강의 환경 설계에 중요한 정보가 될 것입니다.”

④ 언제 어떤 방식으로 답을 보내야 할지에 대한 정보

“저의 주소가 적힌 반송편지가 함께 동봉되어 있습니다. 이달 말까지 우편으로 보내주십시오.”

⑤ 응답 결과의 이용 목적

“응답하신 결과는 비밀이 보장되며, 본 연구 이외에는 절대 사용되지 않을 것이오니 솔직하게 답변해 주시기 바랍니다.”

⑥ 참여에 대한 감사 표시

“설문 조사에 응해주셔서 감사합니다.”

아. 질문지의 초안완성

질문지의 내용과 순서가 결정되면 조사자는 설문지의 외관을 결정함으로써 설문지의 초안을 결정합니다. 설문지의 초안을 결정하기 위하여 고려해야 할 사항은 다음과 같습니다.

첫째, 설문지의 크기를 결정해야 합니다. 일반적으로 설문지의 크기가 작을수록 응답자에게 부담을 주지 않고 응답을 받을 수 있는 반면 응답문항이 너무 많으면 시간이 너무 걸려서 응답을 꺼리는 경향이 있습니다. 따라서 적정한 설문지를 작성하고 크기도 너무 작게 하면 보기가 힘들므로 적당한 크기로 작성해야 합니다.

둘째, 설문지의 표지는 다음 내용을 포함하는 것이 좋습니다.

- 조사목적과 조사기관에 대한 간단한 설명

- 응답자에 대한 비밀보장

- 조사내용의 문의나 조사자의 연락처

셋째, 설문지 진행상에서 조사원이 주의할 사항이나 응답자에게 문항을 뛰어넘는 경우 등에는 강조하는 문자를 이용하는 것이 통제상 편리합니다. 주의할 사항에 대해 눈에 잘 띄도록 하여 중요한 사항을 잊어버리지 않도록 해야 합니다.

넷째, 실사작업과 편집 및 진행단계에서 설문지를 효과적으로 통제하기 위해서 일련번호를 붙여 두는 것이 편리합니다. 편집 작업 시 잘못된 항목이 발견되면 일련번호에 부여된 번호를 찾아서 쉽게 수정할 수 있습니다.

다섯째, 두 개 이상의 비슷하고 서로 밀접한 관련이 있는 질문을 하려고 할 때는 서로 분리시켜 질문함으로써 응답의 신뢰도를 측정하는 방법도 조사가 잘 이루어 졌는지를 판단하는 한 방법이기도 합니다.

자. 설문지 작성을 위한 체크리스트를 활용하세요.

지금까지 제시한 설문지 작성 요령을 체크리스트를 통해 활용할 수 있습니다. 체크리스트는 설문지를 만드는 데 필요한 요소를 빠뜨리지 않고 정확하게 설문지를 작성할 수 있도록 도와줍니다. 그리고 초안을 만든 후 체크리스트를 통해 다시 한 번 점검하여 수정 및 보완이 이루어지도록 합니다.

다음은 설문지 작성을 위한 체크리스트의 예입니다.

▶ 설문지 작성을 위한 체크리스트

1. 표지 인사말

□ 목적

□ 보낼 주소

□ 대상에 적절한 용어

□ 설문대상자로 뽑힌 이유

□ 응답해야 하는 이유

□ 언제, 어떻게 반응을 하는 지에 대한 방법

□ 감사의 표현

2. 지시사항

□ 간단

□ 명료

□ 대상에의 적합성

□ 필요시 정의를 내림

□ 필요시 예 제시

3. 문항

□ 문항 당 한 개의 목적

□ 각 문항을 하나의 문항 유형과 연결

□ 주로 선택형 질문

□ 개방된 응답을 유도하기 위한 절충형 질문

□ 강조법, 밑줄, 여백의 적절한 사용

□ 척도와 질문 유형의 일관성

□ 직무나 과제의 의미에 따라 문항 구조화

□ 문항과 페이지 번호 붙이기

□ 교육수준과 흥미에 적절한 용어와 문장 사용

□ 가능하면 자료처리 전문가와 상의

□ 충분한 테스트

자. 설문지의 완성

위의 단계를 모두 거친 후 완전한 형태를 갖춘 설문지가 완료됩니다. 위의 자료를 바탕으로 본 조사를 실시하면 됩니다.

4. 설문지 작성상의 문제점과 유의점

설문의 형식이 결정되면 그 다음 실제로 설문항목을 작성하게 되는데, 이때 특히 유의할 점은 언어의 사용문제입니다. 각 설문에 사용된 언어는 응답자의 반응에 커다란 영향을 미치게 됩니다. 그러면 설문작성 시에 유의해야 될 중요한 문제들을 중심으로 설문작성상의 유의점들을 살펴보면 다음과 같습니다.

가. 모호성(模糊性)

설문이 모호하면 타당성을 잃게 됩니다. 설문은 간결하고 직접적이며 명확해야 합니다. 따라서 불완전하고 불명확하며 한계가 분명하지 않은 설문은 피해야 합니다. 예컨대 “전번 영어시험을 보았습니까?”식의 설문은 불완전합니다. 왜냐하면 영어시험이라면 어떤 사람들은 토익시험만을 생각할 수 있기 때문입니다. 설문에서 시간의 한계가 명시되지 않은 것도 모호성의 원인이 됩니다. 예컨대 “종종”, “가끔”, “항상” 등의 단어가 그것입니다. 만약 “얼마나 가끔 영어 공부를 합니까?”라고 질문을 던진다면 그 응답은 “할 수 있을 때마다”라든가 “언제나” 또는 “전혀 하지 않는다.”는 식으로 여러 가지 응답이 나올 수 있습니다. 따라서 이러한 때에는 “2004년도 12월, 토익시험을 보았습니까?”라고 묻는 것이 응답자에게 과거를 회상시켜서 정확한 응답을 할 수 있도록 만듭니다.

설문에서는 되도록 간결한 단어를 사용해야 되겠으나, 너무 간결한 말도 모호성의 원인이 될 수 있습니다. 반면에 너무 복잡한 말들도 역시 설문의 내용을 모호하게 할 수 있습니다.

나. 오해가능성

모호성과 함께 응답자에게 그릇된 지각을 불러일으킬 수 있는 단어나 설문의 사용도 피해야 됩니다. 응답자의 경험영역을 벗어나는 설문은 응답자에게 의미가 없습니다. 예컨대 어려운 학술용어의 사용이 그것입니다. 그 반면 유행어나 너무 친근한 말도 응답자에게 오해를 불러일으킬 수 있습니다. 따라서 설문을 작성할 때에는 어려운 용어와 일상용어의 중간 형태의 말을 사용하되 응답자의 교육정도․직업․거주지역 등을 고려해야 됩니다.

무엇보다도 설문작성자는 단어의 의미가 사람에 따라 서로 다를 수 있다는 점을 충분히 인식해야 됩니다. 의미론학자들은 항상 주장하듯이 언어의 의미는 단어 자체에 있는 것이 아니라 사람의 마음속에 존재합니다. 한편 설문에 대한 오해는 문법상의 오류 때문에 일어날 수도 있습니다. 따라서 설문은 문법에 맞아야 하며, 관용적이어야 합니다. 관용적이 아닐 때에는 응답자가 당황하게 되어 오해를 하게 됩니다.

다. 감정 및 편견성

모든 설문은 중립적인 용어로 표현되어야 합니다. 설문이 편견성을 띠게 되면 편견적인 반응을 초래하게 됩니다. 조사 설문들을 보면 편견적인 반응을 유도하는 것들이 간혹 눈에 띠는데, 이런 것은 피해야 됩니다. 설문이 불공정한 비교평가를 요구하는 것도 객관성을 저해합니다.

편견된 설문의 하나로서는 상대방을 모함하는 것을 들 수 있습니다. 한편 특정한 사람의 이름만 제시하고 다른 사람의 이름을 생략하는 것도 편견된 질문입니다.

그 다음 감정적인 단어의 사용도 피해야 됩니다. 정치적․도덕적 및 이념적 가치관에 관계된 용어들은 되도록 피하고 간접적으로 표현하는 것이 바람직합니다. 이와 함께 응답자가 듣기 거북하거나 수치스럽게 생각하는 용어도 피해야 됩니다.

라. 기타 문제점

이상에서 열거한 것들 밖에도 설문작성 때 유의해야 할 여러 가지 문제들이 있는데 그 중에서도 설문작성자가 가장 범하기 쉬운 오류는 응답자들로 하여금 너무 많은 지식을 기대하는 것입니다. 응답자들 중에는 학력이 낮은 사람도 있고, 주어진 이슈에 대하여 충분한 지식을 갖지 못하고 있는 사람들도 많습니다. 따라서 설문작성자는 응답자들을 충분히 고려해서 설문을 작성해야 됩니다.

한편 설문 하나 하나나 또는 전체가 너무 길어서도 안 됩니다. 그리고 설문이 너무 상세하거나 복잡해서 응답하는 데에 너무 많은 노력이 들게 되어서도 좋지 않습니다.

위에서 지금까지, 설문을 작성할 때 범하기 쉬운 오류들을 중심으로 설문작성 상 유의점들을 들어 보았습니다. 그러면 이들을 종합․요약해서 설문을 작성할 때 스스로 자문을 통하여 검토하고 넘어갈 몇 가지 사항들을 들어보면 아래와 같습니다.

- 단어들이 간단하고 직접적이며 모든 응답자들에게 친근합니까?

- 설문이 명료하고 가능한 한 구체적입니까?

- 혹시 설문 중에 이중적 응답을 요구하는 설문은 없습니까?

- 설문들이 편견적이거나 어떤 방향으로 반응을 유도하지는 않습니까?

- 설문이 모든 응답자에게 적용될 수 있습니까?

- 응답이 그 형식에 의하여 영향을 받고 있지는 않습니까?

- 설문이 의미를 상실할 수 있을 정도로 너무 축약되지는 않았습니까?

- 설문이 읽기에 어색하지 않습니까?

설문을 작성할 때나 또는 작성한 후에는 반드시 위와 같은 자문들을 해 보면서 작성된 설문을 검토해 보고 수정해 나가야 합니다.

참고문헌

박양규, 김은정(2000). 『윈도우용 SPSS 통계분석8』. 서울: 21세기사

배규한, 이태림, 이기재 공저(2000). 『사회조사분석을 위한 조사방법론과 사회 통계』.

서울: SPSS아카데미

이상규 외(2002). 『SPSS를 활용한 조사방법론』. 서울: 삼우사.

최정임(2002). 『인적자원개발을 위한 요구분석 실천 가이드』. 서울: 학지사

최종성(2001). 『SPSS Ver10을 이용한 현대통계분석』. 서울: 복두출판사

車培根(1979). 『社會科學硏究方法』. 서울: 세영사

Brace, N., Kemp, R., & Snelgar, R.(2001). 『SPSS를 활용한 심리연구분석』. 서울: 시그마프레스