한국어 학습자의 말하기 숙달도 평가

머리말 … 4

1. 서론
1.1. 연구 목적 및 필요성 … 15
1.2. 선행 연구 검토 … 19
1.2.1. 한국어 말하기 평가 연구 … 20
1.2.2. 학문 목적 한국어 말하기 평가 연구 … 28
1.3. 연구 과제 및 연구 방법 … 38

2. 학문 목적 말하기 평가의 구인과 개발 절차
2.1. 학문 목적 말하기의 개념과 유형 … 45
2.1.1. 학문 목적 말하기의 개념 … 45
2.1.2. 학문 목적 말하기의 유형 … 47
2.2. 학문 목적 말하기 평가의 구인 … 56
2.3. 학문 목적 말하기 평가의 개발 절차 … 63

3. 학문 목적 말하기 평가의 도구 분석
3.1. 대학 입학을 위한 최소 숙달도 요건 … 73
3.2. 평가 방식 … 76
3.3. 평가 시간 … 79
3.4. 평가 기준 … 80
3.5. 평가 과제 … 81
3.6. 평가 구성 … 83

4. 학문 목적 한국어 말하기 평가의 설계 및 개발
4.1. TAP-S의 설계 … 90
4.1.1. 평가 목적 … 90
4.1.2. 평가 대상 … 91
4.1.3. 평가 방식 … 93
4.1.4. 평가 등급 … 98
4.1.5. 평가 과제 … 100
4.2. TAP-S의 개발 … 106
4.2.1. CBT 말하기 평가 도구 … 106
4.2.2. 평가 문항 개발 및 타당도 검증 … 120
4.2.3. TAP-S의 채점 방안 … 157
4.3. 예비시험 … 170
4.3.1. 시험 방법 … 171
4.3.2. 결과 분석 및 수정 사항 … 173

5. 학문 목적 한국어 말하기 평가의 시행 및 결과 분석
5.1. 시행 대상 … 180
5.2. 시행 방법 … 182
5.3. 채점 시행 … 183
5.4. 점수 보고 … 187
5.5. 결과 분석 … 191
5.5.1. 다국면 라쉬 모형을 적용한 결과 분석 … 191
5.5.2. 일반화가능도 이론을 적용한 결과 분석 … 206
5.6. 시험의 유용도 … 210

6. 결론
6.1. 요약 및 시사점 … 215
6.2. 연구의 한계점 및 제언 … 217

참고문헌 … 221

부록 … 237
<부록 1> 평가 과제 설정 전 설문지(교수자용) … 239
<부록 2> TAP-S 시험 안내(수험자용) … 249
<부록 3> TAP-S 채점표 … 255
<부록 4> 전문가 설문 분석 자료 … 256
<부록 5> 교수 경력 집단 간 t-검정 결과 자료 … 272
<부록 6> FACETS 결과 자료 … 280

찾아보기 … 293

[서론]

1.1 연구 목적 및 필요성
언어 교육과 언어 평가는 시대적 요구 사항을 수용하고 반영하면서 발전을 거듭해 왔다. 그리고 20세기 중반부터 본격적으로 거론되기 시작한 의사소통 중심적 언어 교육은 현재까지 주목받으면서 한국어교육 분야에도 많은 영향을 주었다. 즉, 말하기 영역이 가시적이고 기본적인 의사소통적 언어 영역으로 거론되면서 한국어교육 분야에서도 말하기 교육과 말하기 평가에 대한 중요성이 논의되기 시작했다.
특히 평가 분야에서는 말하기 평가를 직접 수행하도록 하는 수행평가와 같은 직접 평가 방식에 대한 필요성과 중요성이 자주 언급되고 있다. 이는 학습자들의 목표언어에 대한 언어적 지식이 그대로 언어 산출 능력으로 이어지지 않기 때문에 목표언어 산출에 대한 말하기 능력은 지필고사와 같은 간접 평가 방식으로는 정확한 측정이 어렵다는 견해와 일치한다. 즉, 한국어 학습자들의 말하기 능력은 직접 말하기 수행을 통해 측정해야 한다는 것이다.
한편 외국어 교육의 흐름이 의사소통 중심으로 변화하면서 말하기의 중요성이 강조된 것과 마찬가지로 한국어 학습자들의 학습 동기가 다양해짐에 따라 특수 목적 한국어 학습자에 대한 관심이 높아졌다. 특히 국내 대학들의 적극적인 외국인 유학생 유치 활동과 정부의 외국인 유학생 유치 프로젝트(Study Korea Project) 등의 결과로 해마다 늘어나는 학문 목적 한국어 학습자들의 한국어 능력에 대한 객관적 평가는 이제 한국어교육 분야에서 필수적으로 논의되어야 하는 과제가 되었다.
따라서 본 연구는 국내 대학이나 대학원에서 한국어로 학업을 수행하고자 하는 학문 목적 한국어 학습자들의 말하기 능력 측정에 관심을 갖고 이들의 말하기 능력을 효율적으로 측정할 수 있는 말하기 평가 도구를 개발하는 데 목적을 두었다.
학문 목적 한국어 학습자들은 학업 수행에서 일차적으로 필요한 말하기 능력을 일정 수준 갖추어야 할 필요가 있다. 즉, 이는 성공적인 학업 수행을 위한 필수 요건이다. 또한 일정 수준을 넘어서는 학습자들에 대해서는 어느 정도의 한국어 말하기 능력을 갖추고 있는지에 대한 객관적인 평가가 필요한데 이를 통해 학업 수행에 무엇이 더 필요하고 더 준비되어야 하는지를 알 수 있기 때문이다. 이는 Bachman & Palmer(2010:21)에서 밝힌평가의목적과도상통한다. Bachman &Palmer(2010)은평가란 교육 과정에서 학생들의 합격 여부를 결정하거나 학생들의 학습을 개선하고 촉진시키기 위해 학생들이 잘하고 못하는 영역을 확인하여 판단하고 결정하는 것이라고 하였다. 이와 같은 맥락에서 학문 목적 한국어 학습자들의 말하기 숙달도를 측정할 수 있는 평가를 도입하게 된다면 학업 수행의 적합성을 판단하는 데에도 활용이 가능함은 물론, 학습자에게는 말하기 능력의 어느 부분이 약하고 강한지에 대한 피드백을 얻을 수 있는 기회가 될 것이다. 또한 대학 기관에서도 학문 목적 한국어 학습자를 위한 교과목 개설 시에 지표로 사용할 수 있을 것이다. 따라서 학문 목적 한국어 학습자들의 말하기 능력을 효율적이고 객관적으로 측정할 수 있는 말하기 평가 도구가 필요한 시점이다.
학문 목적 한국어 학습자에 대한 연구 결과물이 나오기 시작한 것은 2000년 이후부터이다. 초기의 연구 결과물은 대부분이 교수요목 개발, 교육과정 개설 등 대학 입학 후 과정에 집중되어 있다. 그리고 이러한 연구들은 대부분이 학습자들의 요구조사를 통해 이루어졌다. 그러나 이러한 연구들에 앞서 학문 목적 학습자들의 한국어 능력에 대한 올바른 진단이 선행되었어야 했다. 왜냐하면 이들의 학문 목적 말하기 능력을 정확하고 객관적으로 평가함으로써 입학 후 학업 수행의 성공 여부를 추정할 수 있으며 또한 교육 과정 및 내용 구축에 반영할 수 있기 때문이다. 그러나 현재 대학 진학을 목적으로 하는 학문 목적 학습자를 위한 특수 목적의 한국어능력시험은 존재하지 않으며 학문 목적 학습자들이 국내 대학이나 대학원의 입학 허가를 받기 위해 응시하는 한국어능력시험(TOPIK)에도 말하기 평가는 포함되어 있지 않은 실정이다. 영어 교육 분야에서 영어권 유학생들을 대상으로 한 다양한 말하기 시험을 개발?시행하여 학문 목적 학습자를 선발하고 있는 것을 고려해 볼 때 한국어교육 분야에서도 학문 목적 한국어 학습자를 위한 말하기 시험이 개발되어야 한다.
박동호 외 7인(2012:1)에서도, 학문 목적 한국어 학습자들의 국내 대학에서의 수학 가능성을 예측할 수 있는 지표로서 한국어 말하기 능력을 활용하려는 정책적 노력이 가시화되고 있으나 시행상의 어려움으로 한국어능력시험에 말하기 평가가 배제되어 현 외국어교육이 높은 비중을 두고 있는 말하기 교육이 한국어교육 분야에서는 홀대받고 있다고 지적하면서, 말하기 영역의 평가 및 시행을 위한 연구가 활성화되어야 한다고 제안하였다.
학문 목적 한국어 학습자들을 위한 말하기 평가가 개발되면 다음과 같은 것들이 가능해진다. 첫째, 학업 수행에 필요한 최소한의 말하기 능력을 갖춘 학습자들을 선발할 수 있다. 학문 목적 한국어 학습자가 갖추어야 할 일정 수준을 준거로 하여 말하기 능력을 측정함으로써 선발 여부를 판단하는 데 활용할 수 있다. 둘째, 입학 후 교육 과정에서 무엇을 계획하고 준비해야 하는지를 명확히 할 수 있다. 선발 대상자들의 결과 자료를 바탕으로 학습자들의 부족한 부분을 파악함으로써 어느 부분의 교육과정을 개설해야 할지, 교육 내용은 어떻게 구성을 할 것인지를 결정하는데 활용할 수 있다. 셋째, 같이 수학하는 동료 학생, 교수들과 일정 수준 이상의 학문의 질을 유지할 수 있다. 최은지?정명숙(2007)은 ‘발표하기’에 대한 한국 학생들의 인식조사를 통해 대다수의 한국 학생들이 학문 목적 한국어 학습자들의 발표 내용을 이해하는 데 어려움을 겪고 있다는 사실을 확인하였다. 그러나 학문 목적 한국어 학습자들을 위한 평가를 실시하여 일정 수준 이상의 학생들에게만 입학을 허가한다면 수업의 효율이 높아짐으로 학문의 질이 보다 향상될 수 있다.
본 연구는 위와 같은 학문 목적 한국어 학습자를 위한 말하기 평가 도구 개발의 필요성에 따라 CBT에 기반한 학문 목적 한국어 말하기 평가도구의 설계와 개발을 목표로 하였다. 그리고 본 연구에서 설계, 개발한 평가 도구의 양호도를 입증하기 위해 최근 언어 평가 분야에서 자주 활용되고 있는 대표적인 분석 도구를 이용하여 검사 타당도와 신뢰도를 분석하였다. 본 연구는 향후 한국어교육 분야에서 말하기 평가 연구자들의 기초 자료로 활용될 수 있을 것이다.