E2Talks는 교육 산업 종사자를 위한 팟캐스트입니다. 만약 교육 산업에 종사하고 계시며 E2가 귀하의 조직과 잘 맞을 것 같다고 생각하신다면, 여기를 클릭하여 관심 의사를 보내주시기 바랍니다.
대본
인트로
안녕하세요, E2Talks에 오신 것을 환영합니다. 이번 에피소드에서 제이는 메이지 가쿠인 대학 영어학과의 응용언어학 및 TESOL 교수인 찰리 브라운 박사와 대화를 나눕니다. 메이지 가쿠인 대학은 도쿄에 위치한 최고 수준의 사립대학입니다. 그는 특히 제2언어 어휘 습득과 읽기 능력 개발에 적용되는 온라인 언어 학습 분야의 잘 알려진 전문가이며, 일본의 영어 교육, 제2언어 어휘 습득, 온라인 학습 주제에 대해 폭넓게 출판하고 있습니다. 이번 에피소드에서 제이와 찰리는 고빈도 어휘, 특히 브렌트 컬리건 박사와 조셉 필립스와 공동 제작한 새로운 일반 서비스 단어 목록(NGSL)에 대해 논의합니다. 영어를 제2언어로 배우는 학생들을 위한 핵심 고빈도 어휘인 NGSL은 마이클 웨스트의 1953년 일반 서비스 목록의 주요 업데이트입니다. NGSL은 대부분의 일반 영어 텍스트에서 92% 이상의 커버리지를 제공하며, 지금까지의 어떤 코퍼스 기반 일반 영어 단어 목록보다 가장 높은 수치를 자랑합니다. 어휘의 경이로움과 그것이 영어 교육과 학습에 어떻게 적용되는지에 대한 흥미로운 대화입니다. 즐기시길 바랍니다.
제이
안녕하세요, 찰리, 어떻게 지내세요?
찰리
잘 지내고 있어요. 초대해 주셔서 감사합니다.
제이
어디쯤에 계세요?
찰리
도쿄, 일본이라서, 네, 여기랑 같은 시간대인 것 같아요.
제이
네, 정말 거의 비슷해요.
찰리
거의 비슷해요, 한두 시간 차이 정도밖에 안 나요.
제이
일본에 얼마나 계셨나요?
찰리
말하기는 좀 겁나지만, 저는 1985년부터 여기 있었어요. 그래서 벌써 35~36년이 되어가네요.
제이
와, 그렇군요.
찰리
대학을 바로 졸업하고 왔어요.
제이
환상적이네요. 그래서 일본에서 영어를 가르치기 시작했고, 그 이후로 쭉 그곳에 계셨군요.
찰리
네, 저는 JET 프로그램, 즉 일본 교환 및 교육 프로그램을 통해 왔어요. 정부가 운영하는 대규모 교육 프로그램이죠. 저는 그 프로그램의 첫 번째 전국 의장이었어요. 그래서 모든 현 교육 위원회, 교육부와 매우 밀접하게 일했죠. 23살에 젊은 나이에 이곳에 와서 대부분의 외국인들이 접근하지 못했던 영어 교육 시스템의 매우 다양한 부분을 깊이 들여다볼 수 있었어요. 그게 너무 흥미로웠고, 여기 머물면서 변화를 만들 수 있을 것 같다는 생각에 집에 돌아가지 않았어요. 그래서 30년 넘게 이곳 영어 교육 개선을 위해 노력해오고 있습니다.
제이
와, 정말 인상적이네요. 사실 당신의 TED 강연을 보고 정말 감명받았어요. 그래서 당신과 이야기하고 싶었던 이유 중 하나입니다.
찰리
아, 알겠습니다. 그걸 알아봐 주셔서 기쁘네요.
제이
네, 네. 그리고 물론, 제가 관심 있는 코퍼스 언어학 분야에서의 당신의 작업에 대해 이야기하고 싶어요. 일본에서의 영어 교육에 미친 영향에 대해 어떻게 생각하세요? 뭔가 변화를 일으켰다고 느끼시나요?
찰리
음, 이 분야는 변화를 일으키기 정말 어려운 곳이에요. 저항하는 관성 같은 힘들이 너무 많아서, 뭔가를 극적으로 밀고 나가기가 매우 힘들죠. 하지만 그렇다고 해도, 저는 거의 모든 것을 해봤어요. 교과서를 쓰거나 연구서를 쓰거나, 신문 칼럼을 쓰거나, 발표를 하거나, 가르치거나 교사 연수를 하거나, 연구를 하거나, 말 그대로 다 해봤죠. 정부 기관에서도 일했고, 교육 위원회에서도 일했어요. 그래서 몇 년마다 새로운 무언가를 시도하고 다른 방향에서 접근하려고 노력했어요. 그 중에서 기술과 언어 학습은 제가 나중에 접한 분야인데, 대략 20~25년 전쯤부터 시작했어요. 기술이 이런 장애물들을 우회할 수 있는 방법을 제공한다는 걸 깨달았죠. 그래서 기술과 언어 학습은 제가 개선을 위해 시도한 여러 도구 중 하나일 뿐이에요.
제이
흥미롭네요. 오랫동안 이 업계에서 일해오셨는데, 아직도 흥미롭나요? 언어에 대한 관심이 여전한가요?
찰리
아, 정말요. 아니요, 저는 제 일을 정말 사랑해요. 제가 하는 일을 사랑하죠. 그리고 다른 일을 하고 싶지 않아요. 제가 운영하는 것 중 하나는, 제가 아주 초기에 깨달은 점인데, 여기서는 교사 교육이 부족하다는 거예요. 영어 교사들은 영어 문학을 전공하며 자격을 취득해요. 그래서 셰익스피어를 공부하고 나서 갑자기 의사소통 중심 영어를 가르쳐야 하는데, 전혀 감이 없죠. 그래서 저는 단발성 강연이나 책을 쓰는 것보다 교사 연수에 참여하면 더 많은 사람들에게 영향을 줄 수 있겠다고 생각했어요. 그래서 저는 이 일을 정말 좋아하고, 일본의 모든 현을 다니며 모든 교육위원회와 일했고, 지금까지 수만 명의 교사들을 연수시켰어요. 그리고 지금은 제 대학에서 교사 연수 프로그램을 운영하고 있죠. 그래서 3~4년 동안 학생들을 가르치고 있는데, 이 학생들은 프로그램을 마치고 나면 영어 능력, 의사소통 중심 교수법 지식, 그리고 기술 활용 능력에 대해 완전히 자신감을 갖고 나옵니다. 그래서 우리는 영어 교육을 바꿀 사람들을 배출하고 있다는 걸 알고 있어요. 교사 연수자이자 연구자로서 저는 씨앗을 심는 셈이죠. 직접적으로 변화를 시도하는 것뿐만 아니라, 다른 사람들이 훌륭한 일을 할 수 있도록 간접적으로 변화를 만드는 상황을 만드는 거예요.
제이
네, 네트워크를 활용하는 거죠. 네트워크 효과요. 정말 좋은 아이디어네요. 환상적입니다. 그렇다면 당신의 전문 분야는 코퍼스 언어학, 어휘, 독해가 맞나요? 그리고 컴퓨터 보조 언어 학습도 포함되나요?
찰리
네, 네. 제 생각에 그 네 가지는 실제로 꽤 일관되고 자주 서로 연관되어 있어요. 그래서 제가 만드는 많은 무료 온라인 자료들은 그 네 가지 영역 중 하나 이상, 때로는 여러 영역에 해당합니다, 네.
제이
환상적이네요. 좋습니다, 코퍼스 언어학부터 시작해볼까요? 그리고 모두에게 간단히 그 의미와 영어 교사로서, 그리고 영어 학습자로서 왜 중요한지 개요를 설명해 주실 수 있나요?
찰리
음, 사실 그게 꽤 큰 질문이네요. 하지만, 시작점은 코퍼스가 무엇인가 하는 것이고, 코퍼스는 간단히 말해 방대한 텍스트 모음입니다. 그리고 코퍼스가 되어야 하는 것은, 아무 텍스트나 수집하는 것이 아니라, 나중에 분석할 텍스트들은 대표성이 있어야 한다는 것입니다. 즉, 수집하는 텍스트들은 가르치려는 언어나 장르를 대표해야 합니다. 그래서 저는 수년간 많은 코퍼스를 만들었는데, 학술 영어용, 일반 영어용, 구어체 영어용, 어린이 영어용 등 다양합니다. 하지만 기본 아이디어는 그 장르를 대표하는 많은 텍스트를 수집하는 것이고, 제 경우에는 제2언어 학습자가 접할 만한 언어를 대표하는 텍스트를 모으는 것입니다. 그리고 나서 그 텍스트들을 분석하는데, 보통은 그 코퍼스에서 가장 빈번하게 등장하는 단어들을 찾기 위해서입니다. 그리고 코퍼스 연구가 잘 이루어졌다면, 그 코퍼스에서 가장 빈번한 단어들은 학생들이 가장 자주 접할 가능성이 높은 단어들이고, 따라서 교사가 가르치고 학생이 배우기에 가장 적합한 목표 단어들입니다. 우리는 보통 코퍼스 언어학의 다른 측면들도 고려하는데, 물론 대표성이 있어야 하고, 언어학적 분석에 사용되지만, 보통은 텍스트가 자연 발생적이어야 하며, 학습자가 접할 가능성이 높은 것들이어야 한다는 점도 봅니다. 그래서 코퍼스를 만들 때는 명확한 설계 기준이 필요하고, 정확히 무엇을 원하는지 파악한 후 그 설계 기준에 따라 텍스트를 수집해야 합니다. 그리고 마지막으로 언급할 점은, 제가 하는 현대 코퍼스 작업은 보통 텍스트가 기계 판독 가능하다는 것을 전제로 한다는 것입니다. 요즘은 코퍼스 작업에 컴퓨터를 많이 사용하지만, 초기 코퍼스들은 그렇지 않았습니다. 제 새로운 일반 서비스 리스트는 2013년에 출판되었는데, 이는 1953년에 마이클 웨스트가 출판한 원래의 일반 서비스 리스트를 대체한 것입니다. 하지만 그 작업은 1936년에 시작되었고, 1936년부터 1953년까지는 컴퓨터가 없었기 때문에 텍스트를 손으로 수집하고 단어를 일일이 손으로 세야 했습니다. 그래서 그 연구는 1936년부터 1953년까지 17년이 걸린 놀라운 업적이었고, 정말 대단한 일이었습니다. 음…
제이
예를 들어, 컴퓨터가 말뭉치를 분석해서 단어 목록을 만드는 데 얼마나 걸리나요?
찰리
그렇게 간단하지는 않아요. 컴퓨터의 도움을 받더라도, 우리는 설계 기준을 만들어야 하고, 텍스트를 수집해야 하며, 보통 학생들이 접하는 책들을 구매합니다. 그리고 책 제본을 제거하고, OCR 기계에 넣는 작업을 하죠.
제이
와, 정말 그렇게 기계에 데이터를 넣는 거군요?
찰리
아, 물론이죠. 그게 일부니까요, 적어도 말뭉치의 일부는 그렇게 만들어집니다. 그리고 나서 말뭉치를 정리하고, 실제로 살펴보고 분석하면서, 내가 뭘 잘했는지, 뭘 잘못했는지 확인하고, 잘못한 부분을 고치는 거죠. 이 작업은 몇 달이 걸립니다. 지금 저희는 아마도 7개의 말뭉치를 가지고 있는데, 가장 빨리 만든 것은 아마도 약 3개월 정도 걸렸어요. 왜냐하면 그 작업에만 모든 걸 집중했거든요. 가장 오래 걸린 것은 아마 2년 정도 걸렸는데, 원래 NGSL과 원래 Academic Word List, 그리고 AWL, 제가 TED 강연에서 언급한 두 가지가 아마도 2년 정도의 작업이었어요.
제이
그래서 이게 뭐죠..? 최종 결과물이 당신에게 큰 놀라움인가요? 아니면 보고 나서, 아, 내가 기대했던 바로 그거구나 하고 생각하나요.
찰리
솔직히 말해서, 저는 종종 예상했던 대로라는 것을 발견합니다. 아시다시피, 비즈니스 영어를 가르친다면, 중요한 단어들을 공부하라고 말하는 책들이 많이 있습니다. 그 단어들 중 많은 부분이 코퍼스에 포함되어 있지만, 코퍼스가 생성한 목록은 단어들의 상대적 중요도를 평가합니다. 그래서 저희 비즈니스 코퍼스, 약 6500만 단어 정도 되는 코퍼스에서 가장 중요한 비즈니스 단어가 무엇인지 1위, 2위, 3위, 4위 순서대로 알 수 있습니다. 이것이 매우 중요한 이유는, 코퍼스 언어학에서 교육학과 교실에서 일어나는 일로 넘어가면, 제가 하는 많은 일은 학습자들이 독립할 수 있는 단계에 도달하도록 돕는 것입니다. 사전이나 교사의 도움 없이 텍스트를 읽거나, 자막 없이 TV 프로그램을 볼 수 있는 단계 말이죠. 이를 위해서는 페이지에 있는 단어의 최소 90%, 바람직하게는 95~98%를 이해해야 합니다. 그래서 읽기와 문맥 추측에 대해 이야기했는데, 교사들이 학생들에게 종종 사전을 사용하지 말고 문맥에서 추측하라고 말합니다. 이를 위해서는 학생들이 페이지에 있는 단어의 95%를 알아야 합니다. 미지의 단어가 5% 이하일 때 문맥에서 추측하며 읽을 수 있습니다. 만약 즐거움을 위해 읽는다면 98~99% 정도가 되어야 합니다. 그렇다면 이것이 코퍼스 언어학과 무슨 관련이 있을까요? 우리가 하는 일은 단어를 중요도 순으로 나열하고, 각 단어가 차지하는 비율을 알기 때문에, 학생들이 90%, 95%, 98%에 훨씬 더 빠르게 도달할 수 있는 매우 효율적인 학습 경로를 만드는 것입니다. 일반적으로 폴 네이션은 많은 책을 썼고, 저는 그의 지도 아래 석사와 박사 학위를 받았습니다. 그래서 저는 어휘 전문가가 되었고, 8000단어 정도를 알아야 90~98%의 이해도를 달성할 수 있다고 말합니다. 제 단어 목록은 보통 1000~1500단어 정도이고, 일반 영어 NGSL 목록과 제 특수 목적 단어 목록을 결합하면 보통 4000단어 미만으로 96~98%의 이해도를 얻을 수 있습니다. 왜 이것이 중요할까요? 연구를 보면, 대학을 졸업한 원어민은 2만 5천에서 3만 단어를 알고 있지만, 일본 같은 비원어민은 12~13년 영어 공부 후에도 약 2000단어만 알고 있습니다. 12년 공부해서 2000단어를 배우는데, 8000단어를 배우려면 몇 년이 더 걸릴까요? 말도 안 되죠?
제이
음, 거의 불가능한 과제 아닐까요?
찰리
기본적으로, 새로운 일반 서비스 목록 프로젝트는 학습자들을 위한 지름길을 만드는 것에 관한 것입니다. 즉, 가능한 한 짧게 매우, 매우 간결한 어휘 목록을 만들어 최대한의 범위를 커버하려는 시도입니다. 그리고 나서 우리가 하는 단계는, 첫 번째 단계는 실제로 단어 목록을 만드는 것이고, 저는 그 목록들을 위한 전용 웹사이트를 가지고 있습니다. 모두 오픈 소스이며, 무료로 다운로드하고 사용할 수 있습니다. 하지만 지난 10년 동안 우리는 교육, 학습, 텍스트 생성, 텍스트 분석, 연구 등을 위한 다양한 무료 온라인 자원을 만들기 위해 최선을 다해왔습니다. 그래서 단어 목록이 실제로 사용될 수 있도록 말이죠. 이미 존재하는 일부 단어 목록들은 기본적으로 학술지에만 머물러 있고, 아무도 실제로 사용하지 않습니다. 저는 이런 단어 목록들을 단지 '상아탑 연구'라는 표현처럼 그런 목적으로 만든 것이 아닙니다. 저는 전혀 그런 데 관심이 없습니다. 물론, 우리 작업과 이 목록 및 도구들의 타당성과 신뢰성을 뒷받침하는 상당한 연구가 있습니다. 하지만 주요 초점은 학생, 교사, 콘텐츠 개발자의 요구를 충족시키는 것입니다. 그래서, 당신이 일본 영어 교육에 대한 제 영향에 대해 물었는데, 저는 이 단어 목록들과 도구들이 적어도 어느 정도는 영향을 미치고 있다고 생각합니다, 그렇게 되길 바랍니다.
제이
저는 이게 정말 영감을 준다고 생각해요. 솔직히 말해서, 효율성은 언어 학습에서 매우 중요한 요소입니다. 왜냐하면, 말씀하신 것처럼, 언어를 배우는 데는 수년이 걸리는데, 그 시간을 단축할 수 있다면 정말 대단한 일이니까요. 이 단어 목록들은 정말 놀라운 재료 같은 거예요. 영어의 핵심 재료라고 할 수 있죠. 여기 필요한 고빈도 어휘들이 있습니다. 하지만 말씀하신 대로, 그걸 교육적으로 변환하는 과정이 필요해요. 아이에게 엑셀 스프레드시트를 주고 2000단어를 보여주면서 '이게 뭐야?'라고 할 수는 없으니까요. 그런 결정들이 정말 흥미롭습니다. 새로운 일반 서비스 단어 목록에 대해 말씀해 주실 수 있나요? 저는 이 목록이 모든 언어 학습자에게 어느 정도는 꼭 필요하다고 생각해요. 앱을 통해서든 뭐든 간에요. 그리고 모든 교사들도 이 목록을 가지고 있어야 하고, 거의 모든 수업에서 이 목록을 참고하고 활용해야 한다고 생각합니다. 이 특정 단어 목록과 그 지프 곡선(zipfian curve), 그리고 단어들의 빈도에 대해 이야기해 주실 수 있나요? 그 단어들은 어떤 것들이고, 내용어와 기능어의 비율은 어떻게 되나요? 가장 빈번한 단어는 무엇이고, 덜 빈번한 단어들은 무엇인지, 그리고 그 곡선에서 그 단어들이 어떻게 분포되어 있는지 궁금합니다.
찰리
음, 정확한 비율을 말씀드리긴 어렵지만, 내용과 기능 같은 것들에 대해 누군가가 분석을 한 적은 있을 거예요. 하지만 이 목록에 대해서는 기본적인 통계와 설명을 드릴 수 있습니다. 약 2800개의 단어로 구성된 목록입니다. 새로운 일반 서비스 목록은 일반 영어를 대표하며, 제2언어 학습자들이 일상생활에서 접할 가능성이 높은 일반 영어 유형입니다. 이 목록은 시험 준비를 목적으로 만들어진 것이 아니에요. 일본에서 개발된 다른 많은 단어 목록들이 시험 준비용으로 만들어진 반면에요. 그래서 저는 시험 준비에만 집중하는 것에 반대하고 싶었어요. 일본의 많은 학생들이 12년 동안 영어를 공부하고 시험을 통과해서 대학에 들어가지만, 대학에 들어가서는 영어를 전혀 말하지 못합니다. 왜냐하면 그동안 시험 영어만 공부했기 때문이죠. 그래서 저는 물론 시험 영어도 도와주고 싶었지만, 주된 목적은 실제 세계에서 영어를 사용하는 데 도움을 주는 것이었어요. 그래서 책, 잡지, 신문, 인터넷에서 읽는 것, TV에서 보는 것, 라디오에서 듣는 것 같은 읽기 자료들이 그 대상입니다. 이 새로운 일반 서비스 목록의 2800개 단어는 평균적으로 약 92%의 커버리지를 제공합니다. 정말 놀라운 수치입니다. 그것은…
제이
다시 한 번 말씀해 주세요, 그게 정말 중요하니까요.
찰리
네, 일반 영어 텍스트에 대해 92%의 커버리지를 제공하며, 일반 영어 듣기 자료에 대해서는 더 높은 커버리지를 제공합니다. 제 대학원생 중 한 명이 TV 쇼 《프렌즈》의 첫 두 시즌을 기반으로 코퍼스를 만들어 NGSL이 어떤 커버리지를 제공하는지 조사했는데, 실제로 95% 이상이었습니다. 그래서 일반 영어 듣기 자료에 대해서는 더 높은 커버리지를 제공하는 셈입니다. 원어민이 약 3만 단어를 알고 있다는 점과 비교하면 정말 놀라운 수치입니다. 즉, 원어민 어휘량의 1/10도 안 되는 단어 수로 일반 텍스트의 92%를 커버할 수 있다는 뜻입니다. 영어 단어는 약 60만 개가 있는데, 이는 영어 전체 단어의 0.05%도 안 되는 아주 적은 수의 단어로 매우 높은 커버리지를 제공하는 것입니다. 그리고 집프 곡선(zipfian curve)에 대해 설명하자면, 보통 파워포인트나 그래프를 사용해 설명하지만, 간단히 말해 집프는 수학자였고, 특히 코퍼스 언어학과 단어 빈도에 관해 발견한 것은 아주 적은 수의 단어가 엄청나게 자주 등장한다는 것입니다. 반면 대부분의 단어는 학생들이 평생 한 번도 만나지 못할 수도 있습니다. 문제는 시험 준비나 영어 교육 시스템이 시험 대비에 집중할 때, 학생들이 시험 외에는 거의 접하지 않을 저빈도 단어에 치중하는 경향이 있다는 점입니다. 그래서 저는 첫 단계로 새로운 일반 서비스 리스트(NGSL)를 만들었고, 이후 모듈식 접근법으로 다른 리스트들도 만들었습니다. 예를 들어, 일본에서 매우 중요한 고위험 시험인 TOEIC 리스트를 만들었는데, TOEIC 준비 자료와 공식 TOEIC 시험 전부를 포함한 별도의 코퍼스를 구축했습니다. 그 결과 NGSL에 1200단어만 추가하면 TOEIC 시험의 99% 커버리지를 달성할 수 있었습니다. 이는 코퍼스 언어학에서 거의 볼 수 없는 놀라운 수치입니다. 그 이유는 TOEIC이 실제 영어라기보다는 매우 제한적인 시험 영어이기 때문이며, 과학자로서 그 좁은 범위를 분석할 수 있었기 때문입니다. 좁은 범위 덕분에 학생들이 만날 가능성이 높은 아주 적은 수의 단어만 찾아낼 수 있었습니다. 그래서 많은 사람들이 높은 점수를 받고 있습니다. 제가 컨설팅한 여러 회사들이 우리 TOEIC 리스트와 새로운 일반 서비스 리스트를 활용해 학생들이 온라인 학습 도구로 TOEIC에서 높은 점수를 받을 수 있도록 돕고 있습니다. 여기서 흥미로운 점은 TOEIC과 NGSL에 관한 대화를 잠시 유지하자면, NGSL의 주 목적은 실제 세계에서 학생들이 진짜 영어를 준비하도록 돕는 것이지만, TOEIC 시험에 대해서도 94%의 커버리지를 제공한다는 것입니다. 일반 영어는 92%, TOEIC은 94%입니다. 즉, NGSL이 시험 준비에 초점을 맞추지 않았음에도 불구하고, 우리가 아는 한 고위험 시험 중 하나에 대해 매우 높은 커버리지를 제공한다는 뜻입니다.
제이
네, 맞아요. 이걸 들으니 우리 IELTS 학생들이 생각나네요. 예를 들어, 그들은 모두 8점 같은 밴드 점수를 받으려고 하는데, 고빈도 단어, 즉 0~1000단어 범위에서 기본적인 부족이 있습니다. 아마도 그 부분을 다시 복습할 필요가 있을 거예요.
찰리
아마도 아니에요, 그게 실제로, 네, 그게 큰 문제입니다. 그리고 일본에서도 큰 문제입니다. 그래서 저희가 제공하는 무료 자료 중에서 단어 목록과 플래시카드 프로그램뿐만 아니라, 학생들이 부족한 고빈도 단어 그룹을 진단할 수 있도록 진단 테스트도 만들었습니다. 이것은 앞서 말한 집합 원리와도 관련이 있습니다. 만약 학생들이 새로운 일반 서비스 리스트(NGSL) 단어에서 상당한 부족이 있다면, 95% 도달은 수학적으로 불가능합니다. 우리는 95%, 98%를 독립 목표로 이야기했는데, NGSL 단어 중 200~300개만 모른다고 해도, 어휘 크기가 5000단어일 수 있지만, 처음 1000단어 또는 2000단어 중 200~300개를 모르면 95%에 도달할 수 없습니다. 그만큼 중요합니다. 그래서 각 고빈도 단어는 많은 범위를 커버하고, 저빈도 단어는 거의 아무것도 커버하지 못합니다. 그래서, 네, 빈틈을 채워야 합니다. 저도 플래시카드 앱 같은 무료 앱을 많이 만들었는데, NGSL 단어를 100단어 단위로 나누어 빈도별로 정리한 'new NGSL builder'라는 앱이 있습니다. 이 앱은 간격 반복 플래시카드로, 과학적으로 단어를 시험용으로만 배우는 것이 아니라 단기 기억에서 장기 기억으로 옮기는 데 매우 효율적인 방법으로 알려져 있습니다. 그래서 학생들이 모르는 단어만 선택해서 공부할 수 있도록 만들었습니다. 이런 다양한 도구들이 각각 다른 교육적 문제를 해결합니다. 이것도 그 중 하나입니다.
제이
네, 당신의 웹사이트는 정말 대단해요. 사실 이 팟캐스트 설명란에 링크를 넣을게요. 그리고 거기에 있는 모든 자료들, 제가 본 바로는 대부분, 아니면 전부가 무료인 것 같아요. 정말 놀라워요.
찰리
네, 웹사이트에 있는 거의 모든 것이 무료인 것 같아요. 물론 제가 쓴 유료 교재나 유료 앱도 있지만, 일반적으로 웹사이트에 올리는 자료는 대부분 무료나 오픈 소스에 한정하려고 노력해요. 사실 제 회사 웹페이지에는 제가 가진 모든 무료 자료 목록이 한 곳에 있어요. 왜냐하면 New General Services 웹사이트에는 제가 가진 광범위한 독서 자료가 언급되어 있지 않거든요. 저는 무료 광범위 독서 웹사이트, 무료 광범위 듣기 웹사이트, 그리고 사실 읽기와 어휘를 구분해서 제공하는 다른 도구들도 가지고 있어요. 나중에 그 부분에 대해 더 이야기할 수 있어요.
제이
그 부분에 대해 이야기하고 싶어요. 어휘 진단 검사에 대해 언급하셨는데요. 교사로서 교실에 들어가면 학생들이 얼마나 많은 단어를 알고 있는지 전혀 알 수 없잖아요. 어떤 학생은 어휘력이 훨씬 뛰어나고 어떤 학생은 훨씬 적은 단어를 알고 있을 텐데, 이런 진단 어휘 검사는 어떻게 작동하나요? 그리고 어떻게 만드나요?
찰리
사실 이런 도구들을 만드는 과정은 쉽지 않습니다. 경우에 따라서는 몇 년이 걸리기도 하죠. 예를 들어, 새로운 일반 서비스 리스트 테스트인 GSLT와 새로운 학술 단어 리스트 테스트인 NAWLT는 개발하는 데 수년이 걸렸습니다. 이 테스트들은 일본에 계신 두 훌륭한 테스트 전문가인 필 베넷과 팀 스톡켈이 개발했어요. 신뢰성과 타당성, 이 두 가지가 테스트에서 가장 중요한 요소인데, 신뢰성과 타당성을 모두 갖춘 테스트를 만들기 위해서는 테스트를 어떻게 만들고, 테스트가 의도한 대로 작동하는지 확인하는 데 많은 노력이 필요합니다. 그래서 이 두 테스트 개발에 관한 연구가 꽤 많이 발표되어 있죠. 이 두 테스트는 학생들이 두 단어 리스트에서 약한 부분이 어디인지 잘 찾아내는 데 매우 뛰어납니다. 이 두 테스트의 주요 목적은 진단입니다. 테스트에는 네 가지 주요 유형이 있는데, 이건 진단 테스트입니다. 학생들이 준비하는 주요 시험들, 예를 들어 IELTS, TOEIC, TOEFL 같은 시험들은 모두 능력 평가 시험(proficiency test)이고, 목적과 개발 과정이 매우 다릅니다. 진단 테스트는 기준 참조 테스트(criterion referenced test, CRT)라고 불리는 유형이고, 반면 능력 평가 시험과 배치 시험은 규준 참조 테스트(norm referenced test, NRT)입니다. 어쨌든, 어휘 테스트 중에서 NGSL과 NAWL을 위해 개발된 이 두 테스트는 신뢰성과 타당성 면에서 가장 높은 수준에 속합니다. 이 테스트들은 학생들이 어느 빈도 구간에서 약한지 구체적으로 파악해 줍니다. 그리고 저희는 이미 Quizlet이나 Memorise 같은 무료 웹사이트에 이 테스트와 동일한 구간으로 나뉜 무료 플래시카드를 만들어 놓았습니다. 그래서 학생들에게 점수만 주는 게 아니라, 예를 들어 NGSLT 테스트에서 점수를 받고 두 번째 구간, 즉 NGSL의 두 번째 500단어 또는 500~600단어 구간에서 약하다면, 학생들은 바로 그 500단어가 포함된 Quizlet 플래시카드 학습 스택으로 가서 모르는 단어만 공부할 수 있습니다.
제이
알겠습니다. 정말 대단하네요. 진짜로, 저는 진단 테스트가 정말 중요하다고 생각해요. 왜냐하면, 이게 바로 언어의 문제이기도 하고, 교육 전반의 문제이기도 하거든요. 교실에서는 모두가 다른 수준에 있고, 그들이 어디에 있는지 파악할 수 있다면 학습 동기 부여에도 정말 좋습니다. 만약 그들에게 주어진 자료가 그들에게 맞춰져 있다면, 학습이 훨씬 더 풍부해지거든요.
찰리
개인 맞춤 학습. 바로 그거예요. 네, 제가 원하는 건, 만약 30명의 학생이 있는 반이라면, 그 30명 각각이 아직 모르는 가장 빈도 높은 단어들을 배우는 거예요. 네, 저희 다른 앱이 있는데, 유료 앱이긴 하지만 아주 저렴해요. 이름은 Word learner예요. 이 앱에는 내장된 테스트 기능이 있어서, 교사와 학생이 모르는 단어에 따라 다른 단어 묶음을 학습할 수 있어요. 그리고 학생별로 테스트를 개별화해서, 모든 학생이 다른 시험을 보게 할 수 있죠. 그리고 학습 관리 시스템도 있어서 교사가 그걸 추적할 수 있어요.
제이
아, 좋아요. 정말 좋아요. 저는 기술과 언어 학습이 정말 좋아요. 기술이 교실에서 펜과 종이로는 사실상 불가능했던 모든 가능성을 열어줄 수 있다는 점이요.
찰리
그건 매우, 불가능한 건 아니지만, 정말, 정말 어렵습니다. 그리고 저는, 교육적으로 타당한 어휘 개발 방식을 하려고 결심한 사람들이 온라인 도구에 접근할 수 없었을 때도, 놀라운 가르침을 해냈다는 걸 알고 있어요. 하지만 그건 훨씬 더 많은 노력과 훨씬 더 많은 구조가 필요해요. 그래서 제가 이런 도구들을 많이 개발하려고 하는 이유 중 하나는, 교사와 학습자의 일을 조금 더 쉽게 만들기 위해서입니다.
제이
네, 좋은 질문이에요. 맞아요. 자, 몇 가지 질문이 더 있어요. 실제로 읽기에 대해 이야기하기 전에, 질문 중 하나는, NGSL에 2800단어가 있는데, 이게 92%를 차지하잖아요. 그리고 TOEIC 단어 목록에 1200단어를 더하면, 예를 들어, TOEIC 단어 목록에는 어떤 단어들이 있나요? 전부 비즈니스 관련 명사와 동사인가요? 나머지 87%는 무엇으로 구성되나요?
찰리
알아요, 제가 그것에 대한 분석을 했어요. 제 웹사이트에서 자유롭게 다운로드할 수 있지만, 그 단어들은 TOEIC 시험에서 NGSL 외에 가장 자주 나오는 1200개의 단어를 나타냅니다. 그리고 보시면, 일반적으로 TOEIC 시험은 비즈니스 영어 시험이라고 알려져 있죠. ETS, 영어 시험 서비스 기관도 그렇게 말합니다. 어느 정도는 사실이에요. TOEIC 서비스 리스트를 보면, 그 1200개의 단어 중에 비즈니스 관련 단어가 정말 많다는 걸 알 수 있습니다. 그래서 그건 사실입니다. 하지만 저희는 2015년에 TOEIC 서비스 리스트를 발표했고, 실제로 TOEIC이 학생들이 실제 비즈니스 환경에서 기능할 수 있는 능력을 잘 측정하지 못한다는 연구를 많이 봤습니다. 가장 유명한 예가 라쿠텐입니다. 세계에서 가장 큰 회사 중 하나이고, 일본에서 가장 큰 회사이기도 하죠. 라쿠텐의 사장 미키타니는 영어를 매우 잘하고, 회사 내에서 영어 사용을 촉진하기 위해 모든 직원이 TOEIC에서 높은 점수를 받도록 요구했습니다. 그는 수년간, 수백만 달러를 들여 학생들과 직원들을 TOEIC 고득점자로 만들기 위해 교육했고, TOEIC 점수를 기준으로 관리직으로 승진시키거나 해외 파견을 보냈습니다. 하지만 대부분의 경우, 그들은 실제 업무를 수행하지 못했습니다. 이를 알고, 저희는 2015년에 TOEIC 서비스 리스트를 발표한 같은 날, 비즈니스 서비스 리스트도 함께 발표했습니다. 비즈니스 서비스 리스트는 약 6500만 단어로 구성된 코퍼스로, 실제 세계에서 사용되는 비즈니스 영어의 매우 대표적인 샘플을 만들려고 했습니다. 비즈니스 신문, 비즈니스 잡지, 비즈니스 웹사이트, 베스트셀러 비즈니스 교재 등을 포함했죠. 리스트는 TOEIC 서비스 리스트보다 약간 더 길어서, TOEIC 서비스 리스트가 1200단어인 반면, 비즈니스 서비스 리스트는 1700단어까지 확장했습니다. 하지만 이 1700단어로 대부분의 실제 비즈니스 영어 환경에서 약 97%의 커버리지를 제공합니다. 단지 500단어만 더 많고, 커버리지는 2% 정도 적지만, 실제 세계의 비즈니스 영어입니다. 그래서 기본적으로 제가 원하는 것은, 제 대학 학생들을 위해 TOEIC이 중요한 시험이고, 특정 과목을 면제받거나 이력서에 쓰거나 취업을 위해 필요하다는 것을 알기에, 그들이 높은 점수를 받을 수 있도록 돕고 싶었습니다. 하지만 동시에 실제 비즈니스 세계에서 일하고자 하는 사람들을 위해 다른 선택지를 제공하고 싶었습니다. 그래서 비즈니스 서비스 리스트는 전 세계적으로 사용되고 있으며, 매우 대표적이고 높은 커버리지를 제공하기 때문입니다.
제이
멋지네요. 와, 정말 훌륭한 연구예요. 저는 약간 덕후라서 BSL을 꼭 살펴보고 싶어요. 좋아요, 이제 주제를 조금 바꿔서 어휘에서 좀 더 큰 적용, 즉 읽기로 넘어가 볼게요. 읽기에서 얼마나 많은 부분이 알고 있는 단어 수에 달려 있을까요?
찰리
저는 그게 큰 부분이라고 생각해요. 물론 읽기에는 다른 많은 기술들도 필요하지만, 연구가 명확히 보여주는 것은 어휘가 충분하지 않으면 읽을 수 없다는 거예요. 그래서 핵심 어휘, 즉 자주 쓰이는 단어들의 기본 은행을 갖추는 게 중요해요. 그걸 달성하기 전까지는 여러분이 공부하는 모든 학습 전략들, 예를 들어 상향식, 하향식, 스키마 구축, 스키밍, 스캐닝 같은 것들이 아주 유용하긴 하지만, 유창한 독자가 되는 데는 도움이 되지 않아요. 왜냐하면 90%, 95%, 98% 같은 중요한 임계치를 넘지 못하면 유창하게 읽을 수 없기 때문이에요.
제이
네, 네, 비유하자면 악기와 비슷해요. 어휘는 모든 코드를 배우는 것과 같지만, 노래를 연주할 수 있는 건 아니에요. 노래는 문법과 함께 오는 것 같고, 읽기에 필요한 다른 요소들은 무엇일까요?
찰리
음, 글쎄요, 지금 저에게는, 음, 다시 말해, 이 이야기는 일본에서의 제 경험으로 돌아갑니다. 제가 35년 전에 일본에 왔을 때 가장 먼저 눈에 띈 것 중 하나는, 저는 그 당시 훈련된 교사나 연구자가 아니었고, 그건 제 경력 후반에야 시작된 일이었죠. 하지만 훈련받지 않은 원어민으로서 중학교와 고등학교에서 일하면서 영어 교과서를 봤을 때, 도대체 학생들이 어떻게 이걸 이해할 수 있을까 생각했어요. 너무 어려워서 저도 거의 이해할 수 없었거든요. 저는 원어민인데, 학생들은 비원어민인데 어떻게 이해할 수 있을까 싶었죠. 그리고 어휘량이 큰 요인이라는 걸 확실히 알 수 있었습니다. 사실 그 문제 때문에 저는 어휘 연구자가 되기로 결심했어요. 그래서 일본에서 제가 볼 수 있는 것은, 한편으로는 입시가 너무 어려워서 중학교와 고등학교에 역효과(backwash effect)가 있다는 겁니다. 교과서의 어휘와 문법이 매우 어렵죠. 제가 연구한 바에 따르면, 일본 고등학교 EFL 교과서는 영어 신문, 타임지, 심지어 해리 포터 책보다 읽기 난이도가 더 높습니다. 즉, 원어민용 자료가 일본 고등학교 교과서보다 더 쉽다는 뜻이죠. 그래서 이 점이 배경이 되어 질문에 답하자면, 저는 일본에서 EFL 학생들이 접하는 텍스트 난이도에 대해 매우 우려하고 있습니다. 이로 인해 학생들의 자신감과 동기 부여에 매우 부정적인 영향을 미친다고 봅니다. 게다가 일본에서는 의사소통 중심 교수법이 매우 뒤처져 있고, 여전히 교사 주도 수업, 강의식 수업, 오류 수정이 주된 방식입니다. 학생들은 번역하고 교정받고, 또 번역하고 교정받는 과정을 반복하는데, 교재가 너무 어려워서 부정적인 악순환이 생깁니다. 학생들은 영어를 좋아하고 자신감과 동기를 가지고 시작하지만, 공부할수록 그 자신감과 동기가 떨어지죠. 그래서 제가 일본을 위해 만들고 싶었던 도구 중 하나는 고빈도 단어 목록이었어요. 학생들이 긍정적인 선순환에 들어갈 수 있도록 돕기 위해서요. 또 하나 제가 정말 필요하다고 느낀 것은 광범위한 단계별 읽기의 중요성이었습니다. 학생들이 실제로 읽을 수 있는 읽기 자료에 노출되는 것이죠. 일본 고등학교 교과서 한 페이지를 보면 학생들이 평균 20개 이상의 단어를 번역하고 있습니다. 이는 텍스트 이해도가 약 60%라는 뜻인데, 60% 이해도로는 읽기가 거의 불가능하다는 연구가 거의 모두 보여줍니다. 보통 80% 이상이어야 읽기가 가능하죠. 그래서 한편으로는 어휘를 늘려 90% 이상으로 올리려고 노력하지만, 학생들은 그걸 기다릴 수 없습니다. 그래서 단계별 읽기 자료는 학생들이 바로 95% 수준에서 읽을 수 있는 자료에 노출되도록 돕습니다. 저는 무료 단계별 읽기 웹사이트와 단계별 읽기 자료를 만들 수 있는 코퍼스 기반 도구들을 만들었어요. 이 모든 것은 일본에서 학생들이 접하는 자료가 너무 어려워서 동기와 자신감, 영어에 대한 사랑이 떨어지는 큰 문제에 집중하기 위한 것입니다. 일본에는 세계에서 가장 뛰어난 단계별 읽기와 광범위 읽기 지지자이자 교사들이 많이 있습니다. 좋은 연구도 많이 이루어지고 있죠. 일본에서 가장 잘하는 학교들은 학생들에게 광범위한 단계별 읽기를 요구하는 학교들입니다. 사실 저희 학과에서도 1, 2학년 학생들은 꽤 많은 단계별 읽기와 단계별 듣기를 필수로 하고 있습니다. 이는 학생들에게 이해 가능한 입력, 즉 많은 입력을 제공하여 어휘뿐 아니라 다양한 다른 능력도 함께 키우기 위함입니다.
제이
멋지네요, 정말 흥미롭습니다. 청취자들에게 추천할 만한 특정 텍스트 분석기가 있나요?
찰리
제 말은, 확실히 저희 것도 좋은 도구입니다. 저희는 온라인 등급 텍스트 편집기, 줄여서 OGTE라는 도구를 만들었어요. 이 도구는 물론 제 단어 목록뿐만 아니라 옥스포드 목록, 케임브리지 목록 등 많은 다른 단어 목록도 활용합니다. 이 도구는 교사와 콘텐츠 개발자가 기존 콘텐츠의 난이도를 쉽게 평가하고, 그 콘텐츠를 더 낮은 수준으로 수정하거나 특정 수준에 맞는 새 콘텐츠를 만들 수 있도록 돕기 위해 만들었어요. 다른 도구들도 많이 있지만, 제 친구들이 만든 도구들이 많습니다. 톰 콥은 'vocab profile'이라는 훌륭한 도구를 가지고 있고, 일본에 있는 또 다른 좋은 친구 로렌스 앤서니는 'antwoord profiler'를 가지고 있죠. 좋은 도구들이 많아요. 저희가 만든 OGTE는 다른 도구들이 원래 연구자들을 위해 만들어진 경우가 많아서 다소 어렵고 다루기 복잡한 반면, 저희는 교사와 콘텐츠 개발자를 대상으로 더 직관적이고 사용하기 쉬운 도구를 만들려고 했습니다. 그래서 저희 도구가 좋은 출발점이라고 말씀드리고 싶고, 제가 언급한 다른 두 도구인 antwoord profiler와 vocab profile도 확실히 추천할 만합니다.
제이
네, 그들은 좋은 텍스트 분석기가 되고, 당신이 콘텐츠 제작에 OGTE를 사용하기 시작하면 꼭 확인해 보세요. 직관적으로 단어가 빈도 목록에서 어디에 위치하는지 생각하는 게 완전히 틀릴 수 있기 때문에, 그 이후로는 뒤돌아볼 수 없을 거예요.
찰리
채팅에 링크를 올릴게요. 이건 제 무료 자료 링크예요. 그 한 페이지에서 제 어휘 자료, 단계별 읽기 및 듣기 자료, 어휘 테스트, 그리고 코퍼스 도구 링크를 모두 얻을 수 있어요. 거의 모든 게 한 페이지에 있어요.
제이
좋아요. 이 팟캐스트 아래 설명란에 넣을게요. 듣고 계신 분들은 꼭 클릭해 보세요, 실제로 당신의 교직 경력을 바꿀 수도 있다고 생각해요.
찰리
음, 우리가 바라는 건 사람들이 자신이 하는 일을 더 잘할 수 있도록 돕는 거예요,
제이
오, 보세요, 저는 어떤 초급 교사가 교실에 들어갈 때 당신과 당신의 무료 자료를 잠시라도 함께할 수 있다면, 그들이 가르치는 방식에 큰 차이가 있을 거라고 생각해요. 확실히 그렇죠. 좋아요. 자, 다시 주제를 바꿔볼게요. 제가 관심 있는 분야인 컴퓨터 보조 언어 학습에 대해 이야기하고 싶어요. 이 목적을 위해 소프트웨어를 개발하고 있거든요. 큰 그림에서 당신의 생각을 듣고 싶어요. 우리가 올바른 방향으로 가고 있다고 생각하나요? 이 기술이 실제로 언어 학습을 더 효율적으로 만들고 있나요? 아직 갈 길이 멀까요? 아니면 뭔가 훌륭한 단계에 가까워지고 있나요? 어떻게 생각하세요?
찰리
아, 그건, 그건 잘못된 사람에게 물어보신 거예요. 왜냐하면 저는 80년대 후반, 90년대 초반에 소니 언어 연구소의 책임자로 있을 때 컴퓨터 보조 언어 학습(CALL)을 시작했거든요. 그 당시 기술은 오디오링구얼 방법에 기반한 언어 실험실이었어요. 그리고 그 기술을 전국의 고등학교, 대학, 중학교 등에 판매하고 있었죠. 그게 큰 추진력이었어요. 하지만 저는 그 일을 시작할 때 기술에 대해 많이 알지 못했어요. 하지만 그 장비와 접근법에 대량으로 노출되고 학생들과 교사, 학교와 함께 일하면서 초기 CALL에 대해 매우 부정적인 태도를 갖게 되었죠. 왜냐하면 그 당시 초점은 정말 비즈니스 모델이었고, 학생과 학교가 가장 비싼 장비를 사도록 하는 데 있었으며, 그것이 언어 학습 문제를 해결할 것이라고 약속했지만 실제로는 아무 문제도 해결하지 못했거든요. 그 언어 실험실의 큰 문제 중 하나는 사용하기 매우 복잡했다는 점이에요. 대부분의 교사들은 기술을 사용할 자신감이 없었고, 교육도 거의 제공되지 않았어요. 그래서 완전한 실패였죠. 몇 년 후, 석사와 박사 학위를 마치고 대학 교수가 되었을 때, 대학에서 저에게 "찰리, 소니에서 많은 경험을 했으니 우리 대학에 CALL 실험실을 만들어야 하는데 당신이 프로젝트를 이끌어 줬으면 한다"고 했어요. 그 나쁜 경험들을 가지고 저는 조건을 내걸었죠. 첫째, 예산 전부를 기술에 쓰지 말고 적어도 절반은 교사 교육과 지원, 학생 교육과 지원에 써야 하며, 실험실에 전임 직원이 있어야 한다고요. 사실 15년 전쯤 로렌스 얼바움과 함께 'New Perspectives on CALL'이라는 책을 썼는데, 그 경험들을 바탕으로 한 거였어요. 그런데 학교는 놀랍게도 "아니, 당신이 프로젝트 책임자고 선택권이 없다. 예산 전부를 기술에 쓸 거다. 왜냐하면 비디오 온 디맨드를 하고 있고 와세다 대학을 이겨야 하니까"라고 했어요. 그래서 저의 초기 경험 두 번 모두 매우 부정적이었고 실패했죠. 그 대학을 떠나 독립한 후에도 저는 기술의 가능성에 관심이 있었지만, 얼마나 쉽게 잘못될 수 있는지 직접 봤어요. 그래서 저에게 시작점은 기술이 아니라 항상 교수법이에요. 저는 교실에서 무엇을 이루고 싶은지 생각하고, 그 다음에 어떤 교수학적 필요나 문제를 해결하는 방식으로 기술을 적용해요. 보통 가능한 한 저기술(low-tech) 솔루션을 선택하죠. 기술이 높을수록 문제가 더 많이 생기고 교사와 학생이 배우기 더 어려우니까요. 지난 10년에서 15년 동안 저는 완전히 다른 방향으로 나아갔어요. 여전히 기술을 많이 사용하지만, 가장 진보된 도구는 아니고 모두 과학적이고 교수학적으로 기반을 둔 것들이에요. 그래서 그 덕분에 더 많은 사람들을 도울 수 있다고 생각해요.
제이
네, 맞아요. 저도 동의합니다. 기술은 교수법에 맞아야 하고 그 반대가 되어서는 안 된다고 생각해요. 정말 흥미롭네요. 좋아요. 음, 이 정도면 대화는 충분할 것 같아요. 정말 즐거웠습니다. 그리고 업계에 큰 기여를 하신 분의 이야기를 들을 수 있어서 정말 좋았어요. 아마 지금은 아니더라도, 분명 언젠가는 더 많은 사람들이 당신의 자료를 접하면서 큰 영향을 받게 될 거라고 확신합니다.
찰리
오래된 세대 서비스 목록은 1953년에 발표되었고, 저는 2013년 60주년 기념으로 제 목록을 발표했습니다. 그 오래된 목록은 60년 동안 지속되며 교사들을 도왔습니다. 제 희망은 이 모든 도구들과 목록, 그리고 우리가 만드는 모든 것들이 앞으로도 적어도 60년은 사람들을 도울 수 있기를 바라는 것입니다. 그게 멋진 목표가 될 것 같아요.
제이
멋지네요, 설명란에 당신의 링크를 넣을게요. 듣고 계신 분들은 charlie-browne.com에서 모든 자료를 찾으실 수 있습니다. 좋아요. 찰리, 혹시 더 하시고 싶은 말 있으신가요?
찰리
아, 당신과 이야기하는 게 정말 즐거웠어요. 그리고, 만약 원하신다면, 제 대학이나 회사 이메일을 팟캐스트 아래에 올려도 좋고, 사람들이 질문이 있거나 궁금한 점이 있으면 언제든 도와드리고 싶어요. 그게 제가 이 일을 하는 가장 큰 이유입니다.
제이
훌륭해요, 좋은 내용이네요. 이야기 나눠주셔서 정말 감사합니다.
찰리
정말 그렇습니다. 대단히 감사합니다.
아웃트로
E2 Talks를 들어주셔서 감사합니다. LinkedIn에서 E2를 팔로우하는 것도 잊지 마세요. 그리고 이 팟캐스트 구독도 꼭 해주세요.
E2Talks는 교육 산업 종사자를 위한 팟캐스트입니다. 교육 산업에 종사하고 계시며 E2가 귀 조직에 적합하다고 생각하신다면, 여기를 클릭하여 관심 의사를 보내주세요.