PTE Academicの裏側：ジョン・デ・ヨングがジェイとテスト、タスク、スコアリング、陰謀論、スピーキング、公平性について語る
E2Languageでは、英語の言語テストの真実を見つけ出すことに力を入れています。これらのテストの準備や合格方法について推測するのは好きではありません。なぜなら、それらが皆さんにとって大きな障害であることを理解しているからです。代わりに、事実を明らかにしたいのです。正確な情報と良い指導があれば、テストを受ける経験は刺激的で納得のいくものになると信じています。
最近、ジェイはピアソンのPTE Academicの設計者であるジョン・H・A・L・デ・ヨング教授*と話す機会を得ました。ジョン・デ・ヨングは2006年から2016年までピアソンに勤務し、テスト開発担当副社長およびグローバル基準担当上級副社長を務めました。この期間にPearson Test of English Academic (PTE Academic)を開発しました。彼は言語テストの権威であり、おそらくPTE Academicの権威でもあります。
この対談で、ジェイはジョン・デ・ヨングに、なぜピアソンが最初にPTE Academicを作ったのか、なぜ20の異なるタスクがあるのか、スコアリングの相互関係がどのように機能するのか、システムが‘攻略’できるのかどうか、スピーキングのスコアリングがどのように行われるのか、そしてなぜPTE Academicが‘公平な’英語テストなのかについて話を聞きました：
ジェイ：あなたはPTE-Aの主要な設計者の一人でした。IELTSやTOEFLがすでに確立されている中で、なぜ市場は別の英語テストを必要としたのでしょうか？
ジョン：実際、私はPTE Academicの主要な設計者でした。TOEFLもIELTSも、やや古いテストであり、昨日の技術や昨日の言語テストの概念を使っています。ピアソンは私に新しい英語テストの開発を依頼し、私は本物の言語テストを作りたいと思いました。従来の問題作成者は言語問題を含むテキストを作成しますが、そのテキストは実生活ではほとんど起こりません。PTE Academicの問題作成者は、実際に存在する言語のサンプルに基づいて問題を作成する必要があります。テキストはテストのために書かれるのではなく、見つけられます。問題作成者は言語サンプルの出典を提供しなければなりません。書籍、録音、インターネット上の膨大な言語から、受験者が学習で遭遇するような実際の言語サンプルを見つけることができます。学術的なテーマだけでなく、学生生活に関するテキストも含まれます。例えば、従来の言語テストでは、リスニング問題に台本付きの言語を使い、俳優が読むため非常に不自然な言語で、縮約や脱落など実際の言語使用に見られるものがありません。通常の言語使用者は途切れ途切れの文で話し、重要な要素を繰り返したり回りくどく表現したりします。
ジェイ：PTE-Aの指導が好きなのは、各タスクが異なる英語スキルに焦点を当てているからです。例えば、間違っていたら訂正してくださいが、Reading: Fill in the Blanksは「コロケーション」に焦点を当てていて、Reading and Writing: Fill in the Blanksは「語彙選択」に焦点を当てています。なぜ20のタスクを作ることにしたのか教えていただけますか？
ジョン：実生活での言語使用を最もよく表現し、言語能力の多面的な性質をよりよく反映するために、多くの異なる言語タスクを使うことにしました。さまざまな問題タイプは言語の多様な側面を提示します。問題は統合スキルに対応するものもあれば、単一のスキルに集中するものもあります。このアプローチは、学生に英語を使いこなす能力を示す多様な機会を提供します。特定の言語問題を解く能力に依存しません。
ジェイ：PTE-Aのタスクの中には「相互関連」しているものがあります。例えば、Speaking: Read Aloudはスピーキングとリーディングの両方のスコアに寄与し、Listening: Summarize Spoken Textはリスニングとライティングの両方のスコアにポイントを加えます。なぜこれらのスキルを統合することにしたのですか？
ジョン：いわゆる統合問題、複数のスキルに対応する問題を提示することにしたのは、実生活の言語使用を反映するためです。言語を扱う際、ユーザーはしばしば複数のスキルに依存します。例えば、外国の都市で最寄りの薬局を尋ねるとき、質問を作る言語能力と返答を理解する能力の両方が必要です。講義を聴くときは、話されている内容を理解し、メモを取る、つまり書く能力が必要です。
ジェイ：残念ながら、多くのインターネット上の教師は、PTE-Aを受ける前に学生の英語力を向上させるよりも、「トリック」や「アルゴリズムの攻略」に焦点を当てています。英語力が低い人がコンピューターを「騙して」高得点を取ることは可能でしょうか？
ジョン：初期段階でいくつかの試作問題を学生グループに提示したとき、彼らはこれらの問題で良い成績を取るには従来のテスト訓練に頼るのではなく、本当に英語を知っている必要があると言いました。したがって、最良のテスト準備は新聞や本を読み、テレビを見ることだと。実際、PTE Academicで高得点を取るには、システムを騙そうとするよりも言語使用の訓練が効果的だと確信しています。
ジェイ：多くの学生がスピーキングスコアに特に苦労しています。スピーキングスコアを向上させたい受験者にアドバイスはありますか？
ジョン：私のアドバイスは、実生活の言語使用のサンプル（テレビのニュース、ラッパーの歌、ラジオの討論番組など）を録音し、文ごとに再生することです。まず完全に理解し、知らない単語を調べ、2回目か3回目の再生で元の速度とイントネーションをできるだけ忠実に真似て文を繰り返します。時には一人で、時には友人や同僚と一緒に行い、元の音声と自分の発音の違いを指摘してもらいます。この方法は英語の耳を開き、語彙力も増やすのに役立ちます。
ジェイ：多くの学生は、PTE-Aは人間ではなくコンピューターが採点するため、他の英語テストより「公平」だと感じています。エッセイやスピーキングの提出物の採点はどの程度正確ですか？
ジョン：まず、人間と機械の採点の明らかな違いは、人間は採点者によって異なりますが、機械は異ならないことです。機械は同じエッセイやスピーキングの回答に対して、初回でも2回目でも3回目でも全く同じ点数を与えます。しかし、人間はスタイルや基準が異なり、同じ人でも朝と疲れた夜では採点が異なることがあります。次に、機械採点の質の証拠として、機械採点は厳しく訓練された経験豊富な人間の採点者との相関が、初心者の採点者との相関よりも高いことが示されています。
*ジョン・H・A・L・デ・ヨング教授は、ライデン大学で一般言語学、フランス語、英語の修士号を取得し、トゥウェンテ大学で教育測定学の博士号を取得しています。彼は言語能力の実証的尺度化を専門とし、国際的に標準化された言語能力報告尺度の開発を推進しています。
2000年にジョン・デ・ヨングは自身のコンサルタント会社LTS (Language Testing Services)を設立し、言語教育と言語テストに関するトレーニングとコンサルティングサービスを提供しています。彼は米国カリフォルニアのOrdinate Corporation、オーストラリア教育研究評議会、ヨーロッパ評議会、オランダ教育文化科学省、オランダ司法省、世界銀行、OECDと協力し、1998年以降は国際学生評価プログラム（PISA）の技術顧問の一人も務めています。
ジョン・デ・ヨングは1991年からヨーロッパ評議会のプロジェクトにも関わり、言語学習、教育、テストの共通枠組みの定義に取り組んでいます。また、母語を基にした外国語の学習負荷の確立にも携わりました。