Di Balik PTE Academic: John de Jong membahas tes, tugas, penilaian, konspirasi, berbicara, dan keadilan bersama Jay

Di E2Language, kami bertekad untuk mencari tahu kebenaran tentang tes bahasa Inggris. Kami tidak suka berspekulasi tentang cara terbaik mempersiapkan dan lulus tes ini karena kami memahami bahwa tes ini adalah rintangan besar bagi Anda. Sebaliknya, kami ingin menemukan fakta-faktanya. Kami percaya bahwa dengan informasi yang akurat dan pengajaran yang baik, pengalaman mengikuti tes bisa menjadi pengalaman yang mendebarkan dan memvalidasi.

Baru-baru ini Jay berkesempatan berbicara dengan Profesor John H. A. L. De Jong*, arsitek di balik PTE Academic dari Pearson. John de Jong bekerja di Pearson dari 2006 hingga 2016 dan menjabat sebagai Wakil Presiden Pengembangan Tes dan Wakil Presiden Senior Standar Global. Selama waktu ini ia mengembangkan Pearson Test of English Academic (PTE Academic). Dia tentu saja otoritas dalam pengujian bahasa dan mungkin otoritas utama dalam PTE Academic.

Dalam percakapan ini, Jay berbincang dengan John de Jong tentang mengapa Pearson menciptakan PTE Academic sejak awal, mengapa ada 20 tugas berbeda, bagaimana hubungan penilaian bekerja, apakah sistem ini bisa ‘dimanipulasi’ atau tidak, bagaimana penilaian berbicara bekerja dan mengapa PTE Academic adalah tes bahasa Inggris yang ‘adil’:

Jay: Anda adalah salah satu arsitek utama PTE-A. Mengapa pasar membutuhkan tes bahasa Inggris lain dengan IELTS dan TOEFL yang sudah mapan?

John: Sebenarnya, saya adalah arsitek utama PTE Academic. Baik TOEFL maupun IELTS adalah tes yang agak lama menggunakan teknologi dan konsep pengujian bahasa yang sudah ketinggalan zaman. Pearson mengontrak saya untuk membuat tes bahasa Inggris baru dan saya ingin menciptakan tes bahasa yang nyata. Penulis soal tradisional membuat beberapa teks di sekitar masalah bahasa. Teks tersebut tidak mungkin terjadi dalam kehidupan nyata karena dibuat untuk memasukkan masalah bahasa. Untuk PTE Academic, penulis soal diwajibkan membuat pertanyaan berdasarkan contoh bahasa yang ada. Teks tidak dibuat untuk tes, melainkan ditemukan. Penulis soal harus menyediakan sumber contoh bahasa mereka. Dengan banyaknya bahasa dalam buku, rekaman, dan di Internet, penulis soal dapat menemukan contoh bahasa nyata yang akan ditemui peserta tes dalam studi mereka. Teks tentang subjek akademik, tapi juga tentang kehidupan mahasiswa. Misalnya, tes bahasa tradisional menggunakan bahasa yang sudah diskrip untuk soal mendengarkan yang kemudian dibacakan oleh aktor, menghasilkan bahasa yang sangat tidak alami, tanpa kontraksi, elisi, dll. yang terjadi dalam penggunaan bahasa langsung. Pengguna bahasa biasa berbicara dengan kalimat terputus-putus, mengulang dan mengelilingi elemen penting.

Jay: Saya sangat suka mengajar PTE-A karena setiap tugas fokus pada keterampilan bahasa Inggris yang berbeda. Misalnya – dan koreksi saya jika salah – tapi Membaca: Isi Kekosongan fokus pada ‘kolokasi’ sementara Membaca dan Menulis: Isi Kekosongan fokus pada ‘pilihan kata’. Bisakah Anda jelaskan mengapa Anda memutuskan membuat 20 tugas?

John: Saya memilih menggunakan banyak jenis tugas bahasa yang berbeda untuk mewakili bahasa sebagaimana terjadi dalam kehidupan nyata dan untuk memungkinkan menilai kemampuan bahasa dari banyak sudut sehingga memastikan karakter multifaset kemampuan bahasa lebih baik terwakili. Berbagai jenis soal menyajikan berbagai aspek bahasa. Soal dapat menilai keterampilan terintegrasi atau fokus pada satu keterampilan saja. Pendekatan ini juga memberi siswa berbagai kesempatan untuk menunjukkan kemampuan mereka menguasai bahasa Inggris. Mereka tidak bergantung pada kemampuan menyelesaikan satu jenis masalah bahasa tertentu.

Jay: Beberapa tugas PTE-A ‘saling terkait’. Berbicara: Membaca Keras, misalnya, berkontribusi pada nilai berbicara dan membaca Anda sementara Mendengarkan: Merangkum Teks Lisan memberikan poin untuk nilai mendengarkan dan menulis Anda. Mengapa Anda memutuskan menggabungkan keterampilan ini?

John: Saya memilih menyajikan yang disebut soal terintegrasi, soal yang menilai lebih dari satu keterampilan, untuk mencerminkan penggunaan bahasa dalam kehidupan nyata. Dalam menggunakan bahasa, pengguna sering bergantung pada lebih dari satu keterampilan. Misalnya, saat menanyakan di mana apotek terdekat di kota asing, bahasa yang digunakan harus mampu merumuskan pertanyaan dan memahami jawaban. Saat mendengarkan kuliah, siswa harus mampu mengikuti apa yang dikatakan dan mencatat, yaitu menulis.

Jay: Sayangnya, banyak guru di internet fokus pada ‘trik’ dan ‘memanipulasi algoritma’ daripada meningkatkan keterampilan bahasa Inggris siswa mereka sebelum mengikuti PTE-A. Apakah mungkin seseorang dengan tingkat bahasa Inggris rendah ‘menipu’ komputer agar mendapatkan skor tinggi?

John: Saat fase awal saya menyajikan beberapa soal prototipe kepada kelompok siswa, mereka mengatakan bahwa untuk berhasil mengerjakan soal tersebut mereka tidak bisa bergantung pada pelatihan tes tradisional tetapi harus benar-benar menguasai bahasa Inggris dan oleh karena itu persiapan tes terbaik adalah membaca koran dan buku serta menonton televisi. Memang, saya yakin bahwa skor tinggi pada PTE Academic lebih mudah dicapai dengan melatih penggunaan bahasa daripada mencoba menipu sistem.

Jay: Banyak siswa kami mengalami kesulitan khusus dengan skor berbicara mereka. Apa saran Anda untuk kandidat yang mencoba meningkatkan skor berbicara mereka?

John: Saran saya adalah mereka merekam contoh penggunaan bahasa nyata (berita di tv, lagu dari rapper, program diskusi radio, dll.) dan memutarnya kembali kalimat demi kalimat. Pertama, untuk memastikan mereka benar-benar memahami dan mencari kata yang tidak diketahui, dan pada pemutaran kedua atau ketiga mengulangi setiap kalimat secara verbatim, mencoba meniru sedekat mungkin kecepatan dan intonasi aslinya. Kadang lakukan sendiri dan kadang dengan teman atau kolega yang menunjuk perbedaan antara aslinya dan produksi mereka sendiri. Pendekatan ini akan ‘membuka’ telinga mereka terhadap bahasa Inggris sekaligus membantu memperluas kosakata mereka.

Jay: Banyak siswa berkomentar bahwa mereka merasa PTE-A ‘lebih adil’ daripada tes bahasa Inggris lain karena dinilai oleh komputer, bukan manusia. Seberapa baik PTE-A dalam menilai esai dan pengiriman berbicara?

John: Pertama, perbedaan jelas antara penilaian manusia dan mesin adalah manusia berbeda-beda, sedangkan mesin tidak. Mesin akan memberikan nilai yang sama persis pada esai atau jawaban lisan apakah itu pertama, kedua, atau ketiga kali dinilai. Namun, orang berbeda memiliki gaya dan norma yang berbeda, bahkan satu orang bisa menilai berbeda di awal hari dan di malam hari saat lelah. Kedua, bukti kualitas penilaian mesin terlihat dari fakta bahwa penilaian mesin terbukti berkorelasi lebih baik dengan penilai manusia yang terlatih dan berpengalaman daripada dengan penilai pemula.

*Profesor John H. A. L. De Jong memiliki Master of Arts dalam General Linguistics, French, dan English Languages dari Leiden University serta Ph.D. dalam Educational Measurement dari Twente University. Ia mengkhususkan diri dalam pengukuran empiris kemampuan bahasa dan mendorong pengembangan skala pelaporan standar internasional kemampuan bahasa.

Pada tahun 2000, John de Jong mendirikan perusahaan konsultan LTS (Language Testing Services) untuk menyediakan pelatihan dan layanan konsultasi tentang pendidikan bahasa dan pengujian bahasa. Ia telah bekerja dengan Ordinate Corporation di California USA, Australian Council for Educational Research, Council of Europe, Dutch Ministry of Education, Culture and Science, Dutch Ministry of Justice, World Bank, dan OECD di mana ia juga menjadi salah satu Penasihat Teknis untuk Programme for International Student Assessment (PISA) sejak 1998.

John de Jong juga terlibat dalam proyek Council of Europe sejak 1991 yang bekerja pada pendefinisian kerangka kerja bersama untuk pembelajaran bahasa, pengajaran, dan pengujian. Ia juga bekerja pada penetapan beban belajar bahasa asing sebagai fungsi dari bahasa pertama.