Testing proficiency outcomes in first-year basic English at UPRM

Abstract

This study focuses on the levels of English Language Proficiency (ELP) current cohorts of incoming college students possess and acquire after a semester of instruction in undergraduate English courses at the University of Puerto Rico in Mayaguez. The goal of the study is to identify the proficiency gaps that may exist between the sampled population and whether ELP within the three target language skills; vocabulary, reading comprehension, and grammar, improved after coursing a semester in Basic English II at UPRM. Data collection sampled a population of 142 students of varying linguistic backgrounds and utilized a diagnostic exam administered at the beginning and end of the academic semester to determine changes in student proficiency. The results were analyzed using descriptive and inferential statistics employing a paired samples t-test. The tests were broken down into overall and individual skill analyses to better analyze proficiency changes within the target skills. Descriptive analysis showed a 10% improvement in overall grade scores, even though 27% of the sample population continued to fail the diagnostic after completing the course. Additionally, inferential statistics concluded a small significant difference between pre-and post-test data based on the sampled paired t-test results. These results suggest that the majority of students enrolled in the Basic English track curriculum are proficient in the English language. However, there are potential concerns for the effectiveness of the current curriculum and assessments due to many participants failing the diagnostic after having received a semester of instruction.

Este estudio se centra en los niveles de dominio del idioma inglés (ELP, por sus siglas en inglés) que los estudiantes universitarios entrantes poseen y adquieren después de un semestre de instrucción en cursos de inglés subgraduado en la Universidad de Puerto Rico en Mayagüez. El objetivo del estudio es identificar las diferencias de competencia que puedan existir entre la población muestreada y si el ELP dentro de las tres destrezas lingüísticas; vocabulario, comprensión de lectura y gramática, mejoró después de cursar un semestre de Inglés Básico II. En la recolección de datos se muestreó una población de n=142 estudiantes de diversos orígenes lingüísticos y se utilizó un examen diagnóstico administrado al principio y al final del semestre académico para determinar los cambios en la competencia de los estudiantes. Los resultados se analizaron mediante estadísticas descriptivas e inferenciales empleando una prueba t de muestras pareadas, las pruebas se desglosaron en análisis de habilidades colectivos e individuales para analizar mejor los cambios de competencia dentro de las destrezas. El análisis descriptivo mostró una mejora del 10% en las puntuaciones colectivas, a pesar de que el 27% de la población de la muestra siguió suspendiendo el diagnóstico después de completar el curso. Además, las estadísticas inferenciales concluyeron una pequeña diferencia significativa entre los datos pre- y post- prueba, basándose en los resultados de la prueba t pareada.