Underrepresentation of the construct in Spanish standardized foreign language exams: a computer assisted exam proposal

• Fernandez Alvarez, Miguel ^[1] ; García Laborda, Jesus Garcia Laborda ^[2] ; Magal-Royo, Teresa ^[3]
  1. [1] Universidad Politécnica de Madrid

     Universidad Politécnica de Madrid

     Madrid, España

     
  2. [2] Universidad de Alcalá

     Universidad de Alcalá

     Alcalá de Henares, España

     
  3. [3] Universidad Politécnica de Valencia

     Universidad Politécnica de Valencia

     Valencia, España

     

  Mostrar afiliaciones +
• Localización: Porta Linguarum: revista internacional de didáctica de las lenguas extranjeras, ISSN 1697-7467, Nº. Extra 4, 2022 (Ejemplar dedicado a: Monográfico), págs. 27-45
• Idioma: inglés
• DOI: 10.30827/portalin.vi.21393
• Títulos paralelos:
  • Subrepresentación del constructo en exámenes estandarizados de lengua extranjera en España: propuesta de examen asistido por ordenador
• Enlaces
  • Texto completo (pdf)
• Resumen
  • español

    Las pruebas estandarizadas son una realidad en el sistema español en un mundo globalizado. Muchos diseñadores de pruebas de idiomas que afirman que el modelo actual de evaluación tiene poco que ver con el uso real del idioma, porque no considera factores como el cambio del papel al ordenador, la búsqueda de información y otros usos del lenguaje o la comunicación multimodal (García Laborda y Fernández Álvarez, 2021). Este artículo trata sobre (1) un constructo novedoso para las pruebas que incorpora nuevas funcionalidades del lenguaje más actual adecuado para un entorno académico; y (2) la propuesta y diseño de un examen multimodal en línea que se adapte a las nuevas necesidades de evaluación de idiomas para el Examen de Acceso a la Universidad. Este artículo teórico comienza con un análisis de la investigación actual para mostrar la necesidad de un cambio en el constructo y concluye proponiendo un modelo para el Examen de Acceso a la Universidad, basado en un nuevo constructo de dominio del idioma e interacción multimodal para pruebas computarizadas. El documento concluye que este modelo puede cambiar la forma en que entendemos los exámenes basados ​​en tecnología y podría aplicarse a la mayoría de los exámenes actuales.

  • English

    Standardized tests are a reality in a globalized world and, consequently, in the Spanish system. Language test developers have already claimed that the current model of assessment has little to do with real language use, as factors such as the shift from paper to computer, information search and other uses of language or multimodal communication are not being considered (García Laborda & Fernández Álvarez, 2021). This theoretical paper proposes (1) a novel construct for testing that incorporates new functionalities which have been shown able to test appropriately language performance in academic settings; and (2) the proposal and design of an online multimodal exam that adapts to the new needs for language assessment in the University Entrance Examination. It begins with an analysis of current research to show the need for a change in the construct, and concludes by proposing a model for this high-stakes exam, based on a new construct of language proficiency and multimodal interaction for computer-based exams. The paper concludes that this model can change the way we understand technology-based exams and could be applicable to most current exams.

• Referencias bibliográficas
  • Amengual Pizarro, M. (2006). Análisis de la prueba de inglés de selectividad de la Universitat de les Illes Balears. Ibérica, 11, 29-59.
  • Bachman, L. F. (1990). Fundamental considerations in language testing. Oxford University Press.
  • Bachman, L. F. & Palmer, A. S. (1996). Language Testing in Practice. Oxford University Press.
  • Bachman, L. F. & Palmer, A. S. (2010). Language Assessment in Practice. Oxford University Press.
  • Bruner, J. S. (1961). The act of discovery. Harvard Educational Review, 31, 21–32.
  • Boals, T., Kenyon, D. M., Blair, A., Cranley, M. E., Wilmes, C., & Wright, L. J. (2015). Transformation in K-12 English language proficiency...
  • Campione, J. C., Brown, A. L. (1987) Linking dynamic assessment with school achievement. In Lidz, C. S. (Ed.) Dynamic Assessment: An interactional...
  • Canale, M. (1983). From communicative competence to communicative language pedagogy. In J. C. Richards & R. W. Schmidt (Eds.), Language...
  • Canale, M. & Swain, M. (1980). Theoretical bases of communicative approaches to second language teaching and testing. Applied Linguistics,...
  • Celce-Murcia, M., Dornyei, Z. & Thurrell, S. (1995). Communicative Competence: A Pedagogically Model with Content Specifications. Issues...
  • Chapelle, C. A., Enright, M. K., Jamieson, J. M. (Eds.) (2008). Building a validity argument for the Test of English as a Foreign Language....
  • Chapelle, C., Grabe, W. & Berns, M. (1997). Communicative Language Proficiency: Definition and Implications for TOEFL 2000. Educational...
  • Choi, J., & Yi, Y. (2016). Teachers’ Integration of Multimodality into classroom practices for English Language Learners. TESOL Journal,...
  • Cinganotto, L. (2019). Online Interaction in Teaching and Learning a Foreign Language: an Italian Pilot Project on the Companion Volume to...
  • Chomsky, N. (1965). Aspects of the theory of syntax. MIT Press.
  • Council of Europe (2020). Common European Framework of Reference for Languages: Learning, teaching, assessment – Companion volume. Council...
  • Díez Bedmar, M. B. (2011). The English exam in the University Entrance Examination: An Overview of Studies. Revista Canaria de Estudios Ingleses,...
  • Fatemipour, H., & Jafari, F. (2015). The Effect of Dynamic-Assessment on the Development of Passive Vocabulary of Intermediate EFL Learners....
  • Fernández Álvarez, M. & García-Hernández, S. (en Prensa). Teachers’ perceptions of linguistic mediation in the Curriculum for Advanced...
  • García Laborda, J. (2006). Analizando críticamente la Selectividad ¿Todos los estudiantes tienen las mismas posibilidades? TESOL-Spain Newsletter,...
  • García Laborda, J. (2010). ¿Necesitan las universidades españolas una prueba de acceso informatizada? El caso de la definición del constructo...
  • García Laborda, J. (2012). Presentación. De la Selectividad a la Prueba de Acceso a la Universidad: pasado, presente y un futuro no muy lejano....
  • García Laborda, J., Amengual Pizarro, M., Litzler, M. F., García Esteban, S. & Otero de Juan, N. (2017). Student Perceptions of the CEFR...
  • García Laborda, J. & Fernández Álvarez, M. (in press). Multilevel Language tests: Walking into the land of the unexplored. Language learning...
  • García Laborda, J. Giménez López, J. L., & Magal Royo, M. T. (2011). Validating Mobile Devices in the Spanish University Entrance Exam...
  • García Laborda, J. & Gimeno Sanz, A. (2008). Adaptación del examen de inglés de las pruebas de acceso a la universidad a un entorno informático:...
  • García Laborda, J., & Magal Royo, T. (2009) Training senior teachers in compulsory computer based language tests. Procedia - Social and...
  • García Laborda, J., & Martín-Monje, E. (2013). Item and test construct definition for the new Spanish Baccalaureate final Evaluation:...
  • Kramsch (1986). From Language Proficiency to Interactional Competence. The Modern Language Journal, 70(4), 366-372.
  • McNamara, T. (2000). Language Testing. Oxford University Press.
  • McLeod, S. A. (2019). Bruner - learning theory in education. Simply Psychology. Retrieved from: https://www.simplypsychology.org/bruner.html
  • Motallebzadeh, K. & Moghaddam, P. B. (2011). Models of Language Proficiency: A Reflection on the Construct of Language Ability. The International...
  • Oller, J. W. (1979). Language Tests at School. Longman.
  • Oller, J. W. (1983). Issues in language testing research. Newbury House.
  • Pacheco B. A. and Souza-Concilio, I. A. (2013). Multimodal interfaces: An enactive approach, IEEE 4th International Conference on Cognitive...
  • Poehner, M. E. (2007). Beyond the Test: L2 Dynamic Assessment and the Transcendence of Mediated Learning. Modern Language Journal, 91(3),...
  • Poehner, M. E. (2008). Dynamic Assessment. A Vygotskian Approach to Understanding and Promoting L2 Development. Springer.
  • Poehner, M. E. (2018). Probing and provoking L2 development: The object of mediation in Dynamic Assessment and mediated development. In Lantolf,...
  • Poehner, M. E., Zhang, J. & Lu, X. (2015). Computerized Dynamic Assessment (C-DA): Diagnosing L2 development according to learner responsiveness...
  • Poehner, M. E. & Lantolf, J. P. (2005). Dynamic assessment in the language classroom. Language Teaching Research, 9(3), 233-265.
  • Ruiz-Lázaro, J., González Barbera, C. y Gaviria Soto, J.L. (2021). Las pruebas de inglés para acceder a la Universidad. Una comparación entre...
  • Sanz Sainz, I. & Fernández Álvarez, M. (2005). La validez del examen de inglés en Selectividad. In Herrera Soler, H. & García Laborda,...
  • Vergara Cabarcas, L. K., López Caraballo, J. L., Castellón Barrios, D. J., Vásquez Rossi, C. A. & Becker Arroyo, E. A. (2019). Dynamic...
  • Winke, P., Lee, S., Ahn, J. I., Choi, I., Cui, Y., & Yoon, H. (2018). The cognitive validity of child English language tests: What young...