La investigación en CALL

EUROCALL Research Policy Statement 2010

Introduction

Our pioneering research policy statement was formulated in 1999. Given the growing strength and development of Computer Assisted Language Learning research, the Eurocall Executive Committee decided that it was an appropriate time to revise the policy statement in order to take account of the many changes there have been over the last eleven years.

1. The Digital World and CALL Research

Since our last research policy statement, digital technology has moved to the centre of modern life. The pace of its adoption has been rapid, expanding the means by which we can communicate with one another. It has also come to play an important role in education at all levels and has been adopted most fully in the teaching and learning of languages, where the interface between language and digital communication is clear. Given this context, the need for research into the relationship between the digital media and education in general has never been more acute. It is vital that we take full advantage of digital technology based on the findings of rigorous world-class research.

2. The Need for CALL Research

This relates in particular to the nature of languages and communication. Language learning and teaching have been considerably enhanced by what the digital world makes possible, not least because it provides many new communication tools. It is essential, however, that CALL research, rather than the availability of new technologies and functionalities, should guide language pedagogies.

3. The State of CALL Research

Computer Assisted Language Learning (CALL) is an established but rapidly evolving academic field that explores the role of information and communication technologies in language learning and teaching. It includes highly interactive and communicative support for listening, speaking, reading and writing, involving extensive use of the Internet, and a wide range of activities and initiatives in materials development, pedagogical practice, and research.

Research in CALL has been carried out for more than thirty years, and has now reached a significant level of volume and maturity. It is a truly international discipline and has led to notable improvements in the teaching and learning of languages in secondary and higher education institutions worldwide.

3.1 CALL Associations

During that time a number of national and international Associations for CALL have been established including EUROCALL, CALICO (Computer Assisted Language Instruction Consortium), IALLT (International Association for Language Learning Technology) ADALSIC (Association pour le développement de l’apprentissage des langues par les systèmes d’information et de communication) and JALT (Japan Association for Language Technology). These associations organise conferences and other activities, and, along with other organisations, periodically gather for WORLDCALL, a quinquennial conference. Further national associations have been founded and this trend looks set to continue.

3.2 CALL Journals and Publications

One key contribution of these associations has been to develop research in CALL. Research is a key focus of their conferences. Their journals (ReCALL, CALICO Journal, ALSIC (Apprentissage des langues et systèmes d’information et de communication), and the IALLT Journal, along with Computer Assisted Language Learning and other mainstream language learning journals, have contributed to the vigorous research culture of this area. These journals are peer-reviewed and publish research findings that have been subject to the rigorous application of international research standards.

4. The CALL Research Field

The CALL research field, an established and significant area, is both rich and diverse. It is in constant evolution, alongside the technologies that it exploits. These technologies continue to expand and develop and the opportunities they present become clearer through time. The field involves, primarily, research into and evaluation of pedagogical practice in relation to language learning, for instance how translation and interpreting, or the development of oral skills are affected by the use of distance or blended learning strategies, the exploitation of multimedia technologies, web-enhanced language learning (WELL), Computer-Mediated Communication (CMC) and Mobile Assisted Language Learning (MALL), the use of corpora and of virtual worlds.

4.1 The Interdisciplinary Nature of CALL

It is important, however, to emphasise the interdisciplinary nature of CALL. CALL research can be said to belong to the field of Applied Language Studies and, in particular, to Second Language Acquisition (SLA), itself a rapidly evolving discipline. CALL and SLA are related to linguistics and its subdivisions: sociolinguistics, pragmatics, discourse analysis, psycholinguistics, semantics, phonetics, and corpus linguistics.
In addition, CALL is related to work in education, notably pedagogy, educational psychology, educational policy and management, the nature of learning processes, especially learning styles, classroom management and so on. There is also a clear link to computer science and informatics, natural language processing, cognitive science and psychology, socio-cultural theory, cultural studies, and media/ communication studies (including intercultural communication). In the humanities, there is an obvious interface with area studies and literary studies.

CALL is influenced by, and in turn influences, theory and research in all these related fields and others that have not been mentioned. In addition, key ethical issues are raised and need to be addressed.

4.2 The Classification of CALL Research

CALL work can be categorised as research, development, and practice and sits at the interface between them. Research may be separate from development, in that a researcher may explore the effects of using technology-based tools or materials developed by others, e.g. formative evaluations, or may focus entirely on theory development.

However, increasingly the term ‘development’ may refer to the creation of pedagogical materials (including the design, programming, and incorporation of actual lesson content), or the development of tools and applications into which others can insert language content which is driven by research activity. CALL development is often based on previous research and/or includes formative research, in which the materials are tried out on learners and feedback is sought as part of the developmental process. Reflective practice as part of this process then leads to the further development and refinement of CALL theory.

4.3 Research Methods

CALL research has a standardised terminology, has identified its points of reference, includes a significant number of sub-branches of activity and draws effectively from those areas of research with which it is in co-operation in creating its own theoretical and methodological paradigms as it moves into new areas. Given its interdisciplinary character, a range of different methods is employed in CALL research. Data collection and analysis may be qualitative and/or quantitative, empirical or phenomenological, practical or theoretical, experimental or ethnographic.

4.4 Criteria of Research Quality

The criteria that apply to CALL research are generic and are therefore similar to those that relate to other disciplines. The criteria outlined below are based on those that have recently been used for the Research Assessment Exercise in the UK.

Research is to be understood as original investigation undertaken in order to gain knowledge and understanding. It includes work of direct relevance to the needs of commerce, industry, and to the public and voluntary sectors; scholarship; the invention and generation of ideas, images, performances, artefacts including design, where these lead to new or substantially improved insights; and the use of existing knowledge in experimental development to produce new or substantially improved materials, devices, products and processes, including design and construction. The qualitative criteria are:

Originality : an intellectual advance or an important and innovative contribution to understanding and knowledge. This may include substantive empirical findings, new interpretations or insights, development of new theoretical frameworks and conceptual models, and innovative methodologies.

Significance : imaginative scope; importance of the issues addressed; impact or implications for other researchers and users.

Rigour : intellectual coherence, methodological precision and analytical power; accuracy and depth of scholarship; evidence of awareness of and appropriate engagement with other work in the field or sub-field

All of these criteria may be applied to the wide range of CALL research that is being carried out throughout the world.

5. Research Targets

We wish to stress the importance of the work of the national and international CALL associations and urge them to continue to collaborate on research projects in CALL, to develop journal and publishing outlets for CALL research and to ensure that significant sections of their conferences have a research focus. Specifically we recommend the following targets to be achieved over the next 5 years:

  • The application of rigorous standards in CALL Journals and other research outputs.
  • The establishment of a book series on key areas of CALL research.
  • The development of collaborative international research projects in CALL.
  • The provision of research training workshops for PhD students in CALL.
  • The development of an international on-line database of research publications in CALL.
  • The encouragement of the creation of CALL research outlets in languages other than English.

6. The Way Forward

Given the maturity of CALL research and the breadth of the CALL research community, it is vital that we continue to build on our achievements thus far. We need to assert and maintain the high quality of CALL research throughout the world.

La Asamblea General de Socios de EUROCALL, en sesión ordinaria celebrada el pasado 2 de septiembre de 2000 en la Universidad de Abertay Dundee (Escocia), aprobó por unanimidad de los presentes, a propuesta del Comité Ejecutivo, la creación de un Premio a la Investigación en CALL.

El premio surge con la intención de fomentar la investigación en todos los ámbitos relacionados con el aprendizaje de lenguas asistido por ordenador y de difundir los estudios teóricos y los conocimientos que se generan en este campo.

La Asociación pretende, por lo tanto, proporcionar una vía para dar a conocer los trabajos de investigación mediante la publicación de aquellos artíclulos que resulten premiados en la revista científica propia, ReCALL, publicada por Cambridge University Press en el Reino Unido.

El premio lleva consigo:

  • La publicación del artículo galardonado en ReCALL
  • Una inscripción gratuita al congreso anual de EUROCALL*
  • Una anualidad gratuita como socio individual de EUROCALL

Para poder concurrir al premio a la investigación, los candidatos deberán estar en proceso de realización o haber finalizado recientemente su tesis doctoral o un trabajo de investigación conducente a algún título de postgrado (Máster, Curso de Postgrado, etc).

Los artículos deberán enviarse antes del 1 de enero de cada año a la oficina central de EUROCALL, especificando claramente “EUROCALL Research Award”, y siguiendo las normas de estilo marcadas en la revista ReCALL.

Los autores deberán acompañar el artículo de un breve currículum vitae, así como un escrito en papel timbrado y debidamente firmada por el/la director/a del trabajo de investigación ratificando la situación investigadora del candidato/a.

Todos los artículos serán valorados por el Comité Científico de ReCALL y por el Comité Ejecutivo de EUROCALL, quienes tienen la potestad de otorgar o denegar el premio.

El nombre del/de la investigador/a galardonado/a se anunciará en el acto de clausura del congreso anual de EUROCALL y en la web de la Oficina Central de la Asociación. El artículo premiado se publicará en ReCALL.

El comité de valoración de la calidad científica podrá tomar la decisión de publicar más de un artículo enviado a concurso aunque sólo se otorgará un premio cada año.

* Se excluyen los gastos de alojamiento y transporte.

Investigadores galardonados

Año 2001: Joan-Tomàs Pujolà, por su artículo “CALLing for Help: researching language learning strategies using help facilities in a web-based multimedia program.”. Departament de Didàctica de la Llengua i la Literatura, Universitat de Barcelona, España.

Año 2002: Gabriela Adela Gánem Gutiérrez, por su artículo “Beyond interaction: The study of collaborative activity in computer-mediated tasks”. University of Southampton, Reino Unido.

Año 2007: Tatsuya Nakata, de la Universidad de Tokio, Japón, por su artículo “English vocabulary learning with word lists, word cards, and computers: implications from cognitive psychology research for optimal spaced learning”.

Informe del Seminario sobre el papel de la investigación en CALL

Seminar on research in CALL

EUROCALL 97, 11-13 September 1997, Dublin City University, UK

Report by David Little, Centre for Language and Communication Studies, Trinity College Dublin

For several years Dieter Wolff has argued that EUROCALL should do more to promote the development of a research culture appropriate to CALL. The organisers of the Dublin conference responded to this by inviting Dieter and myself to co-ordinate a seminar on research in CALL. In the event, ill health prevented Dieter from attending the conference, so it fell to me to run the seminar on my own.

The call for papers announced that the seminar would focus on the design of good research projects, the use of possible research methods, and the definition of what constitutes research in CALL/TELL. A large box file was left at the conference desk so that intending participants in the seminar could submit for discussion issues, questions, problems, possible solutions, and examples of good research practice. By the end of the second day of the conference the box was still empty, but any fears that this betokened lack of interest proved to be unfounded. Over sixty conference participants attended the seminar and engaged in lively and sustained discussion.

In my introduction to the seminar I posed two questions that I take to be fundamental. First, how do we ensure that research in CALL is possible in the first place? To outsiders this might seem to be an odd starting point. After all, most work in CALL goes on in universities, and universities are partly defined by the central role that they accord to research. It thus seems entirely natural that language learning, and especially language learning stimulated and supported by information systems, should be the focus of a sustained research effort. Yet in European universities there is a widespread bias against research that concerns itself with processes of teaching/learning, and many university language centres are specifically excluded from the research requirements of the institutions of which they are a part. The professional situation of many EUROCALL members is such that they can engage in research only as a hobby that their universities do nothing to encourage, and in some cases actively discourage. Here it is worth noting that in a symposium on university teaching published in the Times Higher Education Supplement of 27 June 1997, several contributors suggested that more weight should be given to good teaching, but none of them argued that good teaching is parasitic on good research. It is also worth noting that EU policies have tended to confirm the traditional breach between teaching and research: designed to promote language teaching and learning, LINGUA and related initiatives have excluded an explicit research component, and in many cases have also excluded the possibility of appropriate empirical evaluation. Clearly, EUROCALL has a role to play in re-educating policy makers, university administrations and EU decision makers.

My second introductory question was in two parts: What should be our primary research focus, and what varieties of research do we need to undertake? As regards the first part, I recalled a point made by Nina Garrett in her opening plenary address: that in the next few years developments in information technology will necessarily reshape second language pedagogy. If this is the case, then research in CALL must take the process of language learning as its starting point, though it will need to engage with other perspectives too – for example, human-computer interaction, artificial intelligence, computational linguistics. As for varieties of research, I suggested that we need theoretical research in order to provide ourselves with a basic orientation; empirical research in order to explore in a disciplined way how language learners actually use information systems, and to what effect; and action research in order to ensure that our research enterprise is not a linear but a cyclical process, leading back into the teaching/learning situation. In her opening address, Nina Garrett noted that a characteristic of autonomous learners is the ability to research their own learning. One might say the same about autonomous teachers: action research is a sign of teacher autonomy.

At the end of my introduction, I invited participants to call out the topics they felt the seminar should address. They produced the following list: research on language, contrastive studies, transfer; learner autonomy; quantitative versus qualitative research methods, student data, evaluation methodologies, and “the fallacy of objectivity”; postgraduate programmes and the selection and guidance of research students; safety critical issues; ways of dealing with technological change; the publication of research; the establishment of a EUROCALL discussion forum. At this point the seminar divided into six groups for forty-five minutes’ discussion.

The issues and proposals brought from the groups to the plenary feedback session that concluded the seminar fell into three broad categories. First, there had been discussion of the general orientations appropriate to research in CALL. One group suggested that we need to draw on the theories and research practice of other disciplines, including linguistics, psychology, social sciences, anthropology and education; while two groups noted that it is important to be clear what kind of research we intend to engage in and to adopt an appropriate methodology. Research takes time, which costs money, and one group pointed out that without research funding it is impossible to undertake large-scale empirical projects. Secondly, most groups spent some time discussing the implications of a fact to which Nina Garrett drew attention in her opening plenary: that most CALL applications allow researchers to gather large quantities of data with minimum effort. One report pointed out that it is one thing to collect data and another to know what to do with it, and several groups emphasised the importance of good research design. Thirdly, the groups addressed the role that EUROCALL might play in helping to develop a research culture appropriate to CALL. It was suggested that EUROCALL should establish a register of research activities and perhaps a special interest group for research; join forces with CALICO to found a world-wide electronic journal for CALL research; seek funding to sponsor research projects run by its members; organise a summer school on research in CALL; establish an electronic discussion forum on research in CALL; and lobby against the exclusion of research from EU-funded programmes such as SOCRATES and LINGUA.

The seminar was one of the liveliest events at EUROCALL 97, no doubt because it gave participants an opportunity to share and debate some of the interests and preoccupations they had in common. It is very much to be hoped that EUROCALL will act on at least some of the suggestions generated by the seminar before the 1998 conference convenes in Leuven.

Actas de congresos

“El papel de la investigación en la enseñanza de lenguas asistida por ordenador (CALL)”

Documento redactado como fruto de un seminario celebrado
del 30 de abril al 1 de mayo de 1999
en la Universidad de Essen, Alemania,
y asumido por EUROCALL, CALICO y IALLT

Introducción

La enseñanza de lenguas asistida por ordenador (CALL) es un nuevo campo académico que evoluciona rápidamente y explora el papel que desempeñan las tecnologías de la información y las comunicaciones en el aprendizaje y la enseñanza de lenguas. Incluye una amplia gama de actividades e iniciativas, tanto en el desarrollo de materiales didácticos y en la práctica pedagógica, como en la investigación. La enseñanza asistida por ordenador comenzó cuando las limitaciones del ordenador restringían la pedagogía que se podía aplicar a la práctica docente, y en consecuencia, todavía hay muchos que piensan que CALL se refiere únicamente a ejercicios mecánicos y repetitivos. Hoy en día, sin embargo, la enseñanza asistida por ordenador ofrece una herramienta indiscutible de apoyo para la práctica de las destrezas productivas e interpretativas del lenguaje. El desarrollo de materiales didácticos en formato electrónico, la pedagogía subyacente y la investigación en torno a CALL han evolucionado hasta tal punto en sofisticación intelectual que debe plantearse seriamente su estatus como un campo de estudio que requiere especial atención. CALL no se limita ni a la aplicación pedagógica de un nuevo medio, ni a una simple extrapolación práctica del trabajo teórico efectuado en cualquier otra disciplina.

En ocasiones se ha considerado la enseñanza de lenguas asistida por ordenador como una sub-sección de la Enseñanza Asistida por Ordenador (CAL), pero puesto que CALL se centra específicamente en el aprendizaje de lenguas, se trata de un área inherentemente multidisciplinario a la vez que académicamente independiente. Puede decirse que pertenece al campo de la Lingüística Aplicada, y dentro de ésta, está estrechamente relacionada con la Aprendizaje de Segundas Lenguas (SLA). CALL y SLA, como campos de estudio, están relacionados con la sociolingüística, la pragmática, el análisis del discurso y la psicolingüística. Además, CALL mantiene una estrecha relación con otras áreas como por ejemplo, las ciencias de la educación, la informática, la ingeniería lingüística, las ciencias cognoscitivas, la psicología, y la lingüística. Influye, y es a su vez influida, por la teoría y la investigación realizadas en todos estos campos.

Objetivo de este documento

Este documento ha sido redactado por una veintena de personas entre las que se encontraban tanto estudiosos e investigadores en el campo de CALL, como personas expertas en su explotación didáctica y aquellas que se dedican al diseño y desarrollo de materiales didácticos en formato electrónico, procedentes de Europa y Estados Unidos. Ha sido redactado con el objetivo de: (i) establecer una mayor comprensión por parte de departamentos, instituciones, asociaciones profesionales y cuerpos directivos del espectro de actividades representadas en este área, y (ii) proporcionar una perspectiva organizada y consistente sobre las rúbricas bajo las que deberían evaluarse estas actividades. La valoración y el reconocimiento académico del trabajo en CALL presenta dificultades no sólo debido a la rápida evolución del campo, sino también debido a la aparición de nuevos paradigmas teóricos y metodológicos.

El trabajo en CALL puede categorizarse como investigación, desarrollo, y práctica. La investigación puede diferenciarse del desarrollo en que un investigador puede analizar los resultados de utilizar materiales didácticos en formato electrónico desarrollados por otros (por ejemplo, en las evaluaciones formativas), o puede enfocar su trabajo al estudio teórico de la materia. En CALL la progresión suele comenzar con la práctica pedagógica o el análisis de necesidades conducentes al desarrollo de materiales didácticos, técnicas de aprendizaje o entornos educativos basados en las tecnologías de la información y las comunicaciones. El desarrollo puede derivar en investigación, y ésta, a su vez, puede generar nuevas bases teóricas.

Estándares académicos en CALL

El término desarrollo en CALL puede referirse a la creación de materiales pedagógicos (incluido el diseño, la programación informática y la incorporación de los contenidos didácticos del curso), o al desarrollo de herramientas y aplicaciones informáticas en las que otros puedan insertar el contenido lingüístico. En contextos académicos en los que el desarrollo de materiales pedagógicos no suele ser recompensado, el desarrollo en CALL suele plantearse como investigación, especialmente cuando ésta se basa en estudios previos que posibilitan la creación de software educativo, o cuando se basa en una investigación formativa, es decir, aquella en la que se estudian y analizan los resultados del proceso de aprendizaje tras la puesta en práctica de dichos materiales con alumnos reales, en busca de datos objetivos que puedan influir en ese proceso de desarrollo del software. Sin embargo también sucede lo contrario. En ocasiones, son las propias entidades financiadoras quienes etiquetan de “desarrollo” algunos proyectos de investigación cuyo objetivo es analizar la utilidad o validez de la aplicación de las tecnologías en el aprendizaje de lenguas, en su afán por apoyar proyectos que se basen en la creación de materiales pedagógicos en formato electrónico que puedan ser utilizados de forma inmediata. Una evaluación adecuada del trabajo de desarrollo en CALL depende fundamentalmente de que se reconozca que no sólo se requieren unos sólidos conocimientos técnicos y pedagógicos para la creación de software educativo, sino que además, se reconozca que este tipo de trabajo conlleva una actividad que carece de precedentes en el campo de la enseñanza de lenguas, y no se limita a ser simplemente una labor de creación y explotación de ejercicios o material de lectura. La evaluación de dicho trabajo debe llevarse a cabo por aquellos que puedan distinguir los distintos niveles de conocimientos que se requieren.

Cuando se habla de investigación en relación a CALL, se suele suponer que el los estudios hacen referencia a la eficacia del uso de las tecnologías de la información y las comunicaciones en el aprendizaje de lenguas en contraposición al aprendizaje sin hacer uso de ellas. La investigación basada en la recopilación de información y el análisis de datos en el campo de CALL puede ser cualitativa o cuantitativa, experimental o etnográfica, y los resultados de esa investigación se publican en revistas científicas especializadas en CALL o en campos de estudio afines, incluidas por supuesto las revistas científicas en formato electrónico. Una gran parte de la investigación en CALL abarca asimismo el desarrollo de prototipos informáticos. La investigación en CALL se extiende hacia nuevas áreas, basándose en teorías de campos de estudio afines, a la vez que crea sus propios paradigmas teóricos y metodológicos. Es, sin duda, un signo de madurez el que CALL haya establecido y fijado su propia terminología, que haya identificado sus puntos de referencia, y que de cabida a una gran cantidad de actividades derivadas del mismo. Los conocimientos que se requieren para el diseño y la elaboración de materiales didácticos en formato electrónico son del todo distintos a los que se requieren para la creación de materiales pedagógicos de tipo más convencionales.

Un ejemplo de investigación en CALL que se reconoce como válido a nivel académico es el análisis de los datos recopilados a partir del uso y la aplicación de los materiales basados en las tecnologías por parte de los estudiantes, para confirmar o descartar las hipótesis generadas por las diversas teorías del aprendizaje de segundas lenguas (SLA), bien sea en su vertiente sociolingüística como en la psicolingüística. Este tipo de investigación puede contribuir al desarrollo de teorías propias sobre la enseñanza y el aprendizaje asistido por ordenador; por ejemplo, puede ayudarnos a entender cómo y en qué medida afecta a ese proceso de aprendizaje de lenguas el uso de las tecnologías, convirtiéndose por consiguiente en una parte fundamental del cambio de paradigma que se requiere para establecer CALL como una disciplina con derecho propio. De hecho, la orientación hacia el proceso de gran parte de la teoría e investigación actual en el aprendizaje de segundas lenguas (SLA), depende en gran medida de la investigación realizada en estudios sobre CALL.

La evaluación de la práctica pedagógica, el desarrollo de materiales didácticos, y la investigación en CALL pueden basarse en mecanismos de evaluación tan objetivos como los que se utilizan en otros campos, pero se requiere un profundo conocimiento de los retos específicos que se plantean en CALL, cosa que todavía no sucede suficientemente en departamentos de lenguas modernas e instituciones académicas. Es precisamente el comoponente interdisciplinar de CALL y los cambios de paradigmas que se vienen sucediendo los que dificultan en gran medida su evaluación. Este documento pretende, por tanto, clarificar algunas de las consideraciones en torno a un campo de estudio en creciente evolución.