Open-access Identificación de insumos para el desarrollo del razonamiento verbal en estudiantes de centros educativos con bajo perfil económico-social

Identification of inputs for the development of verbal reasoning in students from schools with a low social economic profile

Resumen

Este estudio analizó el contenido de veinte ítems de las prácticas de las pruebas de aptitud académica de la Universidad de Costa Rica y el Instituto Tecnológico de Costa Rica para determinar la presencia de tareas de analogías, problemas de inferencia, razonamiento lógico, vocabulario y comprensión lectora. El presente documento es producto de un proyecto de extensión sobre la temática aquí abordada, ejecutado desde el Instituto Tecnológico de Costa Rica. Los resultados mostraron que el razonamiento lógico y la comprensión lectora son las habilidades más relevantes en estas prácticas, mientras que los problemas de inferencia y el vocabulario tienen una presencia menor, por su parte, las analogías no aparecen en los ítems analizados. El acuerdo entre dos jueces fue evaluado mediante el coeficiente de kappa de Cohen. Se evidenció un acuerdo perfecto en la clasificación de las tareas de analogía y comprensión lectora, moderado para problemas tanto de inferencia como de razonamiento lógico, y justo para vocabulario. En la discusión, se propone que los hallazgos de este trabajo son útiles en la generación de estrategias y materiales para el desarrollo del razonamiento verbal en estudiantes de Educación Diversificada de centros educativos con bajo perfil económico-social.

Palabras-clave: lenguaje; educación; razonamiento; prueba de aptitud; igualdad de oportunidades

Abstract

This study analyzed the content of twenty items of the practices of the academic aptitude tests of the University of Costa Rica and the Costa Rican Institute of Technology to determine the presence of analogy tasks, inference problems, logical reasoning, vocabulary and reading comprehension. This document is the result of an extension project on the topic discussed herein, conducted at the Costa Rican Institute of Technology. The results revealed that logical reasoning and reading comprehension are the most relevant skills in these practices, while inference problems and vocabulary have a lower incidence, and analogies do not appear in the analyzed items. The agreement between the two judges was measured by Cohen’s kappa coefficient. A perfect agreement was demonstrated in the classification of analogy and reading comprehension tasks, moderate for inference and logical reasoning problems, and fair for vocabulary. It is proposed in the discussion that the findings of this work are useful in the formulation of strategies and materials for the development of verbal reasoning in students of Diversified Education in schools with a low social-economic profile.

Keyword: language; education; reasoning; aptitude test; equal opportunities

Introducción

En las últimas décadas, algunas investigaciones han sugerido que el lenguaje puede proporcionar un marco conceptual para el razonamiento (Cummins, 1981), así como afectar la forma en que se percibe el mundo y se toman decisiones (Byrne, 2011). Asimismo, se ha demostrado que las habilidades de razonamiento y lenguaje son fundamentales para el éxito académico tanto en matemáticas como ciencias (Geary, Hoard, Nugent y Bailey, 2013). En concordancia con estas ideas, las pruebas de aptitud académica de las universidades públicas de Costa Rica miden habilidades generales de razonamiento; además, los programas encargados de estos instrumentos realizan constantes estudios para garantizar la calidad y la equidad en la medición educativa.

El objetivo de este trabajo es analizar si las analogías, las inferencias, el razonamiento lógico, el vocabulario y la comprensión lectora están presentes en los ítems de los folletos de práctica de la Prueba de Aptitud Académica de la Universidad de Costa Rica, también utilizada por la Universidad Nacional de Costa Rica, y la prueba de ingreso del Instituto Tecnológico de Costa Rica. El presente documento es producto de un proyecto de extensión sobre la temática aquí abordada, ejecutado desde el Instituto Tecnológico de Costa Rica. Los resultados expuestos son insumos para la preparación de materiales y estrategias que impulsen el desarrollo del razonamiento verbal en estudiantes de centros educativos con bajo perfil económico-social, para así contribuir con la igualdad de oportunidades.

Tras revisar la literatura científica disponible para proporcionar una visión general de los avances en el estudio de la relación entre el razonamiento y el lenguaje, se identificaron tareas típicas relacionadas con habilidades lingüísticas que se utilizan para medir las habilidades de razonamiento:

  1. Analogías: son tareas lingüísticas en las que se presentan dos pares de palabras y se solicita encontrar una relación similar entre otros pares de palabras (Sternberg, 1982; Novick, 1988).

  2. Problemas de inferencia: estas tareas implican la comprensión de un texto y la capacidad de hacer deducciones basadas en la información proporcionada (Daneman, 1980; Kintsch, 1988).

  3. Razonamiento lógico: estas tareas conllevan tanto la capacidad de analizar como de evaluar proposiciones y argumentos (Stanovich, 2010; Toulmin, 1958).

  4. Vocabulario: el conocimiento de vocabulario puede ser un indicador del razonamiento, ya que una mayor cantidad de este puede implicar una mayor capacidad de comprensión y pensamiento crítico (Nation, 2001; Verhaeghen y Salthouse, 1997).

  5. Comprensión de lectura: involucra la capacidad de entender el significado de un texto y relacionar las ideas presentadas (Perfetti, Landi y Oakhill, 2005; Kendeou, van den Broek, White y Lynch, 2009)

En Costa Rica se han realizado diferentes publicaciones que se refieren a las habilidades evaluadas en las pruebas de aptitud académica de la Universidad de Costa Rica y del Instituto Tecnológico de Costa Rica. Algunas de estas investigaciones se refieren a los procesos implicados en la relación de los ítems de estas pruebas y en la recolección de evidencias de validez de constructo. A continuación, se sintetizan los estudios que están más relacionados con el presente trabajo.

Moreira-Mora (2010) presenta el proceso de validación de la Prueba de Aptitud Académica del Instituto Tecnológico de Costa Rica a través de la construcción de una tabla de especificaciones. Con esta, identifica las habilidades verbales que se consideran necesarias para el ingreso de los estudiantes a la universidad: comprensión de lectura en textos cortos, comprensión de lectura en textos largos, razonamiento verbal, comprensión de léxico, comprensión del contenido, la estructura y función de oraciones, e identificación de estilos discursivos.

Brizuela Rodríguez, Jiménez Alfaro, Pérez Rojas y Rojas Rojas (2016) presentan los resultados de una investigación que analizó las estrategias de respuesta utilizadas por 15 estudiantes universitarios de primer ingreso en la Prueba de Aptitud Académica de la Universidad de Costa Rica. La técnica empleada fue la de autorreportes en voz alta, que demostró ser de gran utilidad para indagar sobre los procesos de respuesta a los ítems. Además, esta publicación explica cuatro categorías de los ítems utilizados en el estudio: parafrasear, identificar marcadores discursivos, oponer y reducir. Así, el artículo es relevante para aquellos interesados en la construcción y uso de pruebas estandarizadas relacionadas con habilidades verbales, ya que proporciona información detallada sobre las estrategias de razonamiento dispuestas en tareas verbales y ofrece guías para recabar evidencias de validez.

En una investigación posterior, Brizuela Rodríguez, Pérez Rojas y Rojas Rojas (2018) presentan un estudio cuantitativo sobre un nuevo método para recopilar evidencia sobre los procesos de respuesta utilizados por los estudiantes en pruebas educativas. Se comparó el método tradicional de reportes verbales con el método de Respuestas Guiadas por el Experto (RGE) y se demostró que el RGE es más idóneo para recopilar evidencia sobre la interpretación de las puntuaciones en una prueba educativa. El estudio se basa en la necesidad de contar con métodos sistemáticos para mejorar la calidad de los instrumentos que se emplean en la evaluación educativa; además, aporta información valiosa sobre las categorías de los ítems utilizados en la investigación e introduce dos categorías nuevas: suponer y presuponer.

Calvo Díaz, Rojas Rojas, Pérez Rojas y Ríos Sánchez (2019) describen cuáles son los posibles elementos de comprensión que afectan la resolución de ítems nuevos en una prueba de razonamiento verbal. A través de un estudio cualitativo exploratorio, se identificaron cinco elementos irrelevantes: léxico, redacción, extensión, contexto muy específico y uso de conocimiento previo. Se planteó el uso del reporte verbal como generador de evidencias de validez para una prueba de admisión. El estudio permitió integrar el criterio de los examinados que obtuvieron bajas puntuaciones en el examen de admisión, se recabaron algunos insumos para mejorar los ítems y se replantearon algunos aspectos sobre su formato para futuras investigaciones. Calvo Díaz, Martínez Alpízar, Pérez Rojas, Rojas Rojas y Solano Moraga (2023b) evalúan la habilidad de los aspirantes a la Universidad de Costa Rica para identificar relaciones semánticas de antonimia, sinonimia y temática. Para ello, se construyó y validó un instrumento mediante el juicio de expertos, que se aplicó a 3864 personas. Los resultados mostraron que estas relaciones semánticas pueden medirse en tres categorías, lo que influye en el desempeño de las personas al resolver ítems de la Prueba de Aptitud Académica. Sin embargo, los datos obtenidos indican un desempeño desigual de las categorías en el instrumento, esto sugiere ajustes en la forma de medir el dominio léxico en la relación semántica de temática. Los autores concluyen que es importante comprender el dominio léxico ligado a estas relaciones semánticas para evitar factores causantes de varianza irrelevante al constructo.

De esta forma, a partir de la revisión de los trabajos citados, se comprende el alto nivel de sistematización de las pruebas de admisión al identificar los procesos de resolución de los ítems, así como la amplia variedad de categorías de las tareas utilizadas para medir las habilidades generales de razonamiento. En consecuencia, los análisis expuestos en el presente artículo se dispondrán para seleccionar las tareas lingüísticas relacionadas con las habilidades de razonamiento que deben usarse en la formación general de los estudiantes de centros educativos con bajo perfil económico-social y aquellos ejercicios que deben practicarse de manera prioritaria al preparar a esta población para las pruebas de admisión.

Metodologia

El objetivo de este trabajo ha sido analizar si las analogías, las inferencias, el razonamiento lógico, el vocabulario y la comprensión lectora están presentes en los ítems de los folletos de práctica de las pruebas de aptitud académica. Para lograr este objetivo, se utilizó un enfoque de análisis de contenido y se evaluó el nivel de acuerdo entre dos jueces, ambos profesionales en Filología Española y con amplia experiencia en medición educativa. Dado su bagaje en la tarea por realizar y el conocimiento que tienen de los constructos evaluados por los ítems de los folletos de práctica, la iteración de juzgamiento se hizo sin capacitación previa, con el fin de lograr una fiabilidad inter-jueces sin alineación anticipada.

Se seleccionaron al azar 20 ítems de dos folletos de práctica de las Pruebas de Aptitud Académica de la Universidad de Costa Rica y del Instituto Tecnológico de Costa Rica. Dos jueces analizaron si las analogías, las inferencias, el razonamiento lógico, el vocabulario y la comprensión lectora son parte de los ítems de dichos folletos. Se utilizó un enfoque de análisis de contenido para examinar cada ítem y determinar si las tareas teóricamente definidas estaban presentes. Luego, se realizó un análisis de acuerdo entre los dos jueces mediante un kappa de Cohen para evaluar el nivel de concordancia en sus evaluaciones. Este estadístico mide la fuerza de acuerdo entre dos jueces que califican o clasifican un conjunto de ítems (Landis y Koch, 1977).

Los datos obtenidos del análisis de contenido y de acuerdo entre jueces se analizaron estadísticamente empleando el lenguaje de programación R. Se contabilizaron las apariciones de las tareas en los ítems seleccionados y se comentaron los coeficientes de kappa de Cohen para cada una de las tareas presentes en los ítems.

Finalmente, se discutieron los resultados en cuanto a la utilidad de las tareas analizadas en la generación de estrategias y materiales que impulsen el desarrollo del razonamiento verbal en estudiantes de Educación Diversificada de centros educativos con bajo perfil económicosocial y contribuyan con la igualdad de oportunidades. Asimismo, se examinaron las limitaciones del análisis y se presentaron recomendaciones para futuros estudios.

Resultado

A continuación, se presentan los resultados del análisis de contenido de veinte ítems de las prácticas más recientes para las pruebas de aptitud académica, publicadas en la Universidad de Costa Rica (Calvo Díaz et al., 2023a) y el Instituto Tecnológico de Costa Rica (Acuña Chacón, Agüero Calvo, Godínez Rojas, Moreira-Mora y Romero-Álvarez, 2022), con el objetivo de determinar si las tareas de analogías, problemas de inferencia, razonamiento lógico, vocabulario y comprensión lectora están presentes en dichos ítems. Asimismo, se detallan los resultados del acuerdo entre dos jueces sobre la presencia de dichas tareas en los ítems analizados mediante la estimación de kappa de Cohen.

Los dos jueces evaluaron de forma independiente la presencia de estas tareas en los ítems de las pruebas. Tras este análisis, se determinó que las tareas tienen diferente grado de presencia en los ítems: sobre las analogías no se reporta ninguna aparición, los problemas de inferencia aparecieron pocas veces, el vocabulario se reportó de manera regular, mientras que el razonamiento lógico y la comprensión lectora tienen un papel importante en la mayoría de los ítems (Tabla 1).

Tabla 1
Apariciones de las tareas en los 20 ítems según cada juez

El porcentaje de acuerdo total entre ambos jueces fue del 85%, lo cual indica un alto grado de consistencia en sus evaluaciones. Este resultado sugiere que compartieron criterios similares al asignar las tareas a las respectivas categorías. Sin embargo, para evaluar la consistencia y el acuerdo entre las clasificaciones de los dos jueces, se calculó el coeficiente de kappa de Cohen, pues esta es una medida de la concordancia interjueces que tiene en cuenta la posibilidad de las coincidencias por azar. Los resultados del kappa de Cohen para cada tarea fueron los siguientes: analogías (kappa = 1.00), problemas de inferencia (kappa = 0.53), razonamiento lógico (kappa = 0.55), vocabulario (kappa = 0.34) y comprensión lectora (kappa = 1.00).

Landis y Koch (1977) proponen los siguientes parámetros para la interpretación del coeficiente kappa: pobre (menor a 0), ligero (0 - 0.20), justo (0.21 - 0.40), moderado (0.41 - 0.60), sustancial (0.61 - 0.80) y casi perfecto (0.81-1). Por tanto, los resultados obtenidos evidencian un acuerdo perfecto entre los jueces en la clasificación de las tareas de analogía y comprensión lectora; moderado, para problemas de inferencia y razonamiento lógico; y justo, para vocabulario.

Discusión

Los resultados del análisis de contenido de los ítems de las pruebas de aptitud académica de la Universidad de Costa Rica y del Instituto Tecnológico de Costa Rica muestran que las tareas de razonamiento lógico y comprensión lectora son las más frecuentes. Esto sugiere que estas habilidades son fundamentales para el desempeño de los estudiantes en estas pruebas, por lo tanto, deben priorizarse en la preparación de materiales y estrategias para el desarrollo del razonamiento verbal en estudiantes de centros educativos con bajo perfil económico-social.

Si bien los problemas de inferencia y el vocabulario aparecen con menos frecuencia en los ítems, siguen siendo relevantes en la evaluación de las habilidades de razonamiento. Por lo tanto, estos aspectos también deben considerarse al preparar a los estudiantes para las pruebas de aptitud académica, aunque con menor medida que el razonamiento lógico y la comprensión lectora. Según Calvo et al. (2019), el vocabulario debe considerarse irrelevante para la resolución de los ítems de la Prueba de Aptitud Académica de la Universidad de Costa Rica, no obstante, la teoría consultada y los resultados de este artículo muestran que, en general, el léxico podría seguir jugando un papel importante en el desarrollo de las habilidades de razonamiento.

Las analogías no aparecieron en ninguno de los ítems analizados. Esto podría deberse a que las pruebas de aptitud académica se han alejado de este tipo de tarea en favor de otras más centradas en el razonamiento lógico y la comprensión lectora. De hecho, las analogías no se mencionan en los estudios estrechamente relacionados con las categorías de las pruebas de admisión, como lo son las publicaciones de Moreira-Mora (2010), Brizuela Rodríguez et al. (2016) y Brizuela Rodríguez et al. (2018). Sin embargo, la ausencia de analogías en los ítems examinados no significa que no sean útiles para desarrollar habilidades de razonamiento. Así, estas podrían seguir siendo utilizadas en la enseñanza y preparación de los estudiantes para la vida en general, aunque su relevancia en las actuales pruebas de aptitud académica parece ser limitada.

En cuanto al acuerdo entre los jueces, se encontró un alto grado de consistencia en sus evaluaciones, especialmente en las tareas de analogía y comprensión lectora. El acuerdo moderado en problemas de inferencia y razonamiento lógico, y justo en vocabulario sugiere que estos aspectos podrían ser más difíciles de evaluar de manera consistente, por lo que requerirían tanto una mayor clarificación como capacitación para los jueces en futuros estudios. Específicamente en el caso del vocabulario, debe considerarse que ambas pruebas se rigen por parámetros distintos: como se ha dicho, Calvo Díaz et al. (2019) lo excluyen como un elemento relevante, mientras que Moreira-Mora (2010) incluye la comprensión del léxico como una habilidad necesaria para los estudiantes universitarios.

También podría ser necesario replicar los análisis con los ítems de otras versiones de los folletos de práctica de las pruebas de aptitud académica, pues dichos instrumentos están en constantes procesos de mejora y esto podría implicar cambios en la presencia de las tareas. Además, este trabajo se centró en el análisis de la presencia de las tareas en los ítems, pero no examinó la relación entre el desempeño de los estudiantes en estas y sus resultados en las pruebas de aptitud académica. De la misma forma, en futuros estudios sería importante verificar si el entrenamiento y el dominio de estas tareas implican una mejoría en el desempeño en los exámenes de admisión.

En conclusión, los resultados de este estudio sugieren que el razonamiento lógico y la comprensión lectora son las habilidades más relevantes en las pruebas de aptitud académica de la Universidad de Costa Rica y el Instituto Tecnológico de Costa Rica. Por lo tanto, las estrategias de enseñanza y preparación para estas deben centrarse en desarrollar tales habilidades en los estudiantes. De igual modo, es necesario incluir los problemas de inferencia y el vocabulario, si bien aparecen en menor medida en los ítems de los folletos de práctica. Por su parte, las analogías, aunque no estén presentes en los ítems analizados y su relevancia en las pruebas actuales parece limitar, podrían seguir siendo útiles para desarrollar habilidades de razonamiento en los estudiantes.

Estos hallazgos son sumamente útiles para categorizar en distintos propósitos cada una de las tareas al generar estrategias y materiales para el desarrollo del razonamiento verbal en estudiantes de Educación Diversificada de centros educativos con bajo perfil económico-social: en capacitaciones de largo plazo, debe fortalecerse el dominio de todas las tareas; sin embargo, en la preparación para las pruebas de admisión, las tareas que están más relacionadas con los ítems de estos instrumentos deben considerarse prioritarias

Referencias bibliográficas

  • Acuña-Chacón, R., Agüero-Calvo, E., Godínez-Rojas, L.P., Moreira-Mora, T.E. y Romero-Álvarez, E. (2022). Cuaderno de ejercicios para la prueba de aptitud académica del TEC. Instituto Tecnológico de Costa Rica. Recuperado de https://www.tec.ac.cr/ sites/default/files/media/doc/cuaderno_de_ejercicios_ para_la_paa.pdf
  • Brizuela Rodríguez, A., Jiménez Alfaro, K., Pérez Rojas, N. y Rojas Rojas, G. (2016). Autorreportes verbales en voz alta para la identificación de procesos de razonamiento en pruebas estandarizadas. Revista Costarricense de Psicología, 35(1), 23-36. Recuperado de https://www.scielo.sa.cr/scielo.php?script=sci_arttext &pid=S1659-29132016000100023
  • Brizuela Rodríguez, A., Pérez Rojas, N. y Rojas Rojas, G. (2018). Respuestas guiadas por el experto: Validación de las inferencias basadas en los procesos de respuesta. Actualidades Investigativas en Educación, 18(3), 168-189. Recuperado de https:// www.scielo.sa.cr/scielo.php?script=sci_arttext&pid =S1409-47032018000300168
  • Byrne, R. M. J. (2011). The Rational Imagination: How People Create Alternatives to Reality. MIT Press.
  • Calvo Díaz, K., Cerdas Núñez, D., Jiménez Alfaro, K., Martínez Alpízar, D. M., Ordóñez Lacayo, K., Pérez Rojas, N., Rojas Rojas, G., Rojas Torres, L., Solano Moraga, S. y Valverde García, M. (2023a). 60-10. Preguntas y respuestas de práctica para la Prueba de Aptitud Académica. Costa Rica: Editorial UCR.
  • Calvo Díaz, K., Martínez Alpízar, D., Pérez Rojas, N., Rojas Rojas, G. y Solano Moraga, S. (2023b). Dominio léxico y relaciones semánticas: validación de vocabulario para ítems de razonamiento. Revista Educación, 47(1), 337-349. Recuperado de https://www.scielo.sa.cr/scielo.php?pid=S2215- 26442023000100337&script=sci_arttext
    » https://www.scielo.sa.cr/scielo.php?pid=S2215- 26442023000100337&script=sci_arttext
  • Calvo Díaz, K., Rojas Rojas, G., Pérez Rojas, N. y Ríos Sánchez, A. J. (2019). Identificación de elementos irrelevantes para la comprensión de ítems de una prueba de razonamiento. Revista Mexicana de Investigación Educativa, 24(81), 463-480. Recuperado de https://www.scielo.org.mx/scielo.php?pid=S1405- 66662019000200463&script=sci_arttext
    » https://www.scielo.org.mx/scielo.php?pid=S1405- 66662019000200463&script=sci_arttext
  • Cummins, J. (1981). Bilingualism and special education: Issues in assessment and pedagogy. Clevedon: Multilingual Matters.
  • Daneman, M. y Carpenter, P. A. (1980). Individual differences in working memory and reading. Journal of verbal learning and verbal behavior, 19(4), 450-466. Recuperado de https://www.sciencedirect.com/science/article/pii/S0022537180903126
  • Geary, D. C., Hoard, M. K., Nugent, L. y Bailey, D. H. (2013). Adolescents’ functional numeracy is predicted by their school entry number system knowledge. PLoS One, 8(3). Recuperado de https://journals.plos. org/plosone/article?id=10.1371/journal.pone.0054651
    » https://journals.plos. org/plosone/article?id=10.1371/journal.pone.0054651
  • Kendeou, P., van den Broek, P., White, M. J. y Lynch, J. S. (2009). Predicting reading comprehension in early elementary school: The independent contributions of decoding and comprehension skills. Journal of Educational Psychology, 101(1), 765-778. Recuperado de https://psycnet.apa.org/journals/edu/101/4/765/
  • Kintsch, W. (1988). The role of knowledge in discourse comprehension: A construction-integration model. Psychological Review, 95(2), 163- 182. Recuperado de https://psycnet.apa.org/ doiLanding?doi=10.1037/0033-295X.95.2.163
  • Landis, J. R. y Koch, G. G . (1977). The measurement of observer agreement for categorical data. Biometrics, 33(1), 159-174.
  • Moreira-Mora, T. E. (2010). Tabla de especificaciones: una experiencia de validación de la prueba de aptitud académica del Tecnológico de Costa Rica. Recuperado de https://repositoriotec.tec.ac.cr/handle/2238/10474
    » https://repositoriotec.tec.ac.cr/handle/2238/10474
  • Nation, I. S. P. (2001). Learning vocabulary in another language. Cambridge: Cambridge University Press.
  • Novick, L. R. (1988). Analogical transfer, problem similarity, and expertise. Journal of Experimental Psychology: Learning, memory, and cognition, 14(3), 510. Recuperado de https://psycnet.apa.org/doiLanding?d oi=10.1037/0278-7393.14.3.510
  • Perfetti, C. A., Landi, N. y Oakhill, J. (2005). The acquisition of reading comprehension skill. En M. J. Snowling y C. Hulme (Eds.), The science of reading: A handbook (pp. 227-247). Oxford : Blackwell.
  • Stanovich, K. E. (2010). How to think straight about psychology. Boston: Pearson.
  • Sternberg, R. J. (1982). Handbook of human intelligence. London: Cambridge University Press.
  • Toulmin, S. (1958). The uses of argument. Cambridge: Cambridge University Press.
  • Verhaeghen, P. y Salthouse, T. A. (1997). Meta-analyses of age-cognition relations in adulthood: Estimates of linear and nonlinear age effects and structural models. Psychological Bulletin, 122(3), 231-249

Fechas de Publicación

  • Fecha del número
    Jul-Dec 2023

Histórico

  • Recibido
    03 Mayo 2023
  • Acepto
    13 Nov 2023
location_on
None Escuela de Ciencias del Lenguaje, Instituto Tecnológico de Costa Rica, Cartago, Caratgo, CR, 159-7050, 2250-9102, 2550-9024 - E-mail: morivera@itcr.ac.cr
rss_feed Acompanhe os números deste periódico no seu leitor de RSS
Acessibilidade / Reportar erro