10 ejemplos de multimodalidad

La multimodalidad se refiere al uso de varios modos para transmitir significado en un comunicado. Los modos pueden ser lingüísticos, visuales, auditivos, gestuales o espaciales (Kress, 2003).

Por ejemplo, en un curso de composición, un instructor puede pedir a los estudiantes que utilicen formas de expresión multimodales. Entonces, además de una composición escrita basada en texto, los modos de expresión también podrían incluir sonido, imágenes y movimiento.

El interés por la multimodalidad ha coincidido con el surgimiento de la era digital, que presenta tanto un desafío como una oportunidad en la educación.

Como explican Magnusson y Godhe (2019):

“La creación de composiciones multimodales se ha convertido en una práctica cotidiana debido al mayor uso de la tecnología digital que permite combinar recursos y hace que sea más fácil que nunca generar significado utilizando una amplia gama de modalidades y medios” (p. 127).

La creciente presencia de textos multimodales en la sociedad también ha significado que los investigadores textuales han necesitado desarrollar medios multimodales para el análisis de textos, como la semiótica.

Definición de multimodalidad

La multimodalidad se refiere a la combinación e interacción de múltiples modos de comunicación dentro de un solo contexto o medio.

Abarca varios canales, como elementos visuales, auditivos y textuales, que trabajan juntos para transmitir significado. Un enfoque multimodal reconoce la complejidad de la comunicación y la importancia de integrar diferentes modos para mejorar la comprensión y la expresión.

El académico Gunther Kress define la multimodalidad como:

“…el uso de varios modos semióticos en el diseño de un producto o evento semiótico, junto con la forma particular en que estos modos se combinan” (Kress, 2010).

Otra definición proviene del erudito Carey Jewitt, quien afirma que:

“…la multimodalidad se ocupa del estudio de cómo se construye el significado a través de la combinación disciplinada y la configuración de múltiples recursos semióticos” (Jewitt, 2009).

La multimodalidad enfatiza la importancia de considerar varias formas de comunicación para crear un mensaje más rico y efectivo.

A medida que avanza la tecnología y surgen nuevos medios, la comunicación multimodal se vuelve cada vez más relevante, lo que permite a las personas y organizaciones interactuar mejor con audiencias diversas.

Al analizar y comprender las relaciones entre los diferentes modos, los investigadores y los profesionales pueden desarrollar estrategias innovadoras para mejorar la comunicación, el aprendizaje y la interacción en varios contextos, desde la educación y la publicidad hasta las redes sociales y el entretenimiento.

Los Modos Semióticos de Dirección (Tipos de Modalidad)

En general, podemos diseccionar la modalidad en modos de dirección lingüísticos, visuales, auditivos, gestuales y espaciales. Cada uno se explora a continuación:

1. Modo lingüístico: Este modo implica el uso de lenguaje escrito o hablado para transmitir significado. Incluye elementos como la sintaxis, la gramática, el vocabulario y el discurso. La comunicación lingüística es esencial para expresar ideas, compartir información y fomentar la comprensión entre individuos y grupos.
2. modo visual: La comunicación visual se basa en imágenes, símbolos, colores y otros elementos visuales para transmitir significado. Puede incluir fotografías, ilustraciones, gráficos, cuadros e iconos. El modo visual ayuda a presentar información compleja en un formato fácilmente digerible, evoca emociones y apoya la comprensión de conceptos abstractos.
3. Modo auditivo: El modo auditivo abarca todas las formas de comunicación auditiva, como el habla, la música, los efectos de sonido y los sonidos ambientales. Desempeña un papel importante en establecer el estado de ánimo, crear una atmósfera y proporcionar contexto en varios medios. La comunicación auditiva puede mejorar el impacto emocional de un mensaje y complementar otros modos para crear una experiencia más inmersiva.
4. Modo gestual: Los gestos son movimientos físicos o lenguaje corporal utilizados para expresar significado, emoción o intención. Los ejemplos de gestos incluyen expresiones faciales, movimientos de manos y postura. La comunicación gestual es un aspecto esencial de la comunicación no verbal, proporcionando pistas que ayudan a interpretar y contextualizar los mensajes verbales, especialmente en las interacciones cara a cara.
5. Modo espacial: La comunicación espacial se refiere a la disposición, organización y uso del espacio para transmitir significado. Esto puede incluir el diseño de una página web, la composición de una fotografía o la disposición de objetos en un espacio físico. El modo espacial influye en cómo se percibe e interpreta la información, guiando la atención del espectador y facilitando la navegación o la comprensión.

Métodos de investigación multimodal

El análisis de los medios ya no puede simplemente considerar las palabras en un discurso o texto en un periódico para realizar sus análisis textuales o del discurso. Necesitan métodos multimodales para la investigación.

Por ejemplo, la palabra que pronuncia una persona es insuficiente para comprender el significado de las palabras. La entonación, el acento y el énfasis afectan el significado de las palabras.

Del mismo modo, mientras que una vez nos hubiéramos centrado en los periódicos para analizar el discurso de las noticias, ahora debemos recurrir a las noticias difundidas en línea, en la televisión, etc., que contienen formas multimodales de dirección.

Para lograr un análisis multimodal, los académicos deben tener una comprensión cultural profunda de cómo se produce el significado, a través de un método llamado semiótica social.

Por ejemplo, un estudioso del análisis multimodal necesita comprender aspectos como:

• Tono sarcástico: Las palabras habladas pueden ser sarcásticas, y esto se puede determinar a través del énfasis en la palabra hablada.
• Expresiones faciales: Las palabras de una persona pueden entrar en conflicto con sus expresiones faciales, lo que se suma al significado producido en una interacción (ver: señales no verbales).
• Movimienot: Una película que utiliza un efecto de cámara lenta puede intentar agregar énfasis o suspenso.
• Angulos de camara: Un ángulo de cámara bajo puede posicionar al personaje en el cuadro con poder, mientras que un ángulo de cámara alto puede posicionar al personaje como débil.
• Mis-en-scene: Un término que significa 'ausente de la escena', esto nos recuerda que lo que no se muestra es tan importante como lo que se muestra.

Para abordar los textos multimodales, es posible que debamos basarnos en textos seminales de análisis multimodal como el de Kress y Van Leeuwen (2006) La gramática del diseño visual.

Casos de Estudio de Multimodalidad

1. Arte Conceptual

Quizás uno de los mejores ejemplos de multimodalidad se presenta en forma de arte conceptual. Esta forma de expresión artística no implica necesariamente una habilidad técnica, como pintar, esculpir o fotografía.

El arte conceptual puede involucrar una amplia variedad de materiales y ubicaciones. Puede ocurrir en una galería, en un parque o en el aire.

A veces, la obra de arte se basa en elementos espaciales para crear diferentes significados que pueden cambiar según el punto de vista del espectador.

En otros casos, los espectadores pueden interactuar con la instalación, lo que puede producir sonido, un cambio en los componentes visuales o incluso proporcionar información sensorial táctil.

El objetivo es a menudo que el espectador experimente una experiencia transformadora. Esto podría significar descubrir una nueva realización con respecto a un problema social o global importante.

El arte conceptual no tiene límites.

2. Evaluación Multimodal

A medida que nuestra comprensión de los estilos de aprendizaje se ha vuelto más frecuente, también lo ha hecho la aceptación del aprendizaje y la evaluación multimodal. La era digital no solo hace que esto sea conveniente, sino que, en cierto modo, la integración del aprendizaje y la evaluación multimodales se ha convertido en una necesidad.

Ruth Weeks de la Universidad de Sydney hace un excelente punto en su artículo, Evaluación multimodal: qué, por qué y cómo:

“Cuando las propias prácticas docentes utilizan la multimodalidad, parecería extraño volver a la redacción tradicional de ensayos para evaluar un curso”.

Los estudiantes tienen diferentes niveles de capacidades expresivas en diferentes modos. Desafortunadamente, algunas de esas habilidades pueden ocultarse cuando se confía en evaluaciones tradicionales basadas en texto, como escribir ensayos y trabajos finales.

Los profesores pueden ofrecer a los estudiantes una selección de modos de evaluación. Si bien algunos pueden preferir el texto, otros pueden sentirse más cómodos y capaces de transmitir su punto de vista visualmente creando un video o mediante varios tipos de gráficos.

Permitir que los estudiantes tengan flexibilidad puede producir resultados sorprendentemente impresionantes.

3. La Feria de Ciencias

Una feria de ciencias se trata de dar a los estudiantes la oportunidad de comunicarse con otros sobre su proyecto. Esa comunicación puede incluir los 5 modos de creación de significado.

Una exhibición típica incluirá un póster que muestra texto, gráficos y cuadros, además de fotos y tal vez incluso algunas obras de arte creadas por los propios estudiantes.

Habrá una variedad de fuentes de texto, colores y tamaños. Cada uno tiene un objetivo particular, como enfatizar puntos o conceptos clave.

El uso de gráficos y cuadros resume grandes cantidades de datos y puede ayudar a los espectadores a procesar información compleja.

La colocación de texto e imágenes utiliza el modo espacial para organizar la información o resaltar las características más importantes del proyecto.

Algunos estudiantes también pueden exhibir objetos tridimensionales para darle al espectador algo para tocar o inspeccionar visualmente desde diferentes ángulos.

Aunque no es común, ciertamente es plausible que algunas exhibiciones de carteles también puedan incluir estímulos auditivos para agregar otra dinámica a la presentación general.

4. Discurso conmovedor

Aunque el modo verbal de comunicación parece singular, aún puede tener un efecto profundo en el oyente. A veces no hay necesidad de imágenes o sonidos dinámicos como los que se encuentran en un video. Si el orador es lo suficientemente hábil, las palabras por sí solas pueden ser bastante poderosas.

Un excelente ejemplo del poder que se puede generar solo con el habla es el discurso que pronunció Martin Luther King, Jr. el 28 de agosto de 1963.

El Tengo un sueño El discurso es considerado uno de los mejores discursos en la historia de los Estados Unidos.

Desde una perspectiva multimodal, en primer lugar, está la velocidad del habla del Dr. King. Varía con un ritmo matizado en puntos clave para crear énfasis. Su tono de voz, a veces más fuerte o más suave, agrega otra dinámica.

También podemos ver elementos visuales en su postura y el movimiento de su cabeza para transmitir emoción y generar impacto.

Aunque el discurso es principalmente lingüístico, contiene muchos elementos que convergen para crear una Gestalt única.

5. Minecraft: Educación Multimodal

Minecraft Education es una plataforma de aprendizaje basada en juegos. Los profesores pueden integrar el software en la instrucción del aula y, al mismo tiempo, proporcionar a sus alumnos una experiencia educativa multimodal.

Este video muestra cómo los maestros en Irlanda integran el software en una lección de historia sobre los vikingos.

Obviamente, hay un fuerte componente visual en el software. Pero también incluye otros modos.

Por ejemplo, los estudiantes realizan investigaciones y escriben guiones para los personajes (ambos modos lingüísticos de comunicación).

Además, casi todas las escenas harán uso del modo auditivo en forma de efectos de sonido y música.

Los personajes también muestran gestos y movimientos no verbales que ayudan a transmitir significado y también transmiten información educativa.

Las actividades no solo son multimodales, sino que también fomentan la creatividad, la resolución de problemas y el aprendizaje cooperativo.

Conclusión

La multimodalidad se refiere a los diferentes modos de transmisión que pueden ocurrir en un mismo esfuerzo comunicativo. Hay al menos 5 modos, y un análisis de cada uno puede revelar muchos aspectos de cada uno.

En la era digital y con la apreciación de los estilos de aprendizaje, los educadores pueden ver el valor de integrar la multimodalidad en sus enfoques de instrucción y estrategias de evaluación.

Presentar información a través de conferencias y componentes multimedia puede hacer que una clase sea más interesante y mejorar la participación de los estudiantes.

Al mismo tiempo, dar a los estudiantes la flexibilidad de expresar su conocimiento en formas distintas al texto puede mejorar la evaluación.

La multimodalidad está en plena exhibición en ferias de ciencia, arte conceptual y discursos que pasan a la historia.

La vida cotidiana contiene numerosos ejemplos de comunicación multimodal. Los capítulos de libros de texto, los mensajes de texto a amigos y las expresiones de afecto se componen de varios modos.

Al combinar diferentes modos, creamos un significado que es más grande que la suma de sus partes individuales.

Referencias

Dressman, M. (2019). Multimodalidad y aprendizaje de idiomas. El manual de aprendizaje informal de idiomas39-55.

Halliday, MAK (1978). El lenguaje como semiótica social: la interpretación social del lenguaje y el significado (Vol. 42). Londres: Edward Arnold.

Jewitt, C. (2009). El Manual de Routledge de Análisis Multimodal. Nueva York: Routledge.

Kress, GR (2003). La alfabetización en la era de los nuevos medios. Prensa de Psicología.

Kress, GR (2010). Multimodalidad: Una aproximación semiótica social a la comunicación contemporánea. Nueva York: Routledge.

Lombardi, D. (2018). Desafiando la multimodalidad en el aula de composición universitaria: un experimento para iniciar el proceso. En Diseño e implementación de currículos y programas multimodales (págs. 15-34). Routledge.

Magnusson, P. y Godhe, AL (2019). Multimodalidad en la Educación de Idiomas–Implicaciones para la Enseñanza. Diseños para el aprendizaje, 11(1), 127-137.