Discurso multimodal.

Los modos y
los medios de la comunicacin
contempornea (2001)
Gunther KRESS & Theo VAN
LEEUWEN
GUA PARA EL ANLISIS MULTIMODAL Y/O
UNA TEORA DEL LENGUAJE DE LOS
MLTIPLES MEDIOS
DIFERENTES MODOS O SISTEMAS SEMITICOS DE
CODIFICACIN :
1. Lengua
2. Imagen visual
3. Msica
4. Sonido
5. Gestualidad
6. Color

Circuito de la comunicacin
(VERBAL Y NO-VERBAL)
EMISOR
RETROALIMENTACIN
RECEPTOR
MENSAJE
CANAL / MEDIO
CDIGO /SISTEMA SEMITICO
ARTICULACIN DEL SENTIDO EN
TEXTOS MULTIMODALES
La lingstica tradicional tena un lenguaje
definido como un sistema que funciona a
travs de la doble articulacin, donde un
mensaje era una articulacin entre
significante y significado.
Los textos multimodales son constructores de
sentido en mltiples articulaciones, llamadas
ESTRATOS: discurso, diseo, produccin y
distribucin.
DISCURSO
Los discursos son conocimientos socialmente
construidos de (algn aspecto de) la realidad.
Por socialmente construido queremos decir
que han sido desarrollados en contextos
sociales especficos y en formas que son
apropiadas a los intereses de los actores
sociales en esos contextos, sean contextos
muy amplios o particulares; contextos
explcitamente institucionalizados o
informales.
Los discursos no slo proveen versiones sobre
quin hace qu, cundo y dnde, sino que
tambin suman evaluaciones, interpretaciones
y argumentos a estas versiones.
DISEO
Est a la mitad del camino entre el contenido y la
expresin. Es el lado conceptual de la expresin,
y es el lado expresivo de la concepcin. Los
diseos son (usos de los) recursos semiticos en
todos los modos semiticos y combinaciones de
modos semiticos.
Los diseos son medios para entender los
discursos en el contexto de una situacin
comunicativa dada. Pero los diseos tambin
suman algo nuevo: permiten y dan lugar a la
situacin comunicativa que cambia el
conocimiento socialmente construido en la (inter)
accin social.
el diseo todava est separado de la
produccin material real del producto
semitico y de la articulacin material real del
acontecimiento semitico.
Los recursos sobre los que el diseo trabaja,
los modos semiticos, son an abstractos,
capaces de ser llevados a cabo a travs de
diferentes materialidades.
Modo
Los modos son recursos semiticos (CDIGOS)
que permiten la realizacin simultnea de
discursos y tipos de (inter)accin.
Los diseos usan entonces estos recursos,
combinando modos semiticos y
seleccionando dentro de las opciones
disponibles de acuerdo a los intereses de una
situacin comunicativa particular.
PRODUCCIN
Se refiere a la organizacin de la expresin, a
la articulacin material real del evento
semitico o a la produccin material real del
artefacto semitico.
Aqu competen un conjunto de habilidades
diferentes: habilidades tcnicas, habilidades
de la mano y del ojo, habilidades no
relacionadas a modos semiticos sino a
medios semiticos.
MEDIO
Es la forma de ejecucin (la sustancia material
elaborada en la cultura y trabajada en un tiempo
cultural), el sentido en que lo usan los artistas
cuando hablan del medio leo o tmpera sobre
papel, bronce sobre base de mrmol; y tambin
se aplica a los medios que no producen huellas
que perduren ms all del momento de la
articulacin, como el habla o la msica.
A veces, el diseo y la produccin, modo y medio,
son difciles de separar
PROCEDENCIA
Se refiere a la idea de que los signos pueden
ser importados desde un contexto (otra era,
grupo social, cultura) a otro, para dar a
entender ideas y valores asociados a ese otro
contexto, por parte de aquellos que lo
importan.
La idea de Procedencia est muy relacionada
con las ideas de mito y connotacin, como
fueron introducidas a la semitica por Roland
Barthes.
EJEMPLO
En los aos 60 los Beatles introdujeron
el sonido de la ctara en su msica para
significar valores que, en la cultura joven
psicodlica de ese tiempo, estaban
asociados con el pas de origen del
instrumento: meditacin, drogas como
medio de expansin de la conciencia, etc.

POTENCIAL DE SIGNIFICACIN
EXPERIMENTAL:
Se refiere a la idea de que los significantes
materiales tienen un significado potencial que
se deriva de aquello que hacemos cuando los
articulamos, y de nuestra habilidad para
extender nuestra experiencia prctica
metafricamente y convertir accin en
conocimiento.
Cada realizacin de un mismo diseo puede
ser interpretada de diferentes maneras.
DISTRIBUCIN
Tiende a ser vista como no semitica, como
no sumando sentido.
Se refiere a la potencial re-codificacin de los
productos o eventos semiticos, con
propsitos de registro, preservacin y/o
distribucin.
La tecnologas de distribucin generalmente
no estn pensadas para la produccin, sino
como tecnologas de re-produccin.
A QU LE LLAMAMOS DISCURSO EN UNA
PERSPECTIVA MULTIMODAL? LOS
DESAFOS DE UNA NUEVA SEMITICA.

WILLIAMSON, Rodney


ALED 6, Santiago, Chile, septiembre de 2005, p.1

Resalta del trabajo de Kress y Van
Leeuwen:
Todos los textos son multimodales
Plantean nuevas perspectivas sobre texto, lectura
y competencia comunicativa, estableciendo los
fundamentos de una nueva semitica que pone
en tela de juicio la primaca de la expresin
verbal.
Hay un cambio terico que va desde una teora
que slo dio cuenta del lenguaje hacia una teora
que pueda dar cuenta de la gestualidad, el habla,
las imgenes, la escritura, objetos
tridimensionales, colores, msica, entre otros
modos de expresin.
Corrientes de teora multimodal
Harry Bunt, Robert Beun, Granstrm y Allwood
en el norte de Europa.
El proyecto de Anthony Baldry con el apoyo de
Paul Thibault, en 4 Universidades italianas.
En Australia, en relacin, sobre todo, con la
lingstica sistmica funcional de Halliday).
Las investigaciones multimodales de la
conversacin en Estados Unidos por Charles
Goodwin y Sigrid Norris.
La corriente britnica con Gunther Kress, Theo
van Leeuwen, Carey Jewitt.
Estratos analticos de Kress & van Leeuwen
DISCURSO ( formas de conocimiento socialmente
situadas(quin, qu, dnde, cundo, cmo?) + evaluaciones,
propsitos, interpretaciones, legitimaciones.

DISEO (conceptualizacin de la forma del producto semitico
Se disea:
1) una configuracin de discursos
2) una determinada (inter)accin
3) una determinada combinacin de modos

PRODUCCIN (articulacin material del diseo sea como
prototipo, sea como producto final)

DISTRIBUCIN (recodificacin tcnica del producto para fines de
grabacin o difusin)
La teora multimodal nos propone un
enfoque sobre el discurso en el que ste
no se ve como un objeto de estudio
aislado, sino como parte de un proceso.
La teora multimodal nos habla de
discursos en plural porque su nica
existencia real es a travs de actos de
comunicacin, en los que cada discurso
entra en combinacin con otros.
Foucault nos ensea que el discurso es una
construccin social, pero la significacin social
del discurso slo se puede apreciar enfocando
todo el proceso comunicativo, desde su
concepcin hasta las condiciones materiales y
tcnicas de su distribucin.
La naturaleza histrica y evolutiva de los
discursos se aprecia vindolos como parte de
un proceso de difusin a partir de un emisor o
emisores hacia uno o varios pblicos, a travs
de determinadas situaciones comunicativas,
es decir, determinados sitios y tiempos.
La monomodalidad delata una tendencia hacia la
especializacin, la ejecucin de un gnero por
profesionales. Un ejemplo es el paso de la Edad Media
tarda (notablemente multimodal) hacia el
Renacimiento (monomodal) fig. 1 y 2
El arte eclesistico o monstico emplea elementos
tanto pictricos como verbales, con fines didcticos.
Ms tarde, las escuelas de arte, arquitectura y
escultura del Renacimiento van dando lugar a una
prctica artstica ms profesional. El pintor de carrera
debe ahora poder expresarlo todo por modos
pictricos (formas, cromatismo). Representacin
natural y valor icnico se funden en una sola categora;
los elementos verbales desaparecen. Fig. 3
Anunciacin, Simone Martini, 1333
Anunciacin, Fra Angelico, 1432

Anunciacin, Francesco Salviati, 1534
Con la aparicin de la imprenta se observa un
proceso similar.
En los siglos XIV y XV, aparecen libros
suntuosamente ilustrados, siguiendo la
tradicin de los manuscritos iluminados de la
Edad Media (Fig. 4, 5 y 6)
La re-organizacin de la pgina en trminos de
una coherencia puramente verbal comienza a
aflorar desde el siglo 16 (Fig. 7).
Y el proceso llega a su apogeo en los siglos
XVIII y XIX (Fig.8).
Libro de horas, Flandes, s. XV
Ilustraciones de la primera edicin de
Los cuentos de Canterbury de Chaucer
Dos portadas de ediciones del siglo
XVI, de Gabrieli y Galileo
Portadas de ediciones de Newton
(1730) y de Jane Austen (1811)
El grado de integracin de otros modos de
comunicacin al arte verbal, el predominio y el
poder de la escritura alcanzan su culmen en la
literatura.
Los tonos de la voz, las posturas del cuerpo, las
expresiones de la cara, se representan a travs
del yo potico, quien acta como observador,
audiencia real de la escena. De esta manera, una
serie de modos de expresin pertenecientes a la
situacin comunicativa material se subsumen en
la expresin escrita: el yo ve (modo visual) y
oye (modo sonoro).
El proceso inverso, el paso de la monomodalidad
a la multimodalidad, se ha producido lentamente
en el paso del siglo XIX al XX, y atropelladamente
en el XXI.
As como la invencin de la imprenta resalt la
importancia de la letra impresa, las nuevas
tecnologas electrnicas, con las que los
contenidos y formatos visuales se pueden
manejar y difundir con enorme facilidad, vuelven
a dar prominencia a la imagen. Vuelven a
aparecer los conos, esta vez no con significado
filosfico o sagrado, sino comercial: se trata de
logotipos, textos-imgenes de marcas registradas,
etc.
El discurso revela su carcter histrico, no slo a
travs de la serie de modos que en determinado
momento sirven para expresarlo, sino tambin a
travs de su combinacin con otros discursos.
Por ejemplos:
El discurso amoroso y el religioso en la tradicin
de la balada romntica del s. XIX.
La interseccin del discurso cientfico con el
comercial es una tcnica establecida para
vendernos productos apelando a la autoridad de
expertos.
CASOS DISCURSIVOS MS
PROBLEMTICOS
Cuando la combinacin de discursos se realiza en
el contexto de una fusin de gneros discursivos,
se produce un caso de verdadera hibridacin
discursiva, que puede dar lugar a un mensaje
bifurcado, diferente para cada tipo distinto de
audiencia contemplado.
Las hibridaciones en nuestros medios
contemporneos, se caracterizan por propagar
mensajes dobles, combinaciones discursivas
disparejas, que parecen coherentes debido a un
hbil manejo de recursos multimodales.
De la misma manera que en los medios se ven
casos de fusiones discursivas particularmente
modernas, tambin se producen casos de
fusin de distintos modos de expresin.
En los mensajes publicitarios, por ejemplo, las
letras del lenguaje escrito se explotan en su
plena potencialidad visual. De esta manera,
una letra o morfema se puede convertir en
icono, objeto visual, objeto tridimensional con
cara delantera y trasera, en una especie de
ventana para visualizar otros objetos y
referentes, un espacio cromtico, etctera
Anuncio de la marca X
Anuncio de la marca OXOXO
La superposicin de modos, formas,
estructuras en el espacio virtual, creando
efectos de aparente instantaneidad o
simultaneidad en el tiempo, es un rasgo de los
nuevos contextos de comunicacin electrnica
en el mundo moderno.
Los medios contemporneos tambin
transforman las estructuras discursivas. Un
caso es la narracin, que acostumbramos
concebir en trminos verbales, pero que tiene
un evidente potencial multimodal (videoclip
comercial Doritos rlalas)
Conclusiones
- La teora multimodal plantea el discurso como una realidad
cambiante, evolutiva, histrica, que slo se puede captar a travs
de un diseo y un contexto comunicativo. En esto, los ejemplos de
la historia pasada son tiles para comprender la historia de actos
comunicativos actuales o recientes.
- Los detalles materiales y tcnicos de la produccin y distribucin
de discursos cobran una nueva y especial importancia.
- Para comprender la naturaleza de los discursos, hay que
examinar las audiencias que los reciben. El papel creativo del
receptor es cada vez ms importante en el sofisticado manejo de
mltiples modos en la comunicacin contempornea.
- Los aportes de la teora multimodal son esenciales para un
anlisis verdaderamente crtico del discurso.