Til Jonblogg - HovedsidenTil infodesign.nos nyhetsside.

JonblOGG

23.6.03

Human Language Technology og multimodalitet

Med jevne mellomrom blir jeg skikkelig overveldet av all den informasjonen som finnes på nettet. Joda jeg leste The Web, According to Google (via B&B) og forstår at verden er mangfoldig, men likevel. Dagens kandidat kom jeg over via et søk etter "multimodality", forøvrig etter tips fra Ture S. som jeg etterhvert må begynne å kreditere som mentor. Øverst på trefflista finner jeg Survey of the State of the Art in Human Language Technology som er en mildt sagt omfattende, og tilsynelatende oppdatert, oversikt over forskningsfeltet knyttet til "human language technology". Her finnes en fyldig regjørelse for multimodalitet. For de som heller vil holde seg innen det nordiske språkområdet ser disse forelseningsnotatene + del 2 (omfattende sådanne) av Anders Marner også interessant ut.
Jeg er spent på boka Multimodal Discourse av Gunther Kress og Theo van Leeuwen som allerede er på vei over dammen. Kress og Van Leeuwen "show how two kinds of thought processes interact in the design and production of communicative messages: "design thinking" and "production thinking," the kind of thinking which occurs in direct interaction with the materials and media used".
Fant forrsten også denne utmerkede bibliografien knyttet til multimedia design.
Multimodalitet er et interessant begrep som tar opp i seg at en "tekst" er bærer av mening på flere nivå, ikke bare det rent lingvistiske med relevans for alle medierte medier, ikke minst de "digitale". Et eksempler er  CSS Zen Garden som jeg skrev om for noen dager siden. Det viser eksempler der den samme teksten (eksakt lik xHTML-kode) er presentert med vidt forskjellige design, utelukkende ved hjelp av stilsett. Dette er dermed en enkel synliggjøring av tekstens multimodalitet.

Til toppenjon @ infodesign.no
Prosjektet Nyheter
Informasjonsdesign for digitale medier

Flere foto