Italiano

L’insegnamento è strutturato in tre diverse sezioni. Le prime due, caratterizzate da lezioni teoriche e pratiche sui fondamenti della percezione multisensoriale, sulle proprietà dell’ambiente fisico e sul loro controllo, sugli approcci orientati all’implementazione del design multisensoriale, sulle metodologie/tecniche di modellazione/simulazione per la creazione di prodotti/ambienti reali/virtuali/ibridi experience-based. La terza parte consiste nel supporto/assistenza allo sviluppo di progetti individuali su temi d’anno, o concordato con gli studenti.

Slide e materiali didattici forniti durante il corso.
- “La percezione multisensoriale” - Nicola Bruno, Francesco Pavani, Massimiliano Zampini - Il MULINO
- “Sense-It!: Insights into Multisensory Design” - Lois Frankel
-“Innovations of Kansei engineering” - Mitsuo Nagamachi, Anitawati Mohd Lokman - CRC press

Il corso ha come obiettivo fornire agli studenti gli strumenti di base necessari per la progettazione di esperienze attraverso il design multisensoriale. In particolare, mira a formare competenze per progettare le caratteristiche del complesso di stimoli sensoriali di ambienti e prodotti — reali, virtuali o ibridi — tenendo conto delle interazioni tra i diversi sensi coinvolti nella percezione dello spazio e degli oggetti che ci circondano.

Conoscenze basilari della Fisica Tecnica Ambientale ed attitudine all’utilizzo di software di modellazione/animazione grafica.

L’insegnamento è organizzato in tre diverse sezioni in cui vengono affrontati gli aspetti, teorici e pratici, della caratterizzazione, simulazione e riproduzione di ambienti multisensoriali, nonché lo sviluppo di progetti:
Le sezioni riguardano:
1) Approfondimenti teorici sulla percezione multisensoriale in relazione design dell’esperienza, sulle tecniche di riproduzione/simulazione e valutazione soggettiva.;
2) Approfondimenti tecnici di laboratorio sugli strumenti (Hw/Sw) di misura per la caratterizzazione acustica, illuminotecnica, termoigrometrica, olfattiva, degli ambienti e sulle modalità di simulazione/riproduzione e calibrazione in ambienti VR/ibridi);
3) Sviluppo assistito, in laboratorio, di progetti su temi d’anno.

La verifica dell’apprendimento, delle lezioni teoriche in aula e di quelle pratiche in laboratorio, viene effettuata durante tutte le fasi di sviluppo dei singoli progetti. In queste fasi viene valutata la capacità dello studente di realizzare un progetto multisensoriale e di svilupparlo in autonomia, integrando tra loro gli strumenti e le conoscenze apprese.
La verifica finale prevede la presentazione del di un progetto multisensoriale oltre che la discussione sulla problematiche connesse.

.

ELEMENTI TEORICI DELLA PERCEZIONE MULTISENSORIALE E DEL DESIGN DI ESPERIENZE MULTISENSORIALI
La percezione multisensoriale. La tecnologia VR. La Realta Virtuale Immersiva. Evoluzione della VR.
Applicazioni: Industry, Architecture and Urban Design, Training. Esempi: Studio Multisensoriale di un Parco Eolico. Restorativeness negli spazi urbani. Validità Ecologica della IVR.
Jordan (4-Piaceri) e Norman. Design del movimento e attaccamento al prodotto. Contesti emotivi dell'esperienza del prodotto. Risposte emotive alle qualità del prodotto. Semantica del prodotto. Tipi di sensi e ordine della percezione. Principi di progettazione multisensoriale. Congruenza sensoriale e integrazione multisensoriale. La dinamica del movimento.
Il suono. Il fenomeno fisico e le sue caratteristiche. L'apparato uditivo e la percezione. Propagazione del suono. Il suono digitale. Microfoni e sistemi di riproduzione sonora.
La luce. Il fenomeno fisico e le sue caratteristiche. La visione e la percezione visiva. Le grandezze fotometriche. Misure illuminotecniche. Simulazione.
L'odore: Fenomenologia e sue caratteristiche. L'olfatto e la sua percezione. Tecniche di simulazione/riproduzione.
Il tatto e i sensi somatici. Principali caratteristiche dei recettori tattili. Rilevare e Simulare i movimenti del corpo. Motion tracking systems. Simulazione del movimento e di altri stimoli fisici.
Strumenti di analisi soggettiva. Elementi di analisi dati.

ELEMENTI PRATICI PER LA MISURA E SIMULAZIONE HW/SW DI AMBIENTI MULTISENSORIALE:
Strumenti di misura dei parametri fisici ambientali (suono, luce, microclima ed odori) per la realizzazione e fruizione di ambienti VR/ibridi.
Elementi di modellazione 3D e Rendering/Mapping. Ottimizzazione e Programmazione.
I game engines. L'ambiente UE4. Principali strumenti per la realizzazione di scenari VR.
Principali strumenti di lighting in UE4. Implementazione in UE4. Programmazione lighting effects.
Principali strumenti di audio editing. Implementazione in UE4. Programmazione eventi sonori.
Modellazione tridimensionale degli scenari
Implementazione degli stimoli fisici
Programmazione Blueprint degli eventi e delle interazioni.

PROGETTAZIONE MULTISENSORIALE:
Assegnazione dei progetti.
Brainstorming sulle problematiche relative ai progetti e sulle strategie di progetto.
Modellazione tridimensionale degli scenari.
Implementazione degli aspetti grafici ed acustici.
Implementazione di ulteriori stimoli fisici.
Programmazione degli scenari e degli eventi.
Sviluppo di verifiche soggettiva ed analisi di primo livello.

Italian

The course is structured into three distinct sections. The first two feature theoretical and practical lessons on the fundamentals of multisensory perception, the properties of the physical environment and their control, approaches aimed at implementing multisensory design, and modeling/simulation methodologies/techniques for creating real/virtual/hybrid experience-based products/environments. The third section consists of support/assistance in the development of individual projects on yearly topics, or as agreed upon with the students.

Slides and material provided during the course.
- “La percezione multisensoriale” - Nicola Bruno, Francesco Pavani, Massimiliano Zampini - Il MULINO
- “Sense-It!: Insights into Multisensory Design” - Lois Frankel
-“Innovations of Kansei engineering” - Mitsuo Nagamachi, Anitawati Mohd Lokman - CRC press

The course aims to provide students with the fundamental tools needed to design experiences through multisensory design. In particular, it focuses on developing the ability to design the characteristics of the complex set of sensory stimuli of environments and products—whether real, virtual, or hybrid—while considering the interactions among the different senses involved in the perception of space and the objects around us.

Conoscenze basilari della Fisica Tecnica Ambientale ed attitudine all’utilizzo di software di modellazione/animazione grafica.

The course is organized in three different sections which deal with the theoretical and practical aspects of the characterization, simulation and reproduction of multisensory environments, as well as the development of projects:
The sections concern:
1) In-depth theoretical studies on multisensory perception and on reproduction / simulation and evaluation techniques;
2) Technical laboratory analysis on measuring instruments (Hw / Sw) for acoustic, lighting, thermo-hygrometric, olfactory and environmental characterization and on simulation / reproduction and calibration methods in VR / hybrid environments);
3) Assisted development, in the laboratory, of projects on themes of the year.

The verification of the learning, of the theoretical lessons in the classroom and of the practical ones in the laboratory, is carried out during all the phases of the projects development.
The final assessment involves the presentation of a multisensory project as well as the discussion of related problems.
In these phases the student's ability to carry out a multi-sensory project and to develop it individually, integrating the several multiphysics aspects is assessed.

-

THEORETICAL ELEMENTS OF MULTISENSORY PERCEPTION AND THE DESIGN OF MULTISENSORY EXPERIENCES:
Multisensory perception. VR technology. Immersive Virtual Reality. Evolution of VR.
Applications: Industry, Architecture and Urban Design, Training. Examples: Multisensory study of a wind farm. Restorativeness in urban spaces. Ecological validity of the IVR.
Jordan (4-Pleasures) and Norman. motional Design & Product Attachment. Emotional Contexts of Product Experience. Emotional Responses to Product Qualities. Product semantics. Types of Senses and Order of Perception. Multisensory Design Principles. Sensory Congruity and Multisensory Integration. The Dynamics of Movement.

The sound. The physical phenomenon and its characteristics. The auditory apparatus and perception. Sound propagation. Digital sound. Microphones and sound reproduction systems.
The light. The physical phenomenon and its characteristics. Vision and visual perception. The photometric quantities. Lighting measures. Simulation.
The smell: Phenomenology and its characteristics. The sense of smell and its perception. Simulation / reproduction techniques.
The touch and the somatic senses. Main features of tactile receptors. Detect and simulate body movements. Motion tracking systems. Simulation of movement and other physical stimuli.


PRACTICAL ELEMENTS FOR HW / SW MEASUREMENT AND SIMULATION OF MULTISENSORY ENVIRONMENTS:
Instruments for measuring physical environmental parameters (sound, light, microclimate and odors) for the creation and use of VR / hybrid environments.
Elements of 3D modeling and Rendering / Mapping. Optimization and Programming.
The game engines. The EU environment4. Main tools for creating VR scenarios.
Main lighting tools in the EU4. Implementation in the EU4. Lighting effects programming.
Main audio editing tools. Implementation in the EU4. Programming of sound events.
Three-dimensional modeling of the scenarios
Implementation of physical stimuli
Blueprint programming of the events and interactions.

MULTISENSORY DESIGN:
Assignment of projects.
Brainstorming on the projects’ issues and definition of the design strategies.
Three-dimensional modeling of the scenarios.
Implementation of graphic and acoustic aspects.
Implementation of additional physical stimuli.
Scenarios and events programming.
Development of subjective checks and first level analysis.