ITALIANO

L’insegnamento è strutturato in tre diverse sezioni. Le prime due, caratterizzate da lezioni teoriche e pratiche sui fondamenti della percezione multisensoriale, sulle proprietà dell’ambiente fisico e sul loro controllo, oltre che sui metodi/tecniche di modellazione/simulazione per la creazione di ambienti virtuali/ibridi esperienziali. La terza parte consiste nel supporto/assistenza allo sviluppo di progetti individuali su temi d’anno.

Slide e materiali didattici forniti durante il corso.


NICOLA BRUNO, FRANCESCO PAVANI, MASSIMILIANO ZAMPINI
La percezione multisensoriale
Il MULINO

Sense-It!: Insights into Multisensory Design
Author: Lois Frankel

Il corso ha come obiettivo quello di fornire agli studenti gli strumenti di base necessari per l’approccio alla progettazione multisensoriale, ovvero la possibilità di realizzare interiors, allestimenti temporanei e prodotti industriali, tenendo conto delle interazioni tra i sensi coinvolti nella percezione dello spazio e degli oggetti che ci circondano.

Conoscenze basilari della Fisica Tecnica. Attitudine all’utilizzo di software di modellazione grafica.

L’insegnamento è organizzato in tre diverse sezioni in cui vengono affrontati gli aspetti, teorici e pratici, della caratterizzazione, simulazione e riproduzione di ambienti multisensoriali, nonché lo sviluppo di progetti:
Le sezioni riguardano:
1) Approfondimenti teorici sulla percezione multisensoriale e sulle tecniche di riproduzione/simulazione e valutazione;
2) Approfondimenti tecnici di laboratorio sugli strumenti (Hw/Sw) di misura per la caratterizzazione acustica, illuminotecnica, termoigrometrica, olfattiva, degli ambienti e sulle modalità di simulazione/riproduzione e calibrazione in ambienti VR/ibridi);
3) Sviluppo assistito, in laboratorio, di progetti su temi d’anno.

La verifica dell’apprendimento, delle lezioni teoriche in aula e di quelle pratiche in laboratorio, viene effettuata durante tutte le fasi di sviluppo dei singoli progetti. In queste fasi viene valutata la capacità dello studente di realizzare un progetto multisensoriale e di svilupparlo in autonomia, integrando tra loro gli strumenti e le conoscenze apprese.
La verifica finale prevede la presentazione del di un progetto multisensoriale oltre che la discussione sulla problemiche connesse.

.

ELEMENTI TEORICI DELLA PERCEZIONE MULTISENSORIALE E DELLA SUA RIPRODUZIONE (25 h):
La percezione multisensoriale. La tecnologia VR. La Realta Virtuale Immersiva. Evoluzione della VR.
Applicazioni: Industry, Architecture and Urban Design, Training. Esempi: Studio Multisensoriale di un Parco Eolico. Restorativeness negli spazi urbani. Validità Ecologica della IVR.
Il suono. Il fenomeno fisico e le sue caratteristiche. L'apparato uditivo e la percezione. Propagazione del suono. Il suono digitale. Microfoni e sistemi di riproduzione sonora.
La luce. Il fenomeno fisico e le sue caratteristiche. La visione e la percezione visiva. Le grandezze fotometriche. Misure illuminotecniche. Simulazione.
L'odore: Fenomenologia e sue caratteristiche. L'olfatto e la sua percezione. Tecniche di simulazione/riproduzione.
Il tatto e i sensi somatici. Principali caratteristiche dei recettori tattili. Rilevare e Simulare i movimenti del corpo. Motion tracking systems. Simulazione del movimento e di altri stimoli fisici.
Strumenti di analisi soggettiva. Elementi di analisi dati.

ELEMENTI PRATICI PER LA MISURA E SIMULAZIONE HW/SW DI AMBIENTI MULTISENSORIALE (30 h):
Strumenti di misura dei parametri fisici ambientali (suono, luce, microclima ed odori) per la realizzazione e fruizione di ambienti VR/ibridi.
Elementi di modellazione 3D e Rendering/Mapping. Ottimizzazione e Programmazione.
I game engines. L'ambiente UE4. Principali strumenti per la realizzazione di scenari VR.
Principali strumenti di lighting in UE4. Implementazione in UE4. Programmazione lighting effects.
Principali strumenti di audio editing. Implementazione in UE4. Programmazione eventi sonori.
Modellazione tridimensionale degli scenari
Implementazione degli stimoli fisici
Programmazione Blueprint degli eventi e delle interazioni.

PROGETTAZIONE MULTISENSORIALE (41 h):
Assegnazione dei progetti.
Brainstorming sulle problematiche relative ai progetti e sulle strategie di progetto.
Modellazione tridimensionale degli scenari.
Implementazione degli aspetti grafici ed acustici.
Implementazione di ulteriori stimoli fisici.
Programmazione degli scenari e degli eventi.
Sviluppo di verifiche soggettiva ed analisi di primo livello.

Italian

The course is structured into three distinct sections. The first two consist of theoretical and practical lessons on the fundamentals of multisensory perception, the properties of the physical environment, their control, as well as the modelling/simulation methods/techniques to build up experiential virtual/hybrid environments. The third section consists of support/assistance to the development of individual projects on yearly topics.

Slides and material provided during the course.


NICOLA BRUNO, FRANCESCO PAVANI, MASSIMILIANO ZAMPINI
La percezione multisensoriale
Il MULINO

Sense-It!: Insights into Multisensory Design
Author: Lois Frankel

The course aims to provide students with the necessary tools for a multi-sensory approach to design, which is the ability to realize interiors, temporary installations and industrial products, taking into account the interactions between the senses involved in the perception of the surrounding space and objects.

Basic knowledge of the Technical Physics. Attitude to use graphical modelling software.

The course is organized in three different sections which deal with the theoretical and practical aspects of the characterization, simulation and reproduction of multisensory environments, as well as the development of projects:
The sections concern:
1) In-depth theoretical studies on multisensory perception and on reproduction / simulation and evaluation techniques;
2) Technical laboratory analysis on measuring instruments (Hw / Sw) for acoustic, lighting, thermo-hygrometric, olfactory and environmental characterization and on simulation / reproduction and calibration methods in VR / hybrid environments);
3) Assisted development, in the laboratory, of projects on themes of the year.

The verification of the learning, of the theoretical lessons in the classroom and of the practical ones in the laboratory, is carried out during all the phases of the projects development.
The final assessment involves the presentation of a multisensory project as well as the discussion of related problems.
In these phases the student's ability to carry out a multi-sensory project and to develop it individually, integrating the several multiphysics aspects is assessed.

-

THEORETICAL ELEMENTS OF MULTISENSORY PERCEPTION AND OF ITS REPRODUCTION
(25 h):
Multisensory perception. VR technology. Immersive Virtual Reality. Evolution of VR.
Applications: Industry, Architecture and Urban Design, Training. Examples: Multisensory study of a wind farm. Restorativeness in urban spaces. Ecological validity of the IVR.
The sound. The physical phenomenon and its characteristics. The auditory apparatus and perception. Sound propagation. Digital sound. Microphones and sound reproduction systems.
The light. The physical phenomenon and its characteristics. Vision and visual perception. The photometric quantities. Lighting measures. Simulation.
The smell: Phenomenology and its characteristics. The sense of smell and its perception. Simulation / reproduction techniques.
The touch and the somatic senses. Main features of tactile receptors. Detect and simulate body movements. Motion tracking systems. Simulation of movement and other physical stimuli.


PRACTICAL ELEMENTS FOR HW / SW MEASUREMENT AND SIMULATION OF MULTISENSORY ENVIRONMENTS (30 h):
Instruments for measuring physical environmental parameters (sound, light, microclimate and odors) for the creation and use of VR / hybrid environments.
Elements of 3D modeling and Rendering / Mapping. Optimization and Programming.
The game engines. The EU environment4. Main tools for creating VR scenarios.
Main lighting tools in the EU4. Implementation in the EU4. Lighting effects programming.
Main audio editing tools. Implementation in the EU4. Programming of sound events.
Three-dimensional modeling of the scenarios
Implementation of physical stimuli
Blueprint programming of the events and interactions.

MULTISENSORY DESIGN (41 h):
Assignment of projects.
Brainstorming on the projects’ issues and definition of the design strategies.
Three-dimensional modeling of the scenarios.
Implementation of graphic and acoustic aspects.
Implementation of additional physical stimuli.
Scenarios and events programming.
Development of subjective checks and first level analysis.