Lecture en cours : un film que vous contrôlez avec votre esprit

Avec l'aimable autorisation de Richard Ramchurn

Habituellement, lorsque vous regardez un film, vous vous asseyez dans votre fauteuil, les yeux braqués sur un écran, au fur et à mesure que l'histoire se déroule. C'est très différent quand on regarde l'un des derniers films de Richard Ramchurn.

Ramchurn, étudiant diplômé de l'Université de Nottingham à Nottingham, en Angleterre, est un artiste et réalisateur qui a passé ces dernières années à créer des films que vous pouvez contrôler avec votre esprit, simplement en mettant un casque à 100 $ qui détecte l'activité électrique dans votre cerveau. Avec ce casque EEG allumé, les scènes, la musique et l'animation changent à chaque fois que vous le regardez, en fonction des méandres de votre esprit.

La dernière œuvre de Ramchurn, un conte avant-gardiste de 27 minutes intitulé Le moment qui (sans surprise) explore un avenir sombre où les interfaces cerveau-ordinateur sont la norme, est presque terminé. Tout en terminant le travail de montage, Ramchurn a commencé à le projeter dans une petite caravane autour de Nottingham, où six à huit personnes peuvent s'asseoir et le voir en même temps. (Un seul d'entre eux le contrôle pendant que les autres observent.) Il le montrera également à un Festival du film à Sheffield, en Angleterre, en juin.

L'affiche promotionnelle de Le moment , le nouveau film contrôlé par le cerveau de Richard Ramchurn. Avec l'aimable autorisation de Richard Ramchurn

Si vous portez le casque, un NeuroSky MindWave, tout en regardant Le moment , il suivra votre niveau d'attention en mesurant l'activité électrique dans une plage de fréquences censée correspondre à l'attention (bien qu'il convient de noter qu'il existe les doutes sur dans quelle mesure des appareils comme celui-ci peuvent réellement effectuer un tel suivi). La partition calculée en continu est envoyée sans fil à un ordinateur portable, où le logiciel spécialement conçu par Ramchurn l'utilise pour modifier le montage des scènes, le flux de la musique de fond, etc. Vous n'avez pas besoin de bouger un muscle.

Le simple fait de faire fonctionner tout cela est excitant pour Ramchurn. Mais au-delà de cela, dit-il, permettre au spectateur de monter efficacement le film – soit en y réfléchissant consciemment, soit en répondant naturellement à ce qui se passe à l'écran – crée une sorte de boucle de rétroaction à double sens. Le film change à cause de ce que vous ressentez, et la façon dont vous vous sentez change à cause du film.

Cela devient presque une partie du système de votre esprit, dit-il.

Les débuts de la BCI

Ramchurn, 39 ans, a passé des années fabrication courts métrages, documentaires et vidéoclips, et expérimente des façons d'intégrer la technologie dans son travail. Il a commencé à jouer avec l'idée d'une interface cerveau-ordinateur pour le cinéma en 2013, lorsqu'il a essayé pour la première fois un casque NeuroSky. Il l'a finalement utilisé pour aider à faire son premier film contrôlé par le cerveau, Les inconvénients du voyage dans le temps , en 2014 et 2015.

Ce premier film est plus abstrait que Le moment , oscillant entre l'état de rêve du personnage principal et la réalité. Le casque surveillait le clignotement du spectateur pour déterminer quand passer d'un plan à l'autre, ainsi que son attention et sa méditation (il s'agit d'une autre gamme de fréquences d'ondes cérébrales que le casque peut enregistrer et marquer) pour déterminer quand et comment basculer entre fantaisie et modes réels.

En regardant en arrière, dit Ramchurn, Les inconvénients du voyage dans le temps était trop occupé. Le contrôle basé sur le clignotement a en fait retiré les gens de l'expérience interactive en les sensibilisant à leur propre physiologie. Après avoir visionné la coupe du réalisateur, une version qu'il a manipulée en se regardant, je peux confirmer qu'elle est, pour le moins, exigeante à regarder.

Des milliards de possibilités

Pour Le moment , Ramchurn a cessé de clignoter et s'est concentré sur les données d'attention. Il a tendance à monter et descendre comme une onde sinusoïdale au fur et à mesure que votre attention se déplace, diminuant environ toutes les six secondes. Il a donc utilisé ces creux naturels pour signaler une coupure à un nouveau coup. À tout moment, le film alterne entre deux de ses trois fils narratifs, qui suivent trois personnages qui interagissent tout au long.

Avec toutes les possibilités de changements dirigés par l'esprit, Ramchurn pense qu'il existe environ 101 billions de versions différentes du film que vous pourriez voir. Pour rendre cela possible dans un film de 27 minutes, il a dû créer trois fois plus de séquences qu'il n'en aurait normalement et rassembler six fois plus d'audio.

Comme je ne pouvais pas me rendre au Royaume-Uni pour prendre en charge le film moi-même, Ramchurn m'a envoyé la meilleure chose suivante : deux enregistrements de Le moment contrôlé par deux personnes différentes.

Les différences étaient pour la plupart subtiles, telles que des variations dans la musique et dans l'animation entrecoupées de plans d'acteurs réels. Mais il y avait aussi des différences évidentes : une version m'a permis de jeter un coup d'œil à l'intérieur d'un cahier dans lequel l'un des personnages principaux écrivait et dessinait, et comprenait plus de dialogues qui aidaient à étoffer l'histoire.

L'effet global de regarder un film dont la trajectoire était quelque peu contrôlée par les spectateurs précédents était étrange et convaincant. Je n'arrêtais pas de me demander sur quoi, exactement, ils avaient (ou n'avaient pas) le contrôle, et à quel point ils y pensaient pendant qu'ils regardaient. Et comment savaient-ils (ou moi) avec certitude qu'ils contrôlaient quoi que ce soit ?

J'ai posé cette question à Steve Benford , professeur d'informatique à l'Université de Nottingham et conseiller de Ramchurn. Il a convenu que même si les téléspectateurs savaient que leurs clignements étaient alignés avec des coupures de film dans Les inconvénients du voyage dans le temps , votre rôle dans la direction Le moment avec votre cerveau est plus flou.

Avec un art interactif comme celui-ci, explique Benford, vous ne savez pas toujours ce qui se passe. Il faut interpréter ce qui se passe, et l'artiste a le choix dans quelle mesure il veut le rendre plus ou moins explicite.

Participation du public

Ramchurn n'est pas la première personne à essayer d'amener le public à interagir avec les films - l'histoire du cinéma est remplie d'efforts allant des chansons à téléphone intelligent applications destiné à être utilisé tout en regardant.

Jacob Gaboury, un professeur adjoint de cinéma et de médias à l'Université de Californie à Berkeley, se souvient d'avoir été assis dans un théâtre dans les années 1990 et d'avoir utilisé un joystick pour choisir entre deux fins de film différentes. Faire des films qui répondent à l'activité cérébrale pourrait amener les cinéastes à créer différents types d'histoires, d'images et de sons qu'ils ne le feraient normalement, dit-il.

Histoire connexe

Histoire connexe L'avenir des films personnels consiste à les filmer en 3D et à les lire en réalité virtuelle.

Souvent, vous vous enlisez à raconter des histoires d'une manière particulière au cinéma, il pourrait donc être intéressant de voir comment cela évoluerait du point de vue d'un réalisateur, dit-il.

Mais parce qu'il est contrôlé par une seule personne, il n'imagine pas que ce soit le genre de chose que vous regarderiez dans une salle de cinéma. Ramchurn dit qu'il a expérimenté des façons dont ces films pourraient fonctionner devant un public plus large, par exemple en laissant trois personnes s'affronter pour être le contrôleur principal (en clignant plus des yeux et en obtenant des scores de méditation plus élevés), ou en prenant une moyenne des réactions pour déterminer ce qui s'est passé à l'écran.

Au final, dit-il, c'est un mode coopératif qui rendait chacun responsable d'un élément du film – la bande son, le découpage des plans, le mélange des calques – qui a le mieux fonctionné.

Les films qu'ils ont faits coulaient mieux, dit-il.

cacher