1Démarrer en trois gestes
Pas de boîtier, pas d'électrode, pas d'installation. Un téléphone avec une caméra, une plante vivante, et cinq minutes offertes pour juger sur pièce.
Posez le téléphone
Sur un trépied, ou calé contre un objet. Tenu à la main, le tremblement de vos doigts noie complètement le mouvement de la plante.
Cadrez le feuillage
De près, en remplissant l'image. Touchez Activer la caméra et autorisez l'accès quand le navigateur le demande.
Laissez tourner
Trente secondes pour que les filtres s'établissent. La musique démarre dès que les deux mesures concordent.
2Bien cadrer
C'est le seul geste qui demande un peu de soin, et il décide de tout le reste. L'application cherche des déplacements de l'ordre du dixième de pixel : tout ce qui bouge dans l'image autre que la plante est du bruit.
Près, et rempli
Le feuillage doit occuper la plus grande partie du cadre. Une plante vue de loin dans une pièce donne surtout la pièce.
Lumière stable
Évitez un contre-jour ou une lumière qui varie. Une ombre qui passe se mesure comme un mouvement.
Du contraste
Des bords nets, des nervures, des découpes. Une zone sans relief ne peut révéler aucun mouvement, quelle que soit la durée d'observation.
Rien d'autre qui bouge
Un rideau, un écran, un passage dans le champ : tout cela entre dans la mesure et brouille ce que fait la plante.
3Ce que l'application mesure
Deux mesures indépendantes tournent en parallèle, et elles ne servent pas à la même chose. C'est leur croisement qui distingue une vraie plante d'une plante en plastique, d'une photo ou d'un écran.
Le mouvement
La caméra découpe l'image en 64 zones et suit leurs micro-déplacements 30 fois par seconde. Le mode commun est retiré : ce qui bouge partout à la fois, comme une variation de lumière, est écarté. Reste le mouvement propre au feuillage, mesuré par sa cohérence spatiale : une feuille couvre plusieurs zones voisines qui bougent ensemble, le bruit non.
La reconnaissance
Un réseau de neurones embarqué compare l'image à 61 descriptions : 41 de plantes réparties en 14 familles, et 20 contre-exemples (plastique, soie, papier, écran, mur, tissu, fleurs séchées). Il rend la famille et une confiance. Le modèle tourne sur votre appareil, aucune image ne part.
Deux règles, et elles diffèrent
| Moment | Condition | Pourquoi |
|---|---|---|
| Pour démarrer | Mouvement végétal et plante reconnue | C'est ce double verrou qui empêche de faire chanter un rideau vert. |
| Pour continuer | La reconnaissance suffit | Une plante immobile reste une plante. La musique ne s'interrompt que lorsque le modèle ne voit plus de plante. |
4L'écran, expliqué
Tout se lit sur l'image elle-même, sans rien déplier.
Le tracé sur l'image
Pendant la mesure, Plantsound dessine la plante par-dessus l'image, en direct : sa silhouette lumineuse, chaque feuille avec sa couleur et son numéro (F1, F2…), ses nervures, et l'axe principal de chaque feuille en pointillé. Une feuille garde sa couleur et son numéro d'une image à l'autre, et sa lueur suit le mouvement mesuré sous elle : c'est la feuille qui s'illumine quand elle bouge.
Le tracé repose sur la couleur du feuillage, pas sur le modèle de reconnaissance. Un feuillage pourpre ou panaché est suivi aussi, par sa saturation, dès que le modèle y voit une plante. Quand le modèle ne reconnaît rien, le tracé s'estompe : on voit ce que la couleur seule a trouvé, en retrait. Une nervure ne coupe pas une feuille en deux, deux feuilles qui se chevauchent restent séparées.
| Réglage | Choix | Où |
|---|---|---|
| Tracé sur l'image | Silhouette, feuilles et nervures · Silhouette et feuilles · Silhouette seule · Aucun tracé | Réglages Caméra |
| Grille de mesure | Visible · Atténuée (par défaut) · Discrète · Masquée |
La grille de mesure, ce sont les rectangles verts : les zones où la mesure du mouvement trouve du signal. Utile pour cadrer, elle peut s'atténuer ou disparaître une fois la plante en place ; la mesure, elle, ne change pas. Les deux choix sont retenus d'une visite à l'autre.
5Les quatorze familles
Chaque famille reconnue a son profil musical : une gamme, une tonique, un timbre, une vitesse, une façon de poser les notes. Ce n'est pas décoratif : deux plantes de familles différentes ne sonnent pas pareil, et c'est reproductible.
| Famille | Caractère musical |
|---|---|
| Plante grasse | Mineur, profond, très lent. Une plante qui stocke et attend. |
| Cactus | Pentatonique mineure, marimba, piqué. Sec et découpé. |
| Fougère | Dorien, verre, ornementé. La découpe de la fronde. |
| Grimpante | Dorien, piano, lié. Le mouvement continu de la liane. |
| Palmier | Majeur, nappe, ample. |
| Bambou et graminées | In sen japonais, bols. Le froissement. |
| Grande feuille | Lydien, nappe, large et lumineux. |
| Plante à fleurs | Sol majeur, cloches, posé. La floraison appelle. |
| Fleurs coupées | Damanhurien, timbre organique, notes liées. Cueilli, rassemblé, et déjà en train de finir. |
| Orchidée | Lydien, verre, arpèges. La seule qui ait droit à la virtuosité. |
| Arbre d'intérieur | Mineur harmonique, profond, rare. |
| Aromatique | Pentatonique, marimba, vif et menu. |
| Mousse | Chromatique, profond, très lent et très grave. |
| Feuillage | Profil neutre, handpan. Retenu quand la forme n'est pas lisible : mieux vaut un caractère sobre qu'un caractère tiré au sort. |
6Les quatre réglages
Gamme, note de référence, type de son et vitesse. La plante les choisit, et vous pouvez reprendre la main sur chacun indépendamment.
Deux façons de les changer
- Touchez la case sur l'image. Une liste s'ouvre, avec toutes les valeurs et leur couleur. C'est le chemin le plus court.
- Ou dépliez « Imposer des réglages » sous l'image, où les mêmes listes se trouvent, avec en plus la langue des libellés.
Automatique, ou imposé
Chaque liste garde Automatique en tête, et cette entrée dit ce que la plante a choisi. Un réglage que vous imposez se distingue par un contour violet sur sa case. Remettre « Automatique » rend la décision à la plante.
La couleur de chaque case suit sa valeur : elle permet de voir d'un coup d'œil que la plante a changé de gamme ou d'instrument, sans avoir à lire.
7Gammes et fréquences
Dix-neuf gammes sont disponibles. Aucune ne peut produire de dissonance franche : c'est ce qui rend n'importe quel signal écoutable, quelle que soit l'agitation de la plante.
Occidentales
Majeur, mineur naturel, mineur harmonique, chromatique.
Modes
Dorien, phrygien, lydien.
Pentatoniques
Majeure, mineure, blues, in sen, hirajoshi, chinois.
Traditions
Amérindien, indien (bhairav), arabe (hijaz), persan.
Bien-être
Guérison, damanhurien.
La fréquence de référence
Quatre diapasons, réglables depuis la case Note de référence, qui affiche les deux informations ensemble.
| Fréquence | Nom | Ce que ça change |
|---|---|---|
| 440 Hz | Standard | La référence internationale. |
| 432 Hz | « Émotionnel » | Un réaccordage de l'ensemble, soit −32, −41 et −53 centièmes de demi-ton. Les mêmes notes sont jouées, simplement plus basses. Le diapason réaccorde, il ne transpose pas la composition. |
| 429,62 Hz | « Eau » | |
| 426,7 Hz | « Terre » |
Le diapason est un réglage d'écoute : il n'appartient à aucun profil de plante, et il est retenu d'une visite à l'autre.
La façon de jouer
Le nombre affiché sous Vitesse compte des mesures, pas des notes. À chacune, la plante peut sonner ou se taire, et quatre règles en décident : la densité du profil, l'activité mesurée à l'instant, l'articulation de la famille, et le refus de rejouer deux fois de suite la même hauteur. Un feuillage réglé sur 96 en fait donc entendre une trentaine.
C'est délibéré, et c'est ce que garde le mode Observation : les silences y disent que la plante n'a rien fait pendant ce temps-là. Le mode Dynamique desserre ces quatre règles, et rien d'autre : le tempo affiché redevient à peu près le nombre de notes entendues, comme sur les boîtiers où l'on branche deux pinces au feuillage. La plante y choisit toujours chaque hauteur ; elle n'y choisit plus les silences.
| Famille | Vitesse | Observation | Dynamique |
|---|---|---|---|
| Feuillage | 96 | 32 notes/min | 87 notes/min |
| Cactus | 190 | 80 | 206 |
| Arbre d'intérieur | 36 | 19 | 37 |
| Aromatique | 176 | 113 | 192 |
Mesures faites sur une minute de jeu, avec le même signal des deux côtés. Le cactus dépasse son propre tempo parce que son articulation piquée double une note sur six, et l'aromatique pour la même raison. Comme le diapason, le mode est un réglage d'écoute, retenu d'une visite à l'autre.
8Les onze timbres
Tous les sons sont des échantillons enregistrés, pas des oscillateurs. Ils sont fabriqués par synthèse physique : modes propres d'un corps résonant pour les percussions, synthèse additive pour les nappes.
| Timbre | Caractère |
|---|---|
| Handpan | Le timbre par défaut. Un idiophone d'acier accordé : ses partiels tombent exactement sur l'octave et la douzième, ce qui le distingue d'une cloche et lui permet de se superposer sans battre. Attaque du doigt, 20 ms. |
| Organique | Une attaque de handpan et une nappe New Age très discrète derrière, déclenchées par la même note, dans un rapport de 65 pour 35. L'attaque garde l'impact cristallin, la nappe fournit la traîne : les notes se fondent l'une dans l'autre. |
| Steel drum | Même famille que le handpan, mais frappé à la baguette. Plus brillant, s'éteint deux fois plus vite, réverbération longue. |
| Nappe New Age | La plus douce du jeu General MIDI. Faite pour se placer derrière autre chose. |
| Piano | Sobre, la plus large tessiture. |
| Marimba | Lamelle de bois, extinction rapide. |
| Cloches | Spectre de cloche complet, non accordé : hum, prime, tierce, quinte. |
| Bols | Bol chantant tibétain, avec son battement caractéristique. |
| Nappe | Tenue, chaude, respirante. |
| Verre | Cristallin, inharmonique, aigu. |
| Profond | Le registre le plus grave, saturé très doucement. |
9L'activité lente
Une petite plante d'intérieur ne remue pas : elle dérive vers la lumière, une feuille se détend, la turgescence change. Tout cela se joue sur des minutes, bien en dessous de ce que mesure la voie rapide. Une seconde voie de mesure va la chercher.
Deux minutes d'écoute
Le temps que la mesure s'établisse. La case « activité lente » affiche le décompte, puis la valeur.
45 s de calme
Le mode ne s'enclenche qu'après trois quarts de minute sans mouvement franc. Une plante d'extérieur n'y entre jamais.
Sortie immédiate
Au premier mouvement franc, la voie rapide reprend la main sur-le-champ, sans délai.
En mode calme, les notes se posent toutes les cinq à quinze secondes, à la hauteur que la plante a réellement atteinte. Ce n'est pas un ralentissement décoratif : c'est le rythme de ce qu'elle fait.
10L'environnement
L'application relève huit valeurs météo autour de vous, après l'ouverture de la caméra. Deux seulement agissent sur le son. Les six autres sont là pour être lues, et elles portent une couleur différente pour qu'on ne s'y trompe pas.
| Valeur | Agit ? | Sur quoi |
|---|---|---|
| Pression atmosphérique | Oui | Réverbération, ouverture du filtre, souffle d'air |
| Indice UV | Oui | Les mêmes trois, en sens inverse |
| Temps, température, humidité, vent, nuages, précipitations | Non | Affichage seulement |
La position est arrondie au kilomètre avant d'être envoyée au service météorologique, et vous pouvez saisir un lieu à la main plutôt que d'autoriser la géolocalisation.
11Ce qu'elle dirait
Une plante reconnue, la musique en marche, et un bouton rose apparaît sur l'image, en bas à gauche : Ce qu'elle dirait. Appuyez, et une photo part vers un modèle de vision qui la lit. Une dizaine de secondes plus tard, la plante prend la parole.
Elle ne parle pas vraiment, et l'application ne le prétend pas. La première personne est un procédé d'écriture : ce qui est lu, ce sont des signes visibles sur un végétal, croisés avec ce que l'application mesure déjà autour de lui.
Un feuillage pâle a deux explications contraires : il manque de lumière, ou il en reçoit trop. Un feuillage retombant aussi : soif, ou racines noyées. Aucune photo ne tranche cela seule. L'indice UV, lui, si : des plages décolorées avec un indice à 8, c'est un coup de soleil ; les mêmes avec un indice à 1 et des tiges qui s'allongent, c'est l'inverse. La température, l'humidité de l'air, l'agitation mesurée du feuillage et la famille reconnue partent avec l'image.
Les dix besoins
Chaque phrase porte un besoin et un sens. Le besoin décide de l'icône, le sens de la couleur : bleu pour « plus », orange pour « moins », vert pour « rien à changer ». Deux besoins opposés ne doivent jamais se ressembler.
| Besoin | Plus | Moins |
|---|---|---|
| Eau | J'ai soif | Trop d'eau, je noie |
| Lumière | Je manque de lumière | Trop de soleil direct |
| Humidité de l'air | L'air est trop sec | L'air est trop confiné |
| Température | J'ai froid | J'ai trop chaud |
| Emplacement | J'aimerais changer de place | · |
| Terre et pot | Je suis à l'étroit | Terre trop tassée |
| Nutriments | J'ai faim | Trop d'engrais, mes pointes brûlent |
| Taille | Enlevez mes feuilles mortes | · |
| À surveiller | Regardez-moi de plus près | · |
| Rien à changer | · | Je suis bien ici |
Trois phrases au maximum, la plus sûre en premier. Zéro s'il n'y a rien à dire de sûr.
Comment se lit une phrase
Ce qu'elle dit
La demande, en une ligne. C'est elle qu'on lit de loin, le téléphone posé à côté de la plante.
Le signe
Entre guillemets, ce qui justifie la phrase : « mes feuilles du bas jaunissent alors que mes jeunes pousses sont vertes ». Levez les yeux et vérifiez.
Le geste
Précédé d'une flèche, la seule ligne qui vous est adressée : l'action à faire aujourd'hui, en une phrase.
À droite de la phrase, la plante dit sa confiance en toutes lettres : j'en suis sûre, je crois, peut-être. En dessous de ce seuil, elle se tait plutôt que d'avancer un verdict fragile.
Quand elle ne dit rien
C'est une réponse, et souvent la bonne. Si votre terre n'est pas dans le champ, la plante ne se prononce pas sur l'arrosage. Si le cadrage est trop flou, trop sombre ou trop lointain pour distinguer les feuilles, elle ne rend aucune phrase et demande à être reprise de plus près. Un outil qui répond toujours quelque chose est un outil dont aucune réponse ne vaut.
Une photo, réduite, part à l'instant où vous appuyez et n'est conservée nulle part. Aucune adresse, aucune position, aucun identifiant ne l'accompagne : le modèle reçoit une image de plante et des nombres. Tout le reste de Plantsound (la mesure, la reconnaissance, la musique) continue de fonctionner entièrement sur votre appareil, y compris sans réseau. Hors connexion, le bouton dit pourquoi il ne répond pas.
Fonction expérimentale. Elle se trompera parfois : c'est pour cela que chaque phrase affiche le signe qui la fonde. Vous gardez le dernier mot.
12Enregistrer
Le bouton Enregistrement, sous les réglages de musique, produit deux fichiers à la fois. Ils ne contiennent pas la même chose, et c'est délibéré.
L'audio
Ce que vous avez entendu, capté juste après le limiteur : exactement le son final. Format WebM/Opus ou MP4 selon le navigateur.
Le MIDI
La partition, notée à la source. Réouvrable dans n'importe quel logiciel de musique, avec le diapason inscrit en pitch bend. Tenues sur le canal 2, ponctuelles sur le canal 1.
13MIDI, OSC et mode contrôleur
La carte Réglages MIDI, sous les réglages de la caméra, fait sortir la plante de l'application. Deux usages, qui se combinent : doubler la musique de Plantsound vers un instrument externe, ou envoyer le signal lui-même, avant toute gamme, tout instrument et tout profil botanique, pour qu'un synthétiseur ou un logiciel en fasse sa propre musique. Chaque section de la carte est repliée : on n'ouvre que celle dont on a besoin.
Brancher un instrument
- Cochez Activer la sortie MIDI, puis choisissez l'appareil. Plantsound voit tout ce que le système voit : un instrument en USB, en Bluetooth (appairé au préalable dans les réglages du système), ou les ports virtuels d'un logiciel de musique.
- Le bouton Tout couper (panique) éteint toutes les notes sur les seize canaux et remet le pitch bend au centre. Chaque note part de toute façon avec son extinction déjà programmée : aucune ne peut rester bloquée si vous fermez la page.
- Mode contrôleur : le son de l'application se tait, la plante continue d'être écoutée, reconnue et mise en notes. Votre synthétiseur devient la seule voix.
Les notes
Par défaut, les notes ponctuelles partent sur le canal de base et les notes tenues sur le suivant. Chaque voix peut recevoir son propre canal, ou ne pas être transmise :
| Réglage | Ce qu'il fait |
|---|---|
| Mélodie, ornements, nappes, bourdon | Un canal par voix : la mélodie sur un module, le bourdon sur un autre. |
| Voie lente | Les notes nées du mouvement lent, quand la plante bouge sur la minute, partent sur leur propre canal. |
| Transposition, note la plus basse et la plus haute | Ramènent les notes dans la tessiture de votre instrument, par octaves entières. |
| Vélocité | Celle de la plante (elle suit l'intensité du mouvement) ou une valeur fixe. |
| Changements de programme | Désactivables, pour que Plantsound ne change pas le son choisi sur votre synthétiseur. |
| Diapason en pitch bend | Transmet la fréquence de référence (432 Hz, par exemple) ; réglez la même étendue de bend sur l'instrument. |
| Rotation des canaux | Donne un canal à chaque note le temps qu'elle sonne, pour que le pitch bend d'une note microtonale ne désaccorde pas sa voisine. |
Les signaux continus
Une route lit une source, la met en forme et l'envoie sur un canal. Le préréglage Synthèse modulaire en installe onze d'un coup : le mouvement vers la hauteur en pitch bend (pour un module MIDI vers CV), la cohérence vers le filtre, la position de la feuille active vers le panoramique, la météo vers la réverbération.
| Élément | Choix |
|---|---|
| Sources | Luminance brute de la feuille suivie (aucun filtre), formes d'onde rapide et lente, intensité et cohérence du mouvement, déformation, position de la feuille active, surface de feuillage et nombre de feuilles, confiance de la reconnaissance, famille botanique, présence de la plante, pression, UV, température, humidité, vent. |
| Destinations | CC 7 bits, CC 14 bits (16 384 pas), pitch bend, aftertouch de canal, ou note : la source quantifiée sur une plage et une gamme, sans passer par la musique de la plante. |
| Mise en forme | Plage de sortie, courbe (linéaire, exponentielle, logarithmique, en S), lissage de 20 ms à 5 s, inversion. |
| Cadence | De 15 à 100 envois par seconde. Une valeur n'est renvoyée que lorsqu'elle change. |
L'horloge
Émise, l'horloge MIDI suit les pas de la plante, 24 tops par noire, avec Start et Stop : un séquenceur ou un module d'horloge se cale sur elle. Reçue d'une entrée MIDI, elle impose son tempo à la musique et la recale en phase à chaque pas ; une seconde sans horloge, et la plante reprend son propre tempo. Le réglage Un pas de la plante vaut choisit la correspondance : une noire, une croche ou une double croche.
Gammes et accords personnels
Une gamme s'écrit en demi-tons (0 2 3 7 9), en centièmes (0 204 386 702 884) ou en rapports (9/8 5/4 3/2), comme dans un fichier Scala. Elle rejoint la liste des gammes et peut être microtonale : le son interne joue les écarts, la sortie MIDI les transmet en pitch bend. La même section règle l'étendue de la mélodie, son octave de départ et un diapason libre entre 400 et 480 Hz.
OSC et WebSocket
Toutes les sources partent aussi en continu par WebSocket, en OSC binaire ou en JSON : normalisées sous /plantsound/<source>, brutes sous /plantsound/brut/<source>, avec /plantsound/note pour chaque note et /plantsound/famille. TouchDesigner, Max ou Open Stage Control les lisent directement. Pour l'OSC classique en UDP (Pure Data, SuperCollider, VCV Rack…), le pont OSC téléchargeable depuis la carte se lance sur l'ordinateur qui reçoit, avec Node.js.
Mode artiste et latence
Le dernier repli affiche chaque source normalisée et brute, en direct, ainsi que la latence réelle. À retenir : le signal brut a une image de retard (33 ms à 30 images par seconde) ; la forme d'onde rapide ajoute environ 0,4 s, le temps que le filtre voie un mouvement de plante ; les notes suivent la grille des pas et sont horodatées pour sortir exactement avec le son.
14Hors connexion
Plantsound calcule tout sur votre appareil. Le réseau ne sert qu'à livrer le modèle et à vérifier votre accès. En rangeant ces fichiers une fois, l'application s'ouvre ensuite sans connexion.
Installez l'application
Depuis le menu de votre navigateur : Installer ou Ajouter à l'écran d'accueil.
Rangez les fichiers
Dans les réglages, repli Utiliser sans connexion. Environ 67 Mo à télécharger une fois, de préférence en Wi-Fi.
Sept jours d'autonomie
Passé ce délai, une reconnexion est nécessaire, et elle rouvre sept jours.
15Essai et accès
Cinq minutes offertes
Sans compte, sans carte. C'est assez pour voir la courbe réagir à votre souffle et entendre la première musique.
94 € une fois
Achat unique, pas d'abonnement. Pour toutes vos plantes, sur tous vos appareils, mises à jour comprises.
Retrouver son accès
Sur un nouvel appareil, touchez J'ai déjà un accès et indiquez l'adresse e-mail de l'achat. Un mot de passe vous a été envoyé à ce moment-là ; le bouton Mot de passe oublié en renvoie un.
16Si ça ne marche pas
| Ce que vous voyez | Ce qu'il faut faire |
|---|---|
| Inerte, alors que la plante est vivante | Attendez deux minutes : la voie lente s'établit et la case affiche son décompte. Sinon, rapprochez le cadre et vérifiez que le téléphone est bien posé. |
| Trop peu de contours dans l'image | Éclairez mieux ou rapprochez-vous. Sans bords nets, aucun mouvement n'est mesurable. |
| Pas une plante | Cadrez le feuillage de plus près. Le modèle refuse aussi, volontairement, le plastique, la soie, le papier, une photo et un écran. |
| Aucune image ne parvient de la caméra | Une autre application l'utilise déjà, ou l'autorisation a été refusée. Fermez les autres onglets, puis rechargez. |
| Le module n'a pas démarré | La carte de diagnostic nomme le fichier en cause. Le bouton ouvre verif.php, qui poursuit le contrôle côté serveur. |
| Son indisponible | Le message s'affiche sous les réglages de musique. Rechargez la page ; sur iPhone, vérifiez que le mode silencieux est désactivé. |
| Paquet incomplet | Retirez le paquet hors connexion et refaites l'installation, en Wi-Fi. |
La carte de diagnostic, en bas de l'application, affiche la version des fichiers chargés. Si elle diffère de celle indiquée par verif.php, votre navigateur sert une ancienne page : rechargez en vidant le cache.
17Vos données
- Votre adresse e-mail est conservée, pour retrouver votre accès.
- Votre position, si vous l'autorisez, est arrondie au kilomètre avant d'aller chercher la météo. Vous pouvez aussi saisir un lieu à la main.
- Vos réglages (diapason, langue, mode hors connexion) restent dans le stockage local de votre navigateur.
Le détail complet figure dans les mentions relatives aux données.