Avec vos doigts accédez au sixième sens

Le Media Lab du MIT a encore frappé un grand coup avec le projet sixthsense.
sixthesense est un des nombreux projets (il y en plus d'une trentaine) développé dans le groupe des interfaces fluides qui n'est jamais qu'un des 30 groupes de recherche du Media Lab !
On parle beaucoup de sixthsense depuis sa présentation par Pattie Maes à la conférence TED.
sixthsense est un projet au carrefour de différents domaines de l'interaction homme-machine, il mêle réalité augmentée (augmented reality), informatique vestimentaire (wearable computing), internet des objets (internet of things), informatique pervasive (pervasive computing), interface organique (organic interface)...
sixthsense propose en fait une interaction gestuelle vestimentaire (wearable gesture interaction).

sixthsense vous permet d'accéder aux données disponibles sur la toile directement dans le monde des objets sans passer par votre ordinateur, votre PDA ou votre smartphone.

Plus d'écran, plus de clavier, plus de surface tactile, plus de souris ou de pavé tactile. Tout cela est remplacé (voir photo) par une webcam et un mini-projecteur portés sur la tête (accrochés à votre casquette) et par vos doigts que vous aurez équipés de petites bagues plastique de différentes couleurs.

Il ne vous reste plus qu'à orienter la tête pour montrer à la caméra l'objet que vous souhaitez : le T-shirt du type que vous croisez dans un couloir, un livre ou un paquet de lessive et à faire quelques gestes pour commander le système comme former un rectangle avec ses deux mains pour prendre une photo ou très classiquement les écarter pour agrandir une photo.
Avec sixthsense, c'est le monde réel, le monde des objets, et non plus seulement les quelques pouces de votre écran, qui suivra votre regard et répondra à vos gestes.
Pour comprendre sixthsense, le plus simple, c'est de regarder des vidéos.
Parmi les vidéos existantes, je vous conseille le baladobillet du site Moxie Mo Show abandamment commenté par Jeff McCord et la vidéo "officielle" du Media Lab accompagnée plus calmement au piano.

Intuitive and Natural User Interface, c'est INUI

Pour changer, voici une devinette. Qui a fait récemment la déclaration suivante ? (réponse la semaine prochaine).
Il me semble que c'est presque mot pour mot ce que les chercheurs et les experts en IHM expliquent depuis des années... sans toujours être compris.
Faut-il que ce même même discours soit prononcé par un "décideur" pour qu'il soit davantage entendu ?
Le discours en question est :
La deuxième grande question est "Comment allons-nous interagir avec les ordinateurs et les autres dispositifs de façon plus naturelle ?" Dans quelques années, l'ordinateur pourra nous entendre et nous voir.
Les interfaces naturelles deviendront la voie principale pour chaque dispositif.
La parole, les gestes et l'écriture deviendront la manière usuelle d'interagir avec les ordinateurs, les télés et les téléphones.
Nous utiliserons toujours le clavier et la souris qui sont adaptés à l'ordiateur, mais les interfaces évolueront pour devenir plus intuitive et plus naturelle.
Le discours original en anglais est :
The second major area is really how you will be able to interact with your computer and other devices in a more natural way.
In the next couple of years, the computer will be able to hear you and see you.
Natural user interfaces will become mainstream in every device.
Speech, gestures and hand writing will become a normal part of the way we interact with computers, with TVs and with phones.
We will still use a keyboard and a mouse that make sense with a computer but the UIs will evolve to be more intuitive and more natural.

Médiator, plectre, plectrum ou pick, là est la nouveauté du Nokia 5800

Le tout tactile a encore frappé avec la sortie du Nokia 5800.
Comme ses prédécesseurs, il embarque un accéléromètre et un écran tactile 16/9 (en fait un quart de HD minimale).
Il est livré avec un stylet et, plus original, un médiator ou plectre, un petit bout de plastique qui sert habituellement à pincer les cordes d'une guitare (voir photo).

Vous aurez donc le choix pour effleurer l'écran, la pointe du stylet, un bout du médiator ou vos gros doigts.
Je n'aime pas le stylet, mais je reconnais qu'il a l'avantage de se ranger facilement. Je n'aurais pas fini de me plaindre du médiator avec son fil à la patte (est-ce pour ça qu'on l'appelle aussi un plectre qui a pour racine plaindre ?).
Peut-être que le médiator est un accessoire qui vise à séduire les musicos. En fait, c'est une adaptation par Nokia du stylet Triforce (attention, ça ne fonctionne pas sur iPhone).
Avec deux accessoires, le stylet et le médiator, pour toucher l'écran, le Nokia 5800 n'est ni un clone de l'iPhone, ni un iPhone killer, c'est tout le contraire. L'iPhone ne compte que sur vos doigts alors que le Nokia 5800 fait tout pour que vous ne touchiez pas l'écran avec vos sales pattes.


Pour la saisie, le Nokia 5800 propose 4 claviers tactiles :
- un mini azerty en mode portrait
- un clavier numérique standard T12
- une zone de reconnaissance de caractères (reconnaissance dite de blocs de type Graffiti)
- un azerty complet en mode paysage, le seul manipulable avec le doigt.

J'aimerais bien connaître vos préférences. Quels claviers préférez-vous pour écrire un courriel, un sms ou une adresse électronique et quels accessoires (stylet ou médiator) choisissez-vous pour chaque type de clavier ?

Windows Seven ou la métaphore du chaos

Avec le multitouch, vous pouvez voir Microsoft en plus gros !
Au dernier CES de Las Vegas, début janvier, Steve Ballmer a présenté Windows 7 et confirmé que cet OS était multitouch.
C'est surtout sur les stands qu'on pouvait voir quelques démonstrations du multitouch utilisé le plus souvent avec Media Center (voir une vidéo instructive target="_blank").
Passons sur le coût de l'écran multipoint, regardons plutôt ce que font les démonstrateurs avec le multitouch. Pour l'essentiel, ils font tourner les fenêtres. Au 19e siècle, on faisait tourner les tables, au 21e, on fait tourner les fenêtres.
Au 20e siècle, on avait inventé la métaphore du bureau (desktop metaphor) pour organiser son espace de travail, avec des icônes bien rangées sur les bords et des fenêtres bien rectangulaires. Avec Windows 7, voici venir le temps du désordre, du capharnaüm, du fouillis, de la pagaille, de la licence (Microsoft bien sûr !). Bref, Windows 7 propose la métaphore du chaos.
Il avait fallu 7 jours pour créer le monde, il a fallut 7 versions de Windows pour créer le désordre et mettre les fenêtres à l'envers.
Peut-être que Seven est une version spécialement conçue pour post-adolescents, eux qui ont tant de mal à ranger leur chambre, plus exactement qui pour s'y sentir bien ont besoin d'un peu de boxon, pourront facilement tout désorganiser à l'écran.
Après le "savant désordre", arrive le "geek désordre", fenêtres de travers, images à l'envers et corbeille renversée.
Pourquoi ne pas organiser une compétition du bureau le plus en désordre, le desktop mess contest.

En fait, quel est le problème ? C'est que Microsoft a recyclé les techniques de Surface dans Windows et propose de faire la même chose que sur sa table basse sur son PC médiacentré. Le problème, c'est que Microsoft ne voit pas de différence entre l'horizontal et le vertical, entre coopérer autour d'une table et regarder tout seul son écran.
Le RNT (rotate n' translate) qui permet de déplacer et faire tourner une fenêtre avec un seul doigt est bien utile sur Surface pour passer un document à quelqu'un autour de la table, mais est-ce vraiment utile sur l'écran vertical de son PC ou de sa télé ?

Bref, j'ai bien l'impression qu'à la fois pour ré-exploiter ses brevets et pour singer l'iPhone, Microsoft a mis le multitouch dans Seven sans vraiment réfléchir à son utilité (ou plutôt à sa nuissance).
Je ne dis pas que le multitouch n'a pas d'intérêt dans les applications sur PC, simplement que ce n'est pas comme il est utilisé dans les démos du CES 2009 qu'il faut faire.

Une touche d'humour : le MacTini

Le dernier billet évoquait la saisie multitouch sur iPhone.
Appuyer sur plusieurs touches sur l'écran de l'iPhone n'est pas chose facile car même si l'écran fait 3,5'' (moins de 9 cm), les touches restent petites.
Pour rendre la saisie plus facile, il n'y a qu'à réduire le nombre de touches et agrandir leur taille.
L'idéal est de simplifier le clavier et ne garder plus qu'une seule touche, plus de problème alors pour l'atteindre et plus de risque de se tromper de touches.
C'est la solution retenue par le MacTini, plus petit que l'Apple mini et plus portable qu'un MacBook.
Si vous appréciez la saisie T9, le MacTini est fait pour vous comme le montre cette vidéo.
Si vous n'êtes pas convaincu, attendez encore un peu, vous achèterez bien un MacNano !

L'ABC de la saisie sur iPhone

Pas de commentaire pour répondre à la question posée dans le billet précédent.
Je vais donc donner la réponse à la question qui était Comment taper ABC sur le clavier standard de l'iPhone en appuyant une seule fois sur la touche MAJ ?
Par défaut, quand vous appuyez sur MAJ (Shift), après avoir tapé sur une lettre, le mode majuscule est désactivé.
Pour ne pas être forcé de repasser en mode majuscule pour saisir la lettre suivante en majuscule... il faut se souvenir que le clavier de l'iPhone est multitouch.
Il suffit donc de maintenir le contact sur la touche MAJ de la main gauche en même temps que vous tapez sur les lettres désirées avec un autre doigt.

Vivez une bonne année tactile... sans faute

La fin d'année n'est pas propice aux annonces et aux produits nouveaux.
Pas la quoi faire un billet ordinaire sûr ce bloc, c'est plus le temps de vous souhaiter une très bonne année 2009.
Année que je vous souhaite riche en nouvelles decouveryes, a lire de bons blocs, a tester des tables interactives en se prenant pour Yom Cruise, James Bond ou les Rxperts et a s' user les doigts sur son iPhone.
Mais plus encore, qu'en 2009, prenez du plaisir avec les autre, a vivre pmeement dans ma vraie vie. Je vous souhaite de lever très souvent les yeux de votre maptop, de votre neybook ou de voyte smartphone.

Si vous avez lu jusque la, vous devez penser que j'écris étrangement en 2009. Non, je n'ai pas oublie l'orthographe, j'ai juste rédige ce billet sur mon iPhone... Avec la correction automatiique qui est activée par defaut.
En faut, vu ma conception du clavier virtuel, avec ses peyites touches mode portait, on se trompe de touche une fois sûr trois, voire une fois sûr deux. Sans ma correction orthographique, me message réellement tape serait totalement incomprehensible. La correction orthographique corrige la plupart des fautes de frappe (plus de la moitié). Il est donc préférable de la garder activée, contrairemrnt a ce qu'on peut lire sur mes forums.
Le problème, c'est surtout pour mes mots courts comme le, la, les, sur qui ont tendance a se transfprmer en me, ma, mes, sûr. Quant aux accents, la correction étant purement lexical, ils ne tombent pas tout seuls, la correction ne proposera jamais un à a la place de a.
Il suffît de taper moins vite, plus exactement de faire un t'al long sur ma lettre pour se voir propsr tous les carcteres accentues associes a une lettre (cf. photo). C'est une solution élégante.
Et d'après vous, comment taper ABC en majuscule en appuyant une seule fois sir la touche MAJ ? Réponse la semaine prochaine puplu tôt si vous la donnez dans un commentaire.

Je termine pat un conseil, si vous voulez envoyer des courriels en faisant beaucoup moins d'erriers de frappe, il suffît d'utiliser l'application Big Keynoard Email qui utilise un clavier en fprmat paysage avec des grosses touches bien espacées (0,79€ sûr iTunes Store).

Bonne année tactile.

Envoyé depuis un iPhone (rédigé avec le clavier standard)
(pardon pour les fautes de frappe)