Archive pour la catégorie ‘Réalité Virtuelle’

Le réel augmenté d’un sixième sens numérique

Mercredi 25 février 2009

Pranav Mistry, assistant de recherche du Groupe des interfaces fluides du Massachusetts Institute of Technology (MIT) a encore fait sensation avec son nouveau projet présenté par sa directrice de labo Pattie Maes, lors de la conférence TED de PalmSprings en février.
Pour mémoire, Pranav Mistry était l’auteur des post-it nouvelle génération nommés « Quickies » qui ont trouvé un large écho sur le web l’an passé.

Le projet au nom de code « WUW » a été rebaptisé « Sixthsense » pour sa sortie du labo. Cette fois, l’utilisateur n’est pas dans son bureau, il est invité à bénéficier des données disponibles sur internet dans leur quotidien, et ce, sans périphérique spécifique.

6esenslogo1

Le concept est presque simple, il allie une caméra visualisant à peu près la même chose que son porteur, un (nano) vidéoprojecteur et quatre marqueurs de quatre couleurs pour pouce et index.

dispositif 6eme sens
La vraie innovation est de proposer une nouvelle alternative aux deux grandes façons de faire de la réalité augmentée :
• Porter des lunettes spécifiques qui sont en fait des écrans semi-transparents où sont affichées des formes ou informations. Cette (vielle) méthode ayant fâcheusement tendance à créer des maux de tête à force de demander aux yeux de faire la netteté à deux distance à la fois (le verre des lunettes très près des yeux et l’environnement plus éloigné).
• voir l’environnement réel à travers un écran qui diffuse la vidéo prise par la caméra, à laquelle s’ajoute les éléments virtuels. (Rappelez-vous du projet MARA de Nokia ou plus récemment du portage de l’API AR toolkit sur iPhone).
Cette fois, on ajoute des infos sur les objets de l’environnement eux-même ; bien sûr il faut des surfaces de projections adaptées (il vaut mieux avoir un ami avec un T-shirt blanc).
Les fonctions développées sont relativement classiques (celles que les adeptes de la réalité augmentée imaginent depuis longtemps) avec en plus des idées empruntées au monde des périphériques mobiles (avoir tous types d’informations partout tous le temps.)

Une petite vidéo vaut mieux qu’une grande description :

Plus d’informations : http://www.pranavmistry.com/projects/sixthsense/index.htm

Sisi vous le dis avec ses mains.

Mardi 6 novembre 2007

L’université d’East Anglia (royaume unis) et IBM ont communiqué en septembre dernier sur le projet qu’ils ont développé en commun. L’aboutissement de ce projet est une application qui traduit les paroles en langages des signes et qu a pour nom de code SiSi pour « Say It Sign It ».

 

sisi avatar

Avatar féminin ou masculin - en démonstration vidéo ici

L’application comporte plusieurs modules mis bout a bout pour produite l’effet souhaité : Un module de reconnaissance vocale que transforme la voix en texte, un module qui transforme le texte en signes et un module qui fait effectuer ces signes à un avatar 3D. Certaines personnes commentant ce communiqué soulignent, que le visage non expressif du personnage doit affecter la compréhension.

Cette idée de traducteur virtuel automatique répond au chercheur Mexicain Jose Hernandez-Rebollar de la George Washington University. Il avait crée en 2000 un dispositif, l’ acceleglove, qui permette de traduire à travers d’un synthétiseur vocal ce qu’une personne exprimait en langage des signes.

glove

Sources : http://www-03.ibm.com/press/us/en/pressrelease/22316.wss

Plus d’infos sur l’ acceleglove : http://www.seas.gwu.edu/~gogo/papers/hernandez_SIGGRAPH_2002.pdf

Let’s go Robots

Vendredi 30 juin 2006

Voilà un bien beau produit que nous prépare Lego : Le MindStorm. Le but est simple : fabriquer et programmer son propre robot. Petit flash back ; quand j’étais encore à quatre pattes sur la moquette de ma chambre à assembler des pièces en plastique LEGO proposait déjà des moteurs électriques et des panneaux de commande programmable. Mais cette fois il ne s’agit pas seulement d’agir, mais également de ressentir et analyser.

Robot-Lego.jpg

En plus des petites pièces de plastique de type « lego technic », MindStorm comporte un boîtier de commande muni d’un processeur 32-bit, des Servo-Moteurs et des capteurs de différents types :
• Capteur à ultra son : évalue une distance par rapport à un obstacle [Vue]
• Capteur de lumière : permet par exemple de repérer une couleur [Vue]
• Capteur de son : permet d’entendre les sons [ouïe]
• Capteur de contact : permet de détecter un le contact d’un objet [touché]

Le robot créé peut donc sentir son environnement et réagir en conséquence. La programmation se fait via le logiciel LEGO® MINDSTORMS® NXT Software développé par labView, disponible pour PC et Mac (la programmation se fait de façon graphique : les habitués de Pure Data, Virtools ou Eyesweb ne seront pas dépaysés). La connexion peut se faire par USB mais également par Bluetooth. Il est donc fortement envisageable de pouvoir envoyer des ordres à son robot via son téléphone Bluetooth.

Petite précision, cet article sortira dans un premier temps aux Etats Unis… patience petit européen.

Le MIDI a encore de belles heures devant lui

Mardi 2 mai 2006
Le MIDI a 20 ansLa norme MIDI (Musical Instrument Digital Interface), bien qu’aussi âgée que moi, a encore beaucoup d’avantages qui la rende incontournable dans le domaine de la musique électronique par exemple.

Pour les jeunes créateurs de dispositif interactif (voir immersif), les capteurs au formats midi apportent une grande souplesse d’utilisation (grande variété de capteurs, les composants peuvent être facilement montés sur ce que l’on veut sans contraintes) et des coûts réduits.

Pour les curieux ou ceux qui veulent d’équiper de capteurs, je vous invite à consulter ces deux sites :

logo La Kitchenwww.la-kitchen.fr : qui a développé le produit nommé « toaster » qui permet de brancher 16 capteurs et de récupérer leurs informations au format MIDI ou UDP (Open Sound Controler).
Capteurs disponibles : flexion, accélération, magnétique (orientation, inclinaison) pression, photoéléctrique, etc …
NB : le produit « Kroonde » permet la même chose que le toaster avec une connexion sans fil.

Logo Interface Zwww.interface-z.com : Même principe mais plus pour les électriciens ou bidouilleurs qui font communiquer des capteurs en tout genre avec une interface midi standard.

Vers une réalité portable [Réalité Augmentée]

Mardi 2 mai 2006

Sans doute le secteur le plus prometteur, car les nouveaux smartphone sont l’outil idéal pour la RA : Caméra et écran localisé + capacité de calcul + mobilité (poids) + accessibilité (prix).

RA sur PortableAvant de partir dans de grandes explication inutiles, je vous conseil de cliquer sur ce liens pour visioner une vidéo de démonstration (besoin de s’enregistrer depuis peu)

Ce projet à été réalisé par Daniel Wagner de la Vienna Technology University (Les étudiants du Master MNRV qui ont travaillé sur le projet construct 3D connaissent bien).

L’utilisation sur smartphone est une prolongation au portage des outils de RA sur PDA qui avait donné la naissance au projet “invisible train” dont vous trouverez les détails dans ce pdf.

Vers une réalité portable [Haptique]

Mardi 2 mai 2006

L’arrivée des vibreurs dans les téléphones a ouvert la porte vers la communication haptique. Motorola utilise d’ores et déjà un retour d’info par vibration lorsque l’on se promène dans les menus des séries ROKR par exemple.

Notons également les applications ludiques (« retour d’effort » par vibreur pour les jeux sur téléphones portables) comme ceux développé à partir de l’API proposé par Immersion.

Certaines recherches sur les variations de fréquences du vibreur pourait faire naitre rapidement des « smiley » haptique dans les téléphones grands public.

Vers une réalité portable [Intro]

Mardi 2 mai 2006

RVImaginons notre terre, notre époque et notre civilisation. Que manque t’il à ce monde pour se pencher sur la réalité virtuelle ? Comment le grand public peut y être sensibilité afin d’effacer de son esprit le fâcheux oxymore « réalité virtuelle » et les stéréotype de science fiction. Ma réponse est la suivante : glissons de la RV dans les poches de ces braves gens.

L’explosion du marché de la communication, des réseaux a habitué le grand public à la technologie de pointe et le temps réel. En France, la téléphonie mobile compte plus de 48 millions de clients (source ARCEP), C’est un objet personnel que l’on consulte, utilise partout et dans lequel on enregistre de plus en plus d’information de tout type. D’après moi, c’est l’évolution du téléphone portable qui apportera la réalité virtuelle au grand public.

Plus d’infos sur les marchés du mobile

Écran Tactile Multi-Touch

Dimanche 19 mars 2006

Qui aurait penser demander un jour à son écran : Combien j’ai de doigts ? et que celui ci lui réponde au doigt et à l’oeil.

MTIR
Tremblez de plaisir braves gents, voici le résultat du labo Multi-Touch Interaction Research , un écran tactile qui reconnais la pression simultanée des 10 doigts et sait reconnaître un index d’un majeur… Encore une fois je vous conseille la vidéo de démo, c’est bluffant.
MTIR

Reste à savoir quand on pourra utiliser ce genre de technologie et imaginer tout ce que l’on peut faire avec…

Tactapad ou l’ombre du Tactile :

Dimanche 19 mars 2006

TactapadTactapad est un produit plus que prometteur. Il permet d’utiliser ses dix doigts pour manipuler son interface graphique. Une caméra capte la position des mains et projette une ombre de celle-ci à l’écran, une simple pression sur la surface du Tactapad est assimilée à un clic.

Mieux encore cette surface est capable de nous renvoyer des informations tactiles (ceux qui ont trouvé des infos sur cette fonction peuvent nous en parler en commentaire).

L’éditeur propose un logiciel de dessin vectoriel qui peut être utilisé avec plusieurs doigts en même temps Je vous conseille de visiter le site afin de visionner les vidéos de démo.

DAO tactile

Reste la question du design de l’objet, à revoir selon moi ; le style trop rond et tapis vert n’est pas top…