Connexion
Pour récupérer votre compte, veuillez saisir votre adresse email. Vous allez recevoir un email contenant une adresse pour récupérer votre compte.
Inscription
En vous inscrivant, vous acceptez les conditions d'utilisation du site et de nous vendre votre âme pour un euro symbolique. Amusez vous, mais pliez vous à la charte.
 
ACTU

Sony et l'histoire de l'AR

CBL par CBL,  email  @CBL_Factor
 
Un peu comme tout le monde, Sony fait de la réalité augmentée sans trop savoir quoi en faire. En 2011, ils avaient annoncé leur SDK SmartAR qui leur permettait de faire de suivre des images en temps réel. Les images en question peuvent être tout et n'importe quoi (ou presque) et il n'y a pas besoin qu'elle contienne un cadre noir et/ou un code spécifique. C'est ce qu'on appelle du markerless tracking par opposition au marker tracking. Des boites comme Metaio, Total Immersion ou Qualcomm ont développé des technologies similaires.

Le principe est toujours le même : les images qu'on veut reconnaitre sont pré-enregistrés dans le système sous forme de points d'intérêt. Les points d'intérêt sont les différences de contraste très marquées dans une image. Par exemple un gros titre en gras sur fond clair aura tout plein de points d'intérêt autour des lettres. Après le système va analyser en temps réel les points d'intérêt présents dans le flux vidéo de la caméra. S'il trouve que le schéma d'un ensemble de points dans la vidéo correspond à celui d'un ensemble de points d'une des images enregistrées, il va savoir que l'image est présente dans la vidéo et commencer à la suivre. En fonction de la taille de l'image dans la vidéo, il va pouvoir connaitre sa distance par rapport à la caméra. Grâce à des systèmes de déformation/projection, il va pouvoir connaitre son orientation.

Tout cela se fait avec une caméra classique. Plus la définition de la caméra est bonne et plus on peut suivre un objet petit/éloigné. Le tout repose sur des algorithmes de reconnaissance d'image ultra-poussés et qui demandent énormément de puissance de calcul. Mais ce sont des calculs qui se parallélisent très bien et qui peuvent tourner aussi bien plus sur le CPU que le GPU. La plus grosse bibliothèque graphique en matière d'analyse image s'appelle OpenCV. C'est la base de tous les SDK de réalité augmentée. L'année dernière, elle a été portée sur OpenCL permettant de la faire tourner aussi bien sur le CPU que le GPU.

Revenons à Sony. Le Playstation Y Lab a montré deux vidéos présentant leurs derniers travaux en matière de réalité augmentée. Dans les deux cas, cela tourne avec une PS4 et une PS camera. La première vidéo présente du markerless tracking assez classique. Le petit plus est la physique des particules. La deuxième vidéo est bien plus bluffante. En détectant l'éclairage réel, ils arrivent à le reproduire dans la partie virtuelle de la scène.

On peut se dire que développer un jeu utilisant la PS camera est assez limitant vu que c'est un accessoire mais c'est faux. La PS camera se vend très bien. Durant la GDC, Sony a expliqué qu'ils avaient sous-estimé la demande et qu'ils avaient vendu 900 000 caméras, soit 15% du parc de PS4. La raison est simple : en combinant Twitch et l'appli gratuite Playroom, les gens peuvent streamer en direct leur salon. De plus, la PS camera va être obligatoire pour le projet Morpheus (pour le suivi de la position de la tête).



 

Commentaires

Masquer les commentaires lus.
Phaxan
 
Est-ce qu'il y a une caméra qui filme ce qui se trouve devant soi avec le dev kit 2 d'Occulus, pour faire de la "super" réalité augmentée ?
CBL
 
Je ne crois pas.
Déjà pour mixer efficacement AR et VR, il faut deux caméras. Après il y a le problème de la latence.
Quand tu prends l'ensemble de la chaîne, c'est dur de faire moins de 100 ms de latence entre le moment où la webcam capture une image et le moment où l'affichage montre la version augmentée. J'avais testé un proto de chez Canon et c'était très bizarre.
_Kame_
 
Non y' a pas sur le DK2. Mais j'me demande si c'est pas "the" feature de la version commerciale qu'ils ne veulent pas montrer pr le moment. Je pense que ça pourrait énormément aider pour continuer à "voir" les choses du monde réelles. Ou alors leur caméra IR va pouvoir servir à ça, en foutant des marqueurs ou je ne sais quoi...
En tt cas, les protos ne manquent pas: http://www.youtube.com/watch?v=Bc_TCLoH2CA
choo.t
 
_Kame_ a écrit :
En tt cas, les protos ne manquent pas: http://www.youtube.com/watch?v=Bc_TCLoH2CA

C'est ultra-impressionnant.
Holodeck, Danger Room, me voila !
divide
 
La 2eme vidéo me laisse perplexe, je ne vois pas comment une caméra 2D sans connaissance préalable de la géométrie de la scène pourrait déduire quoi que ce soit de précis en matière d'éclairage. On voit d'ailleurs que c'est assez aléatoire au niveau du résultat.
Par contre oui, en combinant le PS4 Eye+PS Move+Morpheus qui track sur le même principe que le PS Move, Sony a un très gros coup à jouer avec un écosystème simple et viable.

...tout le contraire de ça, quoi:
_Kame_ a écrit :
http://www.youtube.com/watch?v=Bc_TCLoH2CA

Autant les caméras embarqués c'est super, et à mon avis ça pourrait bien servir à faire du tracking/depth mapping autonome, autant je trouve qu'elles sont vraiment sous-exploitées ici. Sans déconner, le setup du mec nécessite 12 caméras externes et une tonne de marqueurs sur la tête et les mains... Et il utilise même pas les caméras stéréo embarqués comme source de track ou de depth map. C'est complexe, mais c'est tout sauf intelligent :/
D-Kalcke
 
divide a écrit :
La 2eme vidéo me laisse perplexe, je ne vois pas comment une caméra 2D sans connaissance préalable de la géométrie de la scène pourrait déduire quoi que ce soit de précis en matière d'éclairage.
Justement, ce n'est pas une simple caméra 2D :
http://fr.playstation.com/ps4/features/techspecs/
Ze_PilOt
 
Et ca marche super : Ils arrivent à avoir systématiquement une direction d'éclairage opposée à ce qu'elle devrait être.
Vous devez être connecté pour pouvoir participer à la discussion.
Cliquez ici pour vous connecter ou vous inscrire.
Soutenez Factornews.com

Tribune

Nayve
(23h41) Nayve Dks > Si tu veux mater du requin et un minimum réalisé, en récent y'a "The Shallows". C'est pas fameux mais je n'ai de toute façon pas souvenir d'avoir vu un bon film de requins depuis des décennies...
thedan
(23h35) thedan Dks > mais mais comment tu peux tomber sur des trucs pareils !
Dks
(22h31) Dks Nayve > peut on encore parler de réalisation ?
Nayve
(22h14) Nayve Dks > J'ai vu des pornos mieux réalisés
Dks
(21h44) Dks bon en fait après quelques minutes je crois que je vais commencer par les yeux. On devrait pendre l'équipe de tournage et les comédiens.
Dks
(21h42) Dks ok sharkenstein, je vais te regarder, ensuite je me ferais percer les yeux au pied de biche.
choo.t
(20h48) choo.t [i.imgur.com]
choo.t
(20h18) choo.t CBL > Tu bluffes Martoni.
CBL
(19h57) CBL 100% CGI
thedan
(19h49) thedan Je sais si c'est des prises de vue réelle avec des SFX ou juste de la 3d mais c'est très impressionnants le trailer solo de Titanfall2 d'un point de vue graphique : [youtube.com]
Crusing
(18h55) Crusing choo.t > Risbo > \o/ \o/ \o/
_Kame_
(18h54) _Kame_ (14h52) Cyclope > de la NX WiiU tu veux dire.
Lisa
(18h10) Lisa (16h35) Si ... pour la prochaine AG
MrPapillon
(17h44) MrPapillon Nidhogg 2 : [youtube.com]
choo.t
(17h01) choo.t Pour fêter ça, un clip avec une superbe morale : "friends don't dismember friends" [youtu.be]
Risbo
(16h57) Risbo (16h55) \o/
choo.t
(16h55) choo.t Turbo Kid 2 annoncé \o/
noir_desir
(16h35) noir_desir Lisa > finalement vivendi n'a pas demandé sa place? Bollosré a changé de fusil ?
noir_desir
(16h34) noir_desir Lisa > intéressant
Lisa
(16h14) Lisa [twitter.com]
Zakwil
(15h38) Zakwil l'icone "option d'ergonomie" de windows c'est un fauteuil roulant déguisé?
Niko
(15h16) Niko Cyclope > C'est pas une info, c'est une boutique qui essaye de se gaver de précommandes en se faisant de la pub au passage
noir_desir
(14h54) noir_desir (13h48) Crusing > fort ils ont même repris le brexit
Cyclope
(14h52) Cyclope Des news de la NX : [vg247.com]
Crusing
(14h46) Crusing Je le soupçonne d’être en lien étroit avec Jeff winston et "les seins d'homme"
Sawyer
(14h42) Sawyer Crusing > Le plus drôle c'est quand il annonce des chiffres genre : "Oui, cela signifie que si vous gagnez 2600 DEUROS Hum"avec un vieux gémissement derrière, mdr il est énorme
zouz
(14h19) zouz Crusing > Ils sont trop fort. J'imagine le taf pour imaginer ce genre d'histoire.
Crusing
(13h50) Crusing Une faute de lecture par phrase à peu près.
Crusing
(13h49) Crusing le pro de la lecture de chiffre à décimale, ou pas.
Crusing
(13h48) Crusing Oh un nouveau "magicien de gagner de l'argent sans rien faire", je l'avais jamais vu, fabuleux [50.7.89.82]
Doc_Nimbus
(12h29) Doc_Nimbus Crusing > (11h23) Chouette, merci !
MrPapillon
(12h16) MrPapillon Et qu'ils annoncent une machine à sous Assassin's Creed.
zouz
(12h11) zouz Crusing > (11h23) Hahaha le flic du début !
Palido
(12h05) Palido thedan > Ca serait marrant que Vivendi officialise le rachat d'Ubisoft aujourd'hui, et en profite pour annuler BGE 2 dès demain.
Crusing
(11h40) Crusing ah oui j'avais pas vu non plus...
Crusing
(11h39) Crusing Niko > d'ailleurs elles sont où les breves dans la home?
thedan
(11h38) thedan Niko > oups pardon désolé ... Pas réveiller tout ça...
Niko
(11h37) Niko On a déjà fait une brêve ce matin dessus
thedan
(11h35) thedan bon BGE 2 c'est quasi officiel : [jeuxvideo.com]
thedan
(11h28) thedan Etonnant : [lemonde.fr]
Crusing
(11h23) Crusing Nouveau Usul : [youtube.com]
Fougère
(01h25) Fougère [kotaku.co.uk] C'est long mais ca brosse un portrait très précis et réaliste de la situation autour de SC
zouz
(00h23) zouz [facebook.com]
_Kame_
(00h06) _Kame_ Doc_Nimbus > merci, j'me sens aussi con qu'un chat avec un bout de ficelle
mercredi 28 septembre 2016
Le vertueux
(23h27) Le vertueux zouz > Je n'en ai pas vu, faut dire que c'est mega cher, hyper encombrant et pas très fun.
Doc_Nimbus
(22h18) Doc_Nimbus Un clicker vraiment sympa : [jhollands.co.uk]
Le vertueux
(21h33) Le vertueux J'ai fait mon premier tour dans la rue avec le monocycle, c'est quand même autre chose que l'entrainement dans le parking sous terrain. J'ai failli écraser des jeunes, heureusement qu'il y avait une rambarde, je n'ai pas su m’arrêter net proprement.
Dks
(21h22) Dks j'espère que c'est pas enfoui dans la tribunes depuis que c'est passé ..
Dks
(21h21) Dks vu sur twitter GK, un premier épisode docu sur la team derrière Furi : [youtube.com]
Le vertueux
(21h03) Le vertueux __MaX__ > hihihihi non pas de figure, de toute façon c'est une oxelo tu ne peux rien faire avec, ça pèse une tonne.
Laurent
(21h02) Laurent 1er dev diary pour Wonder Boy. Je ne sais pas si le jeu sera bien mais le remake des musiques est magnifique [youtube.com]
DukeFreeman
(20h47) DukeFreeman Fougère > toute mes désoles
Fougère
(20h45) Fougère DukeFreeman > Tu me laisse même pas le temps de faire la news ;(
DukeFreeman
(20h36) DukeFreeman je suis joie...[gamekult.com]
MrPapillon
(20h17) MrPapillon "gna gna gna these updates will help in an online world", et hop l'icône d'Edge est revenue sur ma toolbar.
MrPapillon
(20h16) MrPapillon Super, mise à jour de Windows 10 qui reset tous mes params, et remets le fond d'écran par défaut.
Feed
(19h54) Feed Niko > Coucou :)
__MaX__
(19h29) __MaX__ Ca tue la trotinettes. Tu fais au moins quelques back flip avant d'arriver au boulol ?
zouz
(19h10) zouz Pas de Segway ?
MrPapillon
(19h02) MrPapillon Et beaucoup d'escalators aussi.
Le vertueux
(19h01) Le vertueux zouz > Ouais y en a pas mal quand même. Beaucoup de trotinettes pour adulte, quelques trotinettes électriques (bien rapide) et quelques roues électriques.
MrPapillon
(18h51) MrPapillon zouz > À Paris plein. De plus en plus. Un jour ça sera honteux de marcher à pieds, un peu comme le fait de monter un escalier alors qu'il y a un escalator de feignasse à côté.
zouz
(18h49) zouz Je ne me rends pas trop compte mais y'a beaucoup des gens qui se trimbalent avec ça en ville ?
zouz
(18h49) zouz Tu vas vraiment t'en servir à visage découvert ?
Le vertueux
(18h40) Le vertueux Crusing > Non ça tu peux le dire ça n'est pas honteux. Par exemple je n'ai pas dit que j'avais une trotinette, pour faire le trajet boulot. ça tu le caches.
Crusing
(17h56) Crusing (16h29) noir_desir > [youtube.com]
Crusing
(17h09) Crusing Le vertueux > C'est pas le genre d'info qu'on doit passer sous silence? comme n'avoir qu'une couille?
Le vertueux
(16h54) Le vertueux Je me suis acheté un monocycle électrique, jetez vous sur les côtés si vous me voyez !
noir_desir
(16h29) noir_desir Crusing > ^^' remarque il voulait supprimer les juges d'instruction lors de son précédent mandat...
Crusing
(15h57) Crusing noir_desir > j'aimerai bien que sarko nous sorte maintenant un "j'ai confiance en la justice de mon pays"
noir_desir
(14h13) noir_desir thedan > c'est bête surtout quand on pense , que les sarkolatres aiment la justice ^^'
thedan
(14h10) thedan noir_desir > tout à fait, je leur ai sorti l'article
MrPapillon
(14h10) MrPapillon Poker VR : [youtube.com]
noir_desir
(14h07) noir_desir thedan > C'est surtout qu'il y a eu une jurisprudence, qui ne te mets pas l'abri quand ton mail est de ton boulot...
thedan
(14h05) thedan d'ailleurs ils se sont pris un retour de manivelles... Pas de mails perso, pas de mails politiques au bureau Non mais
thedan
(14h04) thedan de toute façon, t'as des sarko idolâtres. Tu peux leur mettre le nez dedans, ils te diront que ça sens la rose... J'ai vu passer certains mails persos au boulot d'adhérents aux Républicains qui sont sarko idolâtres, ça vaut son pesant de conneries
noir_desir
(13h18) noir_desir Crusing > on ne croirait pas comme ça
noir_desir
(13h18) noir_desir Crusing > les commentaires oui, mais les amis de sarko qui passe à la télé. C'est évident hollande est tellement fort, qu'il a infiltré la Norvège (soit dit en passant l'un des pays les moins corrompu du monde). Finalement il est trop fort hollande,
Crusing
(13h10) Crusing noir_desir > héhé, j'ai lu les comms sur le site europe1, c'est exactement ça "encore une pseudo affaire" "les mediaco-bobo-gaucho..."
noir_desir
(13h07) noir_desir Crusing > c'est fou, et le pire comme cela vient de la norvege, dans le cadre d'une affaire de corruption pétrolière, son camps ne peut s'agiter en disant que ça vient de hollande (ou des bobo-bien pensant)
Crusing
(12h30) Crusing Comme disait le directeur de campagne de sarkozy "house of cards, c'est un peu tendre" : [mediapart.fr]
Crusing
(12h17) Crusing (oups stun pdf)
Crusing
(12h16) Crusing choo.t > haha adblock me ferme la page direct :D
Crusing
(12h04) Crusing kmplt242 > J'iomagine qu'on peut avoir une dérogation pour le jazz, mais c'ets limite [bestbassgear.com]
kmplt242
(11h39) kmplt242 Ce qui choque le plus c'est qu'il n'y a pas" écouter de la musique", mais "écouter de la musique classique". Toujours cette hierarchisation dans les genres de musique.
Toutoune
(11h38) Toutoune Merci. J'ai ri.
kmplt242
(11h34) kmplt242 Toutoune > (11h30) Ben tu cultive des tomates.
Toutoune
(11h30) Toutoune Mais en quoi faire du jardinage c'est de la culture ?!
choo.t
(11h20) choo.t thedan > "Question :Pour chacune des activités suivantes,dites-moi si, pour vous personnellement, elle fait partie de la culture ?"
thedan
(11h12) thedan choo.t > aprés ça dépends comment sont posés les questions... Mais ça m'étonne assez peu quand on y réfléchit
choo.t
(10h59) choo.t [culturecommunication.gouv.fr]
choo.t
(10h58) choo.t thedan > c'est flippant leur sondage, c'est des rétrogrades de qualité qu'ils ont chopé. La BD moins culturelle que la mode. Collectionner des timbres, plus culturel que le graffiti, le jardinage, plus culturel que le rap.
thedan
(10h52) thedan le jeu vidéo et la culture : [lemonde.fr] !!!
zouz
(10h21) zouz Avant on envoyait des chiens ou des singes dans l'espace pour voir si ça passait, maintenant on envoie des milliardaires. En fait elle pas si pourrie notre époque.
MrPapillon
(08h59) MrPapillon Oui, et il y a beaucoup plus de choses intéressantes à faire là-bas.
_Kame_
(08h34) _Kame_ Y'a juste une petite différence. C'est sur Terre.
MrPapillon
(07h00) MrPapillon L'Antarctique est hostile et pourtant on fait de plus en plus d'activités là-bas, et le tourisme augmente (malgré les interdictions/restrictions).
_Kame_
(00h35) _Kame_ C'est cool pour le côté défi, mais on parle de planètes et satellites un tout petit peu hostile à l'humain. Je serai plus content quand on annoncera qu'on a inventé un nouveau mode de propulsion.
MrPapillon
(00h26) MrPapillon Et ça fera une excuse de plus à Yotleotl de dire qu'ils sont financés par des fonds publics américains.
MrPapillon
(00h26) MrPapillon C'est aussi bon pour les scientifiques, surtout que ça coûtera pas cher relativement.