lundi 20 juin 2016

FPV avec Litchi & FPV Camera

Le FPV (First Person View) vous permet de piloter le Phantom en réalité virtuelle (VR) à l'aide d'un casque et d'être ainsi en immersion complète. Vous devez avoir un autre opérateur avec vous quand vous utilisez cette fonction, il vous avertira des éventuels obstacles et assurera la sécurité du vol.

Vous volez ainsi en voyant ce que voit votre drone, un peu comme un oiseau, le gros avantage c'est que si vous devez aller vers la droite ou la gauche, il suffit d'utiliser le joystick droit vers la droite ou la gauche quel que soit la direction par rapport à vous que prend le Phantom. Voici comment utiliser la possibilité FPV, avec quel matériel et un comparatif entre 2 logiciels le gérant parfaitement : Litchi et FPV Camera. A la fin de cet article, une vidéo vous montre tous les détails de ce comparatif.

Branchements
Pour profiter de cette fonction, il va falloir bien sur des lunettes ou plutôt un casque pour la réalité virtuelle (casque VR) dont le prix n'a rien à voir avec de vraies lunettes FPV. Je me suis laissé aller pour le casque Viivria d'une part pour son look et la facilité d'introduction du téléphone dedans, et aussi parce qu'il est possible de l'utiliser en gardant ses lunettes de vue. Ce casque permet également un réglage de l'écartement des lentilles internes et de pouvoir les éloigner ou de les rapprocher et de l'adapter à votre écartement visuel. Vous avez ainsi une image parfaite simulée comme si vous regardiez un écran à 1 m de distance. La face avant de ce casque peut coulisser et laisser ainsi apparaitre la lentille de la caméra du téléphone, vous permettant de passer de la vue FPV Phantom à la vue réelle en face de vous.
Il va falloir insérer le téléphone dans le casque et le relier à la radio-commande, le visu se fera depuis le casque et les commandes pour diriger le Phantom resteront accessibles comme vous en avez l'habitude sur la RC (il faudra la mettre en mode 1 ou 2 pour les joysticks, le mode 2 étant le mode le plus utilisé)

FPV avec Litchi
La version 1.9.0 pour IOS apporte enfin la fonction FPV (First Person View), fonction disponible pour les téléphones Android depuis plusieurs mois déjà.


Sur le coté gauche de l'écran, si vous ne passez pas en mode FPV, vous avez 3 icônes qui permettent respectivement de haut en bas, d'entrer dans le mode Course Lock, Home Lock et lancer le décollage.
Pour entrer dans le mode FPV, il suffit de choisir dans le menu en haut à gauche en cliquant le logo Litchi, la fonction en question. Les informations de base sont alors affichées à l'écran et le masque en haut à droite vous permet de lancer effectivement la fonction.
Lorsqu'on est en mode FPV, le téléphone est bloqué dans un casque VR, il est donc nécessaire de faire quelques réglages au préalable.
L'icone roue dentée en haut à droite de l'écran permet d'accéder au menu des options, dans lequel il est souhaitable de donner des fonctions pour le mode VR aux boutons C1 et C2 du dos de la radio-commande. J'ai programmé 'Activer/Désactiver le mode immersion (VR)' sur C1, ce qui permet de passer au mode casque ou non, et 'Active la caméra du Mobile (VR)' sur C2 qui permet de passer de la vue Phantom à la vue caméra de l'iPhone.

Utilisation de la fonction
L'écran va alors se scinder en 2, avec une vue pour chaque œil. Il va falloir dès lors positionner l'iPhone dans le casque. L'immersion est alors stupéfiante, plus aucun reflet sur l'image que vous apercevez (mode HD 720) et les mouvements de la tête sont répercutés sur le Phantom et donc sa caméra. 
Les déplacements verticaux modifient l'angulation verticale de votre caméra (pitch) et si vous tournez la tête à droite ou à gauche, le Phantom tournera dans le même sens (yaw), vous êtes presque comme un oiseau !
Pour cette dernière possibilité, il faut modifier des options spécifiques au mode VR, et sous Litchi, il est nécessaire de mettre le Phantom en vol stationnaire, pour ressortir le téléphone et cliquer sur l'icone options du bas de l'écran, pas très pratique !

Options à modifier éventuellement, Phantom en vol.
Cet écran des réglages spécifiques au mode VR permettent d'afficher des informations à l'écran et de régler leur affichage horizontalement, d'activer les mouvements synchrones de la caméra avec les mouvements du casque dans le sens vertical ainsi que la vitesse de ce mouvement. Le Head tracking permet en mode Immersion de diriger la rotation du Phantom en fonction de la rotation horizontale du casque, de l'annuler ou d'utiliser les joysticks. Je me demande pourquoi la couleur bleue à été retenue, la lisibilité n'est pas au rendez-vous !
  
Une fois le mode VR enclenché, les informations affichées à l'écran sont ici minimalistes, vous aurez l'altitude, la distance, la vitesse, le nombre de satellites GPS et l'état de la batterie.

Visuel en mode VR sous Litchi
Les 2 images du mode VR se superposent parfaitement, vous avez alors une image HD 720 très claire de ce que voit le Phantom.

Le joystick de gauche vous permet toujours d'agir sur l'altitude et la rotation du drone (même si celle-ci est aussi gérée par les mouvements de rotations horizontaux du casque). Le joystick de droite vous  permettant comme à l'accoutumé de déplacer le Phantom en marche avant ou arrière et vers la droite ou la gauche.


FPV avec FPV Camera
Vous pouvez accéder à la fonction FPV avec ce programme en cliquant sur le logo lunettes dans le menu principal. L'utilisation de cette fonction est cependant payante mais un peu plus travaillée que la version proposée par Litchi.


Les réglages sont ici directement accessibles en visuel casque sans avoir à ressortir le téléphone du casque, ce qui est un gros plus. Un appui long sur C2 permet d'afficher une fenêtre d'options dans laquelle le défilement est possible en utilisant la molette droite de la RC, l'appui sur cette même molette permet de valider un choix. Un nouvel appui C2 permet le retour au menu précédent et à la fin efface la fenêtre. La fenêtre n'apparait que sur un seul œil, de même que la mini carte, mais le visuel reste très net. Il n'est pas nécessaire de programmer ces fonctions du bouton C2 dans les options générales, ceci se fait automatiquement.
Avec un Mavic C2 court alterne les vues caméra et téléphone, C2 long affiche les options directement sur l'écran positionné dans le casque. Toujours avec le Mavic, il n'est pas possible d'appuyer sur la molette, le défilement des options se fait en tournant la molette droite, la validation d'un choix se fait en appuyant verticalement sur le bouton 5D. Le retour à un menu précédent se fait d'un appui sur C2, si on est au menu principal, C2 efface la fenêtre d'options.

Fenêtre d'options gérée par le bouton C2
Le passage de la vue drone à la vue de la caméra du téléphone est ici aussi géré en faisant un appui court sur le bouton C2.

Utilisation de la fonction
L'écran va alors se scinder en 2 comme sous Litchi, mais avec plus de données affichées à l'écran et dont certaines sont paramétrables dans les options, une carte est même visible, le tout avec une netteté remarquable. Ce type de pilotage règle définitivement le problème des reflets sur l'écran fréquemment rencontrés lorsqu'on utilise la tablette ou l'iPhone fixé sur la RC.
Les commandes réagissent comme à l'accoutumé, l'angulation verticale de la caméra étant gérée par les mouvements du casque, ce logiciel ne propose pas la rotation du Phantom synchrone avec les mouvements du casque, uniquement l'angulation verticale qui peut être débrayée.

Visuel en mode VR sous FPV Camera
Le mode VR enclenché vous donne une vue, ici aussi en HD 720 très nette avec en superposition beaucoup plus de données à l'écran, vous avez même une carte miniature comme sur DJI Go.
Le déplacement du Phantom se fait sur la radio-commande, en gardant vos réflexes habituels sur les commandes, seule l'angulation verticale de la caméra peut être gérée directement par le casque.
 
Voici une vidéo qui vous montre l'installation de ce type de casque, les manœuvres pour effectuer les réglages et le rendu visuel en vol avec les 2 applications. Le rendu visuel casque a été zoomé dans cette vidéo et ne rend pas la qualité réelle vue dans le casque, qui est je dois dire assez bluffante.


Lorsque vous sélectionnez le mode déplacement caméra FPV au lieu de garder l'horizon fixé, vous vous prenez vraiment pour un oiseau, mais ça peut aussi donner des nausées ! 
Plus besoin également de savoir si le drone s'éloigne de vous ou se rapproche et de gérer les commandes inversées pour les mouvements, le visuel étant direct, si vous voulez tourner à droite, mettez le joystick vers la droite, point barre !
En VR lors du vol, vous voyez très nettement les obstacles tels que les arbres ou les fils électriques et pouvez ainsi les éviter beaucoup plus efficacement.
Ce type de vol est vraiment à tester, il faut cependant posséder quelques heures de vol en mode je dirais normal pour avoir les bons réflexes au bon moment. Les 2 logiciels présentés ici ont eu un comportement très sain dans le test de cette fonction, et ils permettent très rapidement le changement de vue caméra Phantom - caméra téléphone, ce qui peut vous rassurer au début. Pour ce genre d'utilisation, je vous conseille fortement d'utiliser un harnais sur votre RC qui sera de fait à l'abri d'une chute. Je vous rappelle que le vol en FPV nécessite une autre personne à vos cotés pour la surveillance et prévenir les dangers.
Bon VR vols en immersion !

37 commentaires:

  1. Bonsoir après avoir parcouru ce thème cela me paraît un peu compliqué.

    RépondreSupprimer
    Réponses
    1. Dans l'article il est fait mention de tous les réglages et précautions nécessaires avant ce type de vol. Il faut se lancer mais en étant avec un autre pilote pour les avertissements. Une fois qu'on y a gouté, ben c'est super !

      Supprimer
  2. Bjr. Bravo pour la clarté et la précision de cet article et de la vidéo Youtube du 20 juin. Je possède depuis peu un Phantom 3 Advanced et tablette Android Galaxy Tab S2. Il semblerait que le casque VR que vous avez présenté ne soit plus disponible.
    Y a-t-il un modèle de remplacement?
    J'ai trouvé
    https://www.amazon.com/Preup-Virtual-Cardboard-Smartphones-Cellphones/dp/B01J50FOLK/ref=sr_1_9?ie=UTF8&qid=1482011842&sr=8-9&keywords=VR+Headset

    Preup VR BOX 3D VR Virtual Reality 3D Video Glasses Helmet Headset Adjust Cardboard For 4.7 to 6 Inch Smartphones iPhone 6 plus 6 5s 5 Samsung Galaxy IOS Android Cellphones
    by Preup 13.87 USD

    S'agit il du même modèle ou ce modèle conviendrait il? Il n'est pas indiqué s'il dispose du tiroir permettant une vue extérieure par la caméra du smartphone.
    Ce tiroir me semble très intéressant. Je suppose qu'il faut lancer au préalable l'appli photo/video sur le smartphone pour pouvoir alterner la vision drone avec la vision smartphone.
    Merci d'avance de votre réponse.
    Micha

    RépondreSupprimer
    Réponses
    1. Bonjour Micha
      Oui c'est le même casque, et il possède le tiroir coulissant. Pour passer de la vue camera drone / camera telephone, il est possible de programmer une action sur les boutons C1 et C2. Un appui court sur C2 par exemple bascule entre les 2 types de vue (ceci sous FPV Camera)

      Supprimer
    2. In n'y a pas besoin de lancer l'appli photos, la bascule est gérée par le programme qui passe automatiquement en mode vue téléphone sans rien faire d'autre. On le voit sur la vidéo.

      Supprimer
    3. Le switch caméra est aussi possible en programmant la commande sur le bouton C2 sous Litchi

      Supprimer
  3. Bjr et merci. Je vais acheter les lunettes VRBox qui semblent être de la marque Viiria et sont soldées en ce moment, peut-être signe d'un changement prochain de modèle.
    Comme mon smartphone est Android, j'achèterai aussi Litchi. J'espère que FPV Camera passera aussi prochainement sous Android.

    Si j'ai bien compris, seul FPV Camera affiche une carte en bas de l'écran casque, et, dans Litchi, pour voir la carte, il faut alterner la vue immersion (avec ses infos minimalistes) et la vue Litchi habituelle (avec toutes les infos et la carte), cela grâce au bouton C1.
    Il me parait important de pouvoir consulter de temps en temps, avec le casque, la carte ainsi que le infos complémentaires.

    L'idéal serait d'être à 2 personnes voyant simultanément le même affichage, l'une avec une tablette et la visualisation du drone à l’œil nu et l'autre avec le casque en immersion.
    Est ce qu'un bricolage (double usb, connecteur usb/hdmi?) est possible pour arriver à cela, comme on le fait par exemple pour un ordinateur qui affiche la même chose sur 2 écrans (par vga ou hdmi)?
    Le module hdmi DJI le permet peut-être mais son prix est beaucoup trop élevé.

    RépondreSupprimer
    Réponses
    1. Il n'est pas possible d'alterner entre la vue FPV et la vue carte avec aucun programme, on peut alterner entre les vues FPV et téléphone.

      Supprimer
  4. J'ai regardé sur le net plusieurs vidéos et infos concernant 3D FPV qui semble être une appli intéressante pour la vision avec casque et la possibilité de partager l'écran du casque avec un autre smartphone ou tablette.
    Quel est votre avis sur cette appli qui semble avoir été améliorée dernièrement?
    Dans un échange de courriels avec Visual Vertigo, ils m'ont annoncé la sortie d'une nouvelle version pour cette semaine.

    Micha35
    Phantom 3 Advanced
    Tablette Samsung TabS2 et smartphone Android (Wiko Peax2)

    RépondreSupprimer
  5. Ce commentaire a été supprimé par l'auteur.

    RépondreSupprimer
    Réponses
    1. Je n'ai pas testé cette appli en raison des commentaires négatifs, à voir donc.

      Supprimer
  6. bonjour,
    sur le dji phantom 3 advanced, faut-il obligatoirement le module hdmi sur la RC pour avoir un retour en 720p. Avec le connecteur standard et mon smartphone le retour n'est pas de très bonne qualité ( présence de pixellisation assez désagréable à l'oeil ) du coup je suis un peu déçu du mode FPV de Litchi.

    RépondreSupprimer
    Réponses
    1. Non, il ne faut pas de module HDMI, c'est complètement indépendant.
      Le retour vidéo est fonction du téléphone utilisé, j'ai un iPhone 6 et le retour est nickel (720p)
      Après si présence de pixels, il faut bien vérifier le branchement sur la prise du téléphone et sur la RC et que les prises sont bien enfoncées.

      Supprimer
    2. Merci pour ta réponse aussi rapide baroudeur.

      Supprimer
  7. bonjour je voudrait savoir si les lunettes noon vr fonctionne avec le Phantom 4 merci a l avance

    RépondreSupprimer
    Réponses
    1. A priori oui. Mais le casque est assez cher. Un casque comme vu dans l'article suffit largement. Après si on veut utiliser le programme Noon, oui cela peut s'entendre.

      Supprimer
  8. J'ai un phantom 3 standard je voulais savoir si cela fonctionne aussi car le retour video ne se fait que en wifi ?

    RépondreSupprimer
    Réponses
    1. Litchi affiche comme liste de compatibilité :

      Compatible with Mavic Pro, Phantom 4 (Normal/Pro),
      Phantom 3 Standard/4K/Advanced/Professional,
      Inspire 1 X3/Z3/Pro/RAW and Matrice 100/600.

      Donc pas de problème avec le P3S (mais je n'ai pas testé), mais à priori il ne doit y avoir aucun problème seule la distance sera limitée.

      Supprimer
  9. Bonjour, est-ce qu'un smartphone dépourvu de gyroscope sera t' il compatible avec la fonction fpv sous litchi ? Merci

    RépondreSupprimer
    Réponses
    1. Non Pascal, pour que les mouvements de tête soient reconnus et dirigent la caméra, un gyroscope est obligatoire. La plus-part des smartphones modernes en sont pourvus, ainsi que d'un GPS.

      Supprimer
    2. Ok. Mon Samsung A3 a seulement les fonctions accéléromètre et magnétomètre donc apparemment pas compatible avec les mouvements de tête de haut en bas

      Supprimer
  10. Bonjour
    J'ai un Mavic Pro, depuis un mois environ et ai eu dès le début, un problème de lisibilité de l'écran de mon iPhone 6. J'ai décidé de m'équiper d'un ipad mini2, qui avec un écran de 8", devait résoudre le problème de visibilité avec un soleil normal. J'ai été amené à imaginer un pare soleil. Tout cela n'améliore pas vraiment les choses ! Aussi, je me demande si un masque de VR ne résoudrait pas le problème ?
    Je suis débutant et n'ai pas envie d'y mettre une fortune et voudrais un investissement minimum. Ce qui me plait dans votre présentation c'est que l'iphone 6 devrait suffire et que la RC du Mavic est directement reliée au téléphone.
    Plusieurs question : les logiciels mentionnés sont-ils compatibles avec le Mavic pro ?
    Quelle est la référence du masque, car plusieurs recherches sur internet n'ont rien donné ?
    La FPV étant recommandée avec un accompagnateur, comment celui-ci peut-il recevoir ce que la caméra du Mavic voit ? Comment connecter une tablette (ipad mini 2) ?
    D'avance merci

    RépondreSupprimer
    Réponses
    1. Bonjour
      En tant que débutant, il n'est pas vraiment conseillé de démarrer par du FPV, il vaut mieux être habitué aux commandes et acquérir de bons réflexes par vol à vue.
      Perso avec un Mavic et un iPhone 6, je trouve que j'ai un très bon retour, j'installe parfois (quand il y a du soleil !!!) un petit pare soleil qui se clipse sur le téléphone et tout est impec.
      Le casque dont il est fait mention dans l'article est un casque VR, on les trouve à moins de 20 €, l’intérêt de celui ci, c'est qu'il permet de switcher entre la vue caméra téléphone et caméra drone, ça peut aider au début.
      Oui il vaut mieux un aide lors de ces vols, surtout pour avertir si on approche d'obstacles car le champ visuel est rétréci et aussi pour éviter de tomber lors de virages gérés par les mouvements de tête. L'aide n'a aucun retour vidéo !
      Mais pour de problème de retour vidéo, je pense qu'une solution intéressante va pointer le bout de son nez bientôt (béta test).

      Supprimer
  11. Bonjour Baroudeur,

    Je suis impatient de la sortie des Goggles DJi pour équiper mon Mavic mais à la lecture de votre article je me pose des questions si l'investissement onéreux de lunettes FPV est justifié, j'ai par exemple utilisé pendant plusieurs mois le casque HeadPlay skyzone SJ-V01 associé à la RC de mon Ph3. J'en ai été pleinement satisfait mais cela pour un budget de 300€ ! Le casque que vous testez pour une somme beaucoup plus modique associé à un iPhone semble vous donner satisfaction mais avez vous eu l'occasion de tester un casque dédié FPV afin d'apporter une comparaison au niveau champ de vision (FOV), impression d'immersion ?
    Merci pour vos précieux conseils,
    Christian

    RépondreSupprimer
    Réponses
    1. Les DJI Googles se font attendre, la solution proposée ici est une solution à bas prix pour découvrir le FPV, mais avec des résultats non comparables à une vraie solution lunettes.
      Des tests vont arriver pour comparer les possibilités, en particulier avec les lunettes Epson Moverio BT-300 et peut être les DJI Googles quand elles sortiront.

      Supprimer
  12. OK j'attendrai donc ton test des Moverio BT300 une idée de la date de publication ?

    RépondreSupprimer
    Réponses
    1. Il faut que les fonds le permettent :)
      Peut être fin février, début mars

      Supprimer
  13. Je sais être patient surtout lorsque je pressens qu'un produit peu être prometteur !
    Pour info mais tu l'as déjà probablement remarqué, Il faut choisir la BT-300-FPV, elle contient DJiGo prechargé :

    https://epson.com/faq/SPT_V11H756020F~faq-00005E9-bt300_bt300fpv

    Je me demande juste comment vont se passer les MAJ régulières de DJi s'il s'agit déjà d'emblée d'une version adaptée par EPSON pour son produit !
    Bonne soirée

    RépondreSupprimer
    Réponses
    1. Il va y avoir une version dispo vers le 15 Février avec DJI Go pré-installé et je pense le support pour le boitier Android.
      Les MAJ se ferons par le store Epson spécifique pour Maverio.

      Supprimer
  14. Une fois en fpv, il n'y pas moyen de faire de prises d images ?? Ou si oui est ce facile ?
    Merci

    RépondreSupprimer
    Réponses
    1. Lors du décollage, le mode vidéo est activé par défaut. Il est possible bien sur de le modifier et de passer en mode photo. Les boutons photo et vidéo sont opérationnels comme pour un vol avec DJI Go.

      Supprimer
    2. Merci pour la réponse, mais j'ai du mal a comprendre commenet physiquement on prend une photo alors que le téléphone se trouve dans la lunette ;)?
      merci

      Supprimer
    3. Le téléphone affiche l'image que prend la caméra du drone, il est relié à la RC par un cable plus long mais c'est comme si on était sous DJI Go.

      Supprimer
  15. Merci encore pour la réponse, mais je viens de comprendre le soucis, j ai un p3 standard donc pas la bonne rc :( mon espoir de fpv s envole a nouveau :(

    RépondreSupprimer
  16. Bonjour Baroudeur, Est-ce que tu projettes encore dans les semaines à venir le test des lunettes BT-300 d'Epson ? Je reconnais que c'est un gros budget de plus ce qui me retient aussi c'est la restriction de compatibilité à DJiGo 4 et Ultimate Flight V3, j'aurais souhaité continuer d'utiliser Litchi car son mode Ground Station et vraiment performant par rapport à DJiGo mais malheureusement il n'y a pas d'accord de license entre Epson et AC Electonics en vue !
    Reste Ultimate Flight que je n'ai pas testé et qui à l'air complet à la lecture de la doc, l'as-tu utilisé en particulier son mode GS ?
    Christian

    RépondreSupprimer
    Réponses
    1. Bonjour Christian
      J'ai les mêmes interrogations que toi, et c'est vrai, c'est un budget. J'aurais aimé pouvoir les tester pour me faire une idée. Mais dès que je peux mettre la main sur une paire, je fais un décorticage en règle des possibilités avec les avantages et les problèmes rencontrés.
      Les possibilités logicielles sont aussi un problème.

      Supprimer
  17. Bonjour,
    je souhaites acheter un mavic Pro avec des lunettes VR, mais celle de Dji n'ont pas l'air totalement au point, savez vous si l'on peur utiliser une autre marque et laquelle selon vous est au top qualité ?

    merci beaucoup!!

    RépondreSupprimer