Histoire de faire un test, je suis parti samedi avec mes trois équipements de mesure :
- Montre cardio GPS Garmin Forerunner 405 avec réglages d’usine
- iPhone avec l’appli RunKeeper Pro et donc un suivi GPS
- iPod avec kit Nike+ mesure seulement la distance avec l’accéléromètre
Dans cette première partie du test je vais seulement me concentrer sur les distances mesurées et sur les parcours enregistrés via le GPS.
Distances
Disons le tout net, aucun des trois outils n’a mesuré la même distance
- Garmin : 4,92 km.
- RunKeeper Pro : 4,47 km
- Nike+ : 5,24km
La différence entre les trois outils est quand même très importante avec tout de même 800 mètres d’écart entre RunKeeper et Nike+. J’ai quand même été surpris par la relative précision du kit Nike+ en comparaison du Garmin qui doit être comme l’outil le plus précis.
La calibration de mon kit Nike+ n’est pas celle par défaut, mais une calibration de 800 mètres réalisée sur piste l’an dernier avec quelques variations d’allures pour tenir compte des différentes vitesses. Elle s’avère finalement plutôt bonne même si les 300m d’écart restent importants.
Pour RunKeeper, je précise que tout était coupé à part le GPS bien sûr et que la réception des satellites était bonne selon l’application. Il faut dire que je courrais autour d’un lac assez dégagé bien qu’il y ait des arbres.
Parcours
J’ai utilisé TrailRunner pour superposer les deux parcours enregistrés :
Si on regarde les parcours, on constate que si par moment les traces enregistrées sont semblables, elles diverges fortement par endroit, notamment dans les virages nets. La trace bleue du Garmin est quasiment parfaite, les virages même à angles droits sont bien respectés. La trace rouge de RunKeeper est plus fantaisiste. Quelques points son placés dans l’eau, certains virages sont plus que coupés.
Quelques détails du parcours
Ici RunKeerper manque les virages et me fait passer dans l’eau :
RunKeeper a manqué un virage mais la longue courbe le long de l’eau est ensuite similaire :

Deux fois RunKeeper pense que je suis dans l’eau et là encore le virage est manqué :

Notez quand même la régularité des deux enregistrements. RunKeeper (en rouge) pense que je passe les deux fois d’un côté de ce petit bâtiment que j’ai entouré. Dans la réalité c’est bien le Garmin qui a raison car je suis bien passé, les deux fois, de l’autre côté :

Cette carte montre bien l’un des soucis de RunKeeper. Il me place une fois dans l’eau et a systématiquement manqué ce virage en épingle. Là où le Garmin a bien vu la courbe, RunKeeper enregistre un point correct avant et un point correct après :

Je pense que l’on peut expliquer ces différences par deux aspects : la précision du GPS fourni dans l’iPhone et la fréquence d’enregistrement des points par RunKeeper Pro. Il n’y a pas d’option dans RunKeeper pour faire varier ce réglage mais il semble quand même relativement long, au moins une bonne vingtaine de secondes. Si on pouvait le faire varier à une fréquence d’enregistrement plus élevée, il aurait plus de chance de voir les virages.
Logiquement la Garmin est plus précise avec un enregistrement de la position toutes les 4 secondes.
Bilan
Logiquement le Garmin 405 est le précis, et heureusement car c’est son boulot et le prix est bien supérieur aux deux autres outils. Sur la mesure de la distance, le Nike+ ne s’en sort pas si mal que ça et en tout cas mieux que RunKeeper Pro. Ce dernier m’a semblé un peu faible sur le résultat final avec un parcours erroné et donc une distance fausse. Sa marge d’erreur par rapport au Garmin est même supérieure à celle de mon Nike+ !
Ma suite du test consistera à comparer les courbes de vitesses fournies par ces trois outils.



{ 1 rétrolien }
{ 23 commentaires… lisez-les en-dessous ouajouter un }
Etrange que RK te donne d’aussi « mauvais » résultats…
Pour l’écart entre 2 prises de points, je crois que ce soucis a été remonté à l’équipe de dev de RK mais autant en remettre un coup sur leur forum et/ou directement par mail ou via Twitter.
Vivement la suite du test !
génial ! super ce test
merci bcp !
ps : c’est le plan d’eau de cournon, non ?
Oui c’est le plan d’eau de Cournon. Tu le connais pour en avoir fait quelques tours…
Je me suis permis de faire un petit post sur le sujet des temps entre chaque prise en compte GPS sur RK :
http://bit.ly/20Yc1
Je l’ai bien sûr redirigé vers ton article car avec les graphiques, ça sera compréhensible et clair, même pour des anglophones
Le fait de rapprocher les prises de positionnement ne risque pas de diminuer encore un peu plus l’autonomie de l’iPhone ?
En mettant l’Ipod pendant 1h20 + RK (GPS, pas de wifi, pas de 3G, position lock), je perds quasiment rien du tout en terme de batterie. Alors je veux bien perdre un peu plus mais avoir plus de positions GPS et un parcours bien « propre » au final
Oui c’est un risque mais si cela permet de gagner en précision. Ce problème d’autonomie ne gênera pas pour de l’entraînement et les footings de beaucoup d’entre nous. Pour le marathonien c’est différent…
Ca intéressera peut-être certains mais j’ai fait mon test à moi aujourd’hui mais pas sur de la course mais sur un parcours à vélo. J’ai donc utilisé mon compteur vélo qui est censé être bien précis et RunKeeper (http://bit.ly/16OaOv ) . Sur une distance de 23kms environ, l’écart est de 500 mètres. Donc vraiment pas grand chose…
Comme je l’ai dit à Bertrand hier sur Twitter, je crois que le souci de RK est d’avoir des espaces de prise de position trop éloignées et du coup, quand on court en « cercle », les données sont erronées…
En tout cas, en ce qui me concerne, le test à vélo a été plutôt concluant. La prochaine fois je vais le tester en VTT ( Là, c’était sur route ) et je pourrai comparer la distance, mais aussi le dénivelé et les calories avec ma Polar s720i …
Ton test est très intéressant car effectivement ta marge d’erreur est vraiment faible. Ce qui est intéressant aussi, c’est que ta courbe d’altitude semble bonne alors que la mienne n’est pas bonne du tout.
C’est clair que c’est vraiment l’intervalle important entre les prise des positions GPS qui pose problème quand on a des virages raides et nombreux. On le voit d’ailleurs sur mon parcours, il y a une zone, sur la droite de l’image, ou la courbe étant longue et douce, RunKeeper se cale bien sur le Garmin.
En tout cas j’attends avec impatience la réponse des développeurs du logiciel.
Ola,
Les altitudes données par les GPS c’ est vraiment pas terrible. C’ est les logiciels que l’ on utilise qui vont appliquer des corrections pour rendre ces données utilisables.
Sympa l’ article.
Bye
un bon truc de geek ça
Ne pas oublier que le gps, c’est très précis, mais à plus ou moins 6 mètres (dans le meilleur des cas…) et que les photos google sont toujours un peu écrasées…
Sinon, je ne connais pas le 405 mais sur mon 305 je peux choisir l
oups….
je peux donc choisir la fréquence d’acquisition : toutes les secondes ou un mode « intelligent » qui espace les points suivant la vitesse et les changements de direction.
Sur un tracé, le mode 1seconde lisse bcp mieux les virages par exemple.
Je suis un peu surpris (et déçu) car depuis trois ou quatre sorties RK (Pro) indique vraiment n’importe quoi comme parcours, je ne sais pas comment tu as fait pour avoir un parcours si net (même s’il est moins bon qu’avec la montre).
Pourtant j’éteins/rallume l’iPhone, j’éteins bien le WiFi, je me localise avec Maps puis je lance RK, l’iPhone étant logé dans la poche arrière de mon short, au centre au niveau de la ceinture.
Et pourtant, sur un parcours de 4km, il me donne un résultat d’1.6km avec seulement quatre points pris sur le parcours (et encore même pas forcément à des endroits où je suis effectivement passé) alors que j’ai dû tourner environ 30 fois.
Je n’ai pas les moyens d’investir dans la montre, mais RKPro ne me sert plus que de chronomètre, vraiment inutile!
Ca peut venir du GPS de l’iPhone plutôt que de RK… Si tu as la version Pro, fais une sortie avec l’iPhone dans la main et suis le parcours directement pour vérifier… Parce que si tu n’as que 4 points je pense que le problème vient du GPS et non de l’application…
Deux petites questions :
As tu essayer de comparer avec un tracé fait à la main sur une carte précise comme les cartes IGN 1/25 000 ? J’ai fais l’essai en récupérant un morceau de carte sur http://www.geoportail.fr, le calibrant correctement dans trailrunner.
Sur le parcours « à la main » la distance est de 4,1 km.
Sur mon iphone avec Trails, ça donne 3,6 km sachant que c’est en partie dans les bois et que la précision est médiocre. Comme toi, je n’ai pas traversé de lac ! je m’en souviens bien !
Les parcours longs, en vélo, me paraissent plus précis mais je n’ai pas affiner ce point là.
Non je n’ai jamais essayé. Seulement des comparaisons avec Google Map mais pas plus. Par contre la précision du Garmin me semble pratiquement irréprochable sur ce test.
2éme question : tu utilises quoi comme brassard ou ceinture pour transporter tous ce bazar sans que cela te gène pour courir ?
J’ai un brassard pour l’iPod et le Garmin 405 est une montre donc ça c’est facile. Le seul truc chiant c’est l’iPhone que je garde à la main. Mais je cours finalement assez rarement avec. Finalement ce qui m’embête le plus dans l’équipement c’est le fil du cable des écouteurs
Premiere utilisation de RK aujourd’hui.Très plaisant d’avoir un tracé de son parcours avec la vitesse moyenne, les denivellés.Comme vous tous j’ai un tracé qui me fait courir dans l’eau par moment.Si j’ai bien comprit en lisant le lien au dessus, le probleme d’intervalle de prise de position du GPS ne vient pas de Run Keeper mais plutôt de l’iphone.Savez vous maintenant si il est possible de modifier ce temps entre deux intervalles sur le téléphone?
Ps:c’est déja formidable d’avoir ce type d’application gratuite avec cette précision.
bjr, je ne trouve pas trailrunner sur appstore, ça existe toujours ?
trailrunner n’est pas une « app » iphone, mais une application Mac OS : http://www.trailrunnerx.com
sur l’iphone tu as par exemple « trail » ou « racebunny »
Bonjour,
Merci pour votre test.
Ayant depuis peu installé RK sur mon Iphone je viens egalement de faire des tests comparatifs avec ma montre garmin 405 : je constate pour ma part que l’Iphone capte le signal GPS immediatement alors que le garmin met parfois plusieurs minutes à le trouver et (au moins en début de parcours) ma montre garmin est souvent moins précise que RK..
Le test est a cette adresse : http://www.flickr.com/photos/collinox/4441168766/
PS : je n’ai utilisé que la version gratuite de RK.
bonjour,
après quelques semaines d’utilisation conjointe (montre Garmin et Runkeeper) je dois dire que je retrouve la situation que vous illustrez dans votre test, à savoir que la montre Garmin s’avère plus precise notamment dans les virages. Par contre la montre est sensiblement plus lente que l’iPhone pour capter les satellites en début de course.