{"id":374,"date":"2017-02-04T19:35:21","date_gmt":"2017-02-04T18:35:21","guid":{"rendered":"http:\/\/elcep.legtux.org\/?p=374"},"modified":"2017-02-08T06:55:01","modified_gmt":"2017-02-08T05:55:01","slug":"earthdata-des-donnees-sig-pour-lenvironnement","status":"publish","type":"post","link":"http:\/\/elcep.legtux.org\/?p=374","title":{"rendered":"Earthdata des donn\u00e9es SIG pour l&rsquo;environnement"},"content":{"rendered":"<p>Voil\u00e0 plusieurs mois que je n&rsquo;avais pas pris le temps de faire un post sur mon blog !<br \/>\nOn trouve toujours beaucoup d&rsquo;excuses, des papiers sur le feu, un d\u00e9m\u00e9nagement, un nouveau post-doctorat&#8230; Alors pour recommencer doucement, une petite note sur un service de la NASA que j&rsquo;ai d\u00e9couvert aujourd&rsquo;hui : <a href=\"https:\/\/reverb.echo.nasa.gov\">Reverb | echo<\/a>[1]<\/p>\n<p><a href=\"https:\/\/earthdata.nasa.gov\/\"><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter size-large wp-image-376\" src=\"http:\/\/elcep.legtux.org\/wp-content\/uploads\/2017\/02\/earthdata-fb-image-1024x538.jpg\" alt=\"logo earthdata\" width=\"604\" height=\"317\" srcset=\"http:\/\/elcep.legtux.org\/wp-content\/uploads\/2017\/02\/earthdata-fb-image-1024x538.jpg 1024w, http:\/\/elcep.legtux.org\/wp-content\/uploads\/2017\/02\/earthdata-fb-image-300x158.jpg 300w, http:\/\/elcep.legtux.org\/wp-content\/uploads\/2017\/02\/earthdata-fb-image-768x403.jpg 768w, http:\/\/elcep.legtux.org\/wp-content\/uploads\/2017\/02\/earthdata-fb-image.jpg 1200w\" sizes=\"auto, (max-width: 604px) 100vw, 604px\" \/><\/a><br \/>\nUn peu de contexte \u00e0 cette d\u00e9couverte, mon nouveau post-doc m&rsquo;a amen\u00e9 \u00e0 sortir de ma zone de confort, on s&rsquo;\u00e9loigne de la viticulture et de l&rsquo;eau (encore que), pour travailler sur la zone sah\u00e9lienne du S\u00e9n\u00e9gal. Je cherchais des indicateurs de d\u00e9sertification&#8230; Et je suis tomb\u00e9 sur un blog g\u00e9nial de <a href=\"https:\/\/matinbrandt.wordpress.com\">Martin Brandt<\/a>[2] (chercheur au <em>Department of Geosciences and Natural Resource Management<\/em> \u00e0 l&rsquo;universit\u00e9 de Copenhagen (Denmark)). En plus de pointer sur des papiers scientifiques, il y a aussi quelques posts sur des outils de t\u00e9l\u00e9d\u00e9tection (GRASS-GIS) et des liens vers des pourvoyeurs de donn\u00e9es. C&rsquo;est l\u00e0 que j&rsquo;ai d\u00e9couvert LE truc.<\/p>\n<p>Reverb est un silo de donn\u00e9es environnementales propuls\u00e9es par la NASA qui contient des choses incroyables et un puissant moteur de recherche. Je vous engage donc \u00e0 regarder cette petite <a href=\"https:\/\/www.youtube.com\/watch?v=iBXzzUv3b4w\">vid\u00e9o d&rsquo;explication<\/a>[3] (en anglais).<\/p>\n<p>Je ne reviendrai pas sur la mani\u00e8re de trouver ses donn\u00e9es, la vid\u00e9o est l\u00e0, par contre une chose g\u00e9niale qui pourrait inspirer d&rsquo;autres sites : une fois que j&rsquo;ai fait mon petit march\u00e9, le service me propose de t\u00e9l\u00e9charger un fichier TXT contenant les URLs des ressources demand\u00e9es. L&rsquo;id\u00e9e est g\u00e9nial. Il y a quelques semaines, j&rsquo;avais du faire une centaine de copier-coller depuis le site opendata.gouv.fr pour pouvoir automatiser un traitement sur le <a href=\"https:\/\/www.data.gouv.fr\/fr\/datasets\/registre-parcellaire-graphique-2012-contours-des-ilots-culturaux-et-leur-groupe-de-cultures-majorita\/\">RGP de 2012<\/a>[4] (j&rsquo;en parlerai peut-\u00eatre dans quelques mois quand l&rsquo;article sera publi\u00e9).<\/p>\n<p>Donc une grande satisfaction, je disais, pour cette bonne pratique&#8230; je voulais donc me lancer dans un script bash et du wget&#8230; mais les ennuis arrivent &#8230;<\/p>\n<pre>\r\nwget http:\/\/e4ftl01.cr.usgs.gov\/\/MODV6_Cmp_B\/MOLT\/MOD09Q1.006\/2016.09.05\/MOD09Q1.A2016249.h16v07.006.2016258071050.hdf\r\n\r\nConnexion \u00e0 urs.earthdata.nasa.gov (urs.earthdata.nasa.gov)|198.118.243.33|:443\u2026 connect\u00e9.\r\nrequ\u00eate HTTP transmise, en attente de la r\u00e9ponse\u2026 401 Unauthorized\r\n\u00c9chec d\u2019authentification par identifiant et mot de passe.\r\nURL transformed to HTTPS due to an HSTS policy<\/pre>\n<p>Mince un login ! Nooon ! Pourtant Martin Brandt ne semble pas avoir ce probl\u00e8me. La solution est en deux \u00e9tapes. Dans un premier temps, il faudra se cr\u00e9er un compte \u00ab\u00a0earthdata\u00a0\u00bb en cliquant sur login en haut \u00e0 gauche. Ensuite, et la solution est <a href=\"https:\/\/wiki.earthdata.nasa.gov\/display\/EL\/How+To+Access+Data+With+cURL+And+Wget\">sur le wiki<\/a> [5], il faudra faire un petit fichier de config \u00ab\u00a0curl\u00a0\u00bb.<\/p>\n<pre>cd ~\r\ntouch .netrc\r\necho \"machine urs.earthdata.nasa.gov login <log>; password <password>\" > .netrc\r\nchmod 0600 .netrc<\/pre>\n<p>Vous l&rsquo;aurez compris, il ne reste qu&rsquo;\u00e0 remplacer <log> par votre login et <password> par votre mot de passe. Et cette fois-ci les requ\u00eates passeront !<\/p>\n<pre>wget http:\/\/e4ftl01.cr.usgs.gov\/\/MODV6_Cmp_B\/MOLT\/MOD09Q1.006\/2016.09.05\/MOD09Q1.A2016249.h16v07.006.2016258071050.hdf\r\n\r\nSauvegarde en : \u00ab MOD09Q1.A2016249.h16v07.006.2016258071050.hdf \u00bb\r\nMOD09Q1.A2016249.h1 100%[===================&gt;]\u00a0 64,76M\u00a0\u00a0 344KB\/s\u00a0\u00a0\u00a0 in 1m 51s<\/pre>\n<p>Merci pour les donn\u00e9es, et merci pour cette facilit\u00e9 d&rsquo;utilisation !!!<\/p>\n<h2><img loading=\"lazy\" decoding=\"async\" class=\"size-full wp-image-375 aligncenter\" src=\"http:\/\/elcep.legtux.org\/wp-content\/uploads\/2017\/02\/map_dakar_s.png\" alt=\"Donn\u00e9es MODIS issu de earthdata\" width=\"256\" height=\"259\" \/><br \/>\nLes liens<\/h2>\n<p>[1]<a href=\"https:\/\/reverb.echo.nasa.gov\">https:\/\/reverb.echo.nasa.gov<\/a><br \/>\n[2]<a href=\"https:\/\/matinbrandt.wordpress.com\">https:\/\/matinbrandt.wordpress.com<\/a><br \/>\n[3]<a href=\"https:\/\/www.youtube.com\/watch?v=iBXzzUv3b4w\">https:\/\/www.youtube.com\/watch?v=iBXzzUv3b4w<\/a><br \/>\n[4]<a href=\"https:\/\/www.data.gouv.fr\/fr\/datasets\/registre-parcellaire-graphique-2012-contours-des-ilots-culturaux-et-leur-groupe-de-cultures-majorita\/\">https:\/\/www.data.gouv.fr\/fr\/datasets\/registre-parcellaire-graphique-2012-contours-des-ilots-culturaux-et-leur-groupe-de-cultures-majorita\/<\/a><br \/>\n[5]<a href=\"https:\/\/wiki.earthdata.nasa.gov\/display\/EL\/How+To+Access+Data+With+cURL+And+Wget\">https:\/\/wiki.earthdata.nasa.gov\/display\/EL\/How+To+Access+Data+With+cURL+And+Wget<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Voil\u00e0 plusieurs mois que je n&rsquo;avais pas pris le temps de faire un post sur mon blog ! On trouve toujours beaucoup d&rsquo;excuses, des papiers sur le feu, un d\u00e9m\u00e9nagement, un nouveau post-doctorat&#8230; Alors pour recommencer doucement, une petite note sur un service de la NASA que j&rsquo;ai d\u00e9couvert aujourd&rsquo;hui : Reverb | echo[1] Un &hellip; <a href=\"http:\/\/elcep.legtux.org\/?p=374\" class=\"more-link\">Continuer la lecture de <span class=\"screen-reader-text\">Earthdata des donn\u00e9es SIG pour l&rsquo;environnement<\/span> <span class=\"meta-nav\">&rarr;<\/span><\/a><\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[30,2],"tags":[64,65,16,63],"class_list":["post-374","post","type-post","status-publish","format-standard","hentry","category-geekeries","category-geomatique","tag-earthdata","tag-modis","tag-qgis","tag-wget"],"_links":{"self":[{"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=\/wp\/v2\/posts\/374","targetHints":{"allow":["GET"]}}],"collection":[{"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=374"}],"version-history":[{"count":6,"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=\/wp\/v2\/posts\/374\/revisions"}],"predecessor-version":[{"id":383,"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=\/wp\/v2\/posts\/374\/revisions\/383"}],"wp:attachment":[{"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=374"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=374"},{"taxonomy":"post_tag","embeddable":true,"href":"http:\/\/elcep.legtux.org\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=374"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}