Changeset 28054 in osm for applications/editors/josm/plugins/opendata/modules/fr.datagouvfr

Timestamp:

2012-03-12T22:03:36+01:00 (13 years ago)

Author:

donvip

Message:

opendata: various download improvements

Location:

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr

Files:

• DataGouvFrModule.java (modified) (2 diffs)
• datasets/DataGouvDataSetHandler.java (modified) (1 diff)
• datasets/culture/BibliothequesHandler.java (modified) (1 diff)
• datasets/diplomatie/EtabAEFEHandler.java (modified) (1 diff)
• datasets/ecologie/ForetsPubliquesHandler.java (modified) (5 diffs)
• datasets/ecologie/ReservesBiologiquesHandler.java (added)
• datasets/education/Etab1er2ndDegreHandler.java (modified) (1 diff)
• datasets/education/EtabSupHandler.java (modified) (1 diff)
• datasets/hydrologie/EauxDeSurfaceHandler.java (added)
• datasets/transport/PassageNiveauHandler.java (modified) (1 diff)

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/DataGouvFrModule.java

@@ -24 +24 @@
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.ecologie.AssainissementHandler;
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.ecologie.ForetsPubliquesHandler;
+import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.ecologie.ReservesBiologiquesHandler;
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.education.Etab1er2ndDegreHandler;
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.education.EtabSupHandler;
+import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.hydrologie.EauxDeSurfaceHandler;
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.hydrologie.ROEHandler;
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.transport.PassageNiveauHandler;
@@ -43 +45 @@
         handlers.add(new ROEHandler());
         handlers.add(new ForetsPubliquesHandler());
+        handlers.add(new ReservesBiologiquesHandler());
+        handlers.add(new EauxDeSurfaceHandler());
     }
 }

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/DataGouvDataSetHandler.java

@@ -81 +81 @@
         }
         
-        protected final void setDataGouvFrUrl(String suffix) {
+        protected final void setDownloadFileName(String filename) {
                 try {
-                        setDataURL(FRENCH_PORTAL+"var/download/"+suffix);
+                        setDataURL(FRENCH_PORTAL+"var/download/"+filename);
                 } catch (MalformedURLException e) {
                         e.printStackTrace();

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/culture/BibliothequesHandler.java

@@ -27 +27 @@
                 super("Adresses-des-bibliothèques-municipales-30382179", lambert93);
                 setName("Bibliothèques municipales");
-                setDataGouvFrUrl("lieux de lecture_geoloc.txt");
+                setDownloadFileName("lieux de lecture_geoloc.txt");
         }
 

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/diplomatie/EtabAEFEHandler.java

@@ -25 +25 @@
                 super("Géolocalisation-des-établissements-du-réseau-d'enseignement-de-l'AEFE-30382449", wgs84);
                 setName("Établissements du réseau d'enseignement de l'AEFE");
-                setDataGouvFrUrl("ETALAB_MAEE_Extraction_LDAP_geoloc_AEFE_2011-10-13.csv");
+                setDownloadFileName("ETALAB_MAEE_Extraction_LDAP_geoloc_AEFE_2011-10-13.csv");
         }
 

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/ecologie/ForetsPubliquesHandler.java

@@ +1 @@
+//    JOSM opendata plugin.
+//    Copyright (C) 2011-2012 Don-vip
+//
+//    This program is free software: you can redistribute it and/or modify
+//    it under the terms of the GNU General Public License as published by
+//    the Free Software Foundation, either version 3 of the License, or
+//    (at your option) any later version.
+//
+//    This program is distributed in the hope that it will be useful,
+//    but WITHOUT ANY WARRANTY; without even the implied warranty of
+//    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+//    GNU General Public License for more details.
+//
+//    You should have received a copy of the GNU General Public License
+//    along with this program.  If not, see <http://www.gnu.org/licenses/>.
 package org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.ecologie;
 
@@ -5 +20 @@
 import java.util.ArrayList;
 import java.util.List;
+import java.util.regex.Matcher;
+import java.util.regex.Pattern;
 
 import org.openstreetmap.josm.data.osm.DataSet;
-import org.openstreetmap.josm.data.osm.Relation;
+import org.openstreetmap.josm.data.osm.OsmPrimitive;
 import org.openstreetmap.josm.plugins.opendata.core.datasets.fr.FrenchAdministrativeUnit;
 import org.openstreetmap.josm.plugins.opendata.modules.fr.datagouvfr.datasets.DataGouvDataSetHandler;
@@ -13 +30 @@
 
 public class ForetsPubliquesHandler extends DataGouvDataSetHandler {
+
+        private static final String PATTERN = "for_publ_v20.._reg(..)";
 
         public ForetsPubliquesHandler() {
@@ -20 +39 @@
         @Override
         public boolean acceptsFilename(String filename) {
-                return acceptsZipFilename(filename, "for_publ_v20.._reg..") || acceptsShpFilename(filename, "for_publ_v20.._reg..");
+                boolean result = acceptsZipFilename(filename, PATTERN) || acceptsShpFilename(filename, PATTERN);
+                if (result) {
+                        setNationalPortalPath(findPortalSuffix(filename));
+                }
+                return result;
+        }
+        
+        @Override
+        public boolean acceptsUrl(String url) {
+                boolean result = super.acceptsUrl(url);
+                if (result) {
+                        setNationalPortalPath(findPortalSuffix(url));
+                }
+                return result;
+        }
+
+        private final String findPortalSuffix(CharSequence filename) {
+                Matcher m = Pattern.compile(".*"+PATTERN+"\\....").matcher(filename);
+                if (m.matches()) {
+                        String regionCode = m.group(1);
+                        if (regionCode.equals("42")) {
+                                return "Forêts-publiques-d’Alsace-30378695";
+                        } else if (regionCode.equals("72")) {
+                                return "Forêts-publiques-d'Aquitaine-30378994";
+                        } else if (regionCode.equals("83")) {
+                                return "Forêts-publiques-d'Auvergne-30379302";
+                        } else if (regionCode.equals("26")) {
+                                return "Forêts-publiques-de-Bourgogne-30379206";
+                        } else if (regionCode.equals("53")) {
+                                return "Forêts-publiques-de-Bretagne-30378874";
+                        } else if (regionCode.equals("24")) {
+                                return "Forêts-publiques-du-Centre-30379134";
+                        } else if (regionCode.equals("21")) {
+                                return "Forêts-publiques-de-Champagne-Ardenne-30378853";
+                        } else if (regionCode.equals("94")) {
+                                return "Forêts-publiques-de-Corse-30379118";
+                        } else if (regionCode.equals("43")) {
+                                return "Forêts-publiques-de-Franche-Comté-30378652";
+                        } else if (regionCode.equals("11")) {
+                                return "Forêts-publiques-d’Île-de-France-30378829";
+                        } else if (regionCode.equals("91")) {
+                                return "Forêts-publiques-de-Languedoc-Roussillon-30379312";
+                        } else if (regionCode.equals("74")) {
+                                return "Forêts-publiques-du-Limousin-30378844";
+                        } else if (regionCode.equals("41")) {
+                                return "Forêts-publiques-de-Lorraine-30378675";
+                        } else if (regionCode.equals("73")) {
+                                return "Forêts-publiques-de-Midi-Pyrénées-30378665";
+                        } else if (regionCode.equals("31")) {
+                                return "Forêts-publiques-du-Nord-Pas-de-Calais-30379095";
+                        } else if (regionCode.equals("25")) {
+                                return "Forêts-publiques-de-Basse-Normandie-30378962";
+                        } else if (regionCode.equals("23")) {
+                                return "Forêts-publiques-de-Haute-Normandie-30379164";
+                        } else if (regionCode.equals("52")) {
+                                return "Forêts-publiques-des-Pays-de-la-Loire-30378999";
+                        } else if (regionCode.equals("22")) {
+                                return "Forêts-publiques-de-Picardie-30379389";
+                        } else if (regionCode.equals("54")) {
+                                return "Forêts-publiques-de-Poitou-Charente-30378900";
+                        } else if (regionCode.equals("93")) {
+                                return "Forêts-publiques-de-PACA-30379322";
+                        } else if (regionCode.equals("82")) {
+                                return "Forêts-publiques-de-Rhône-Alpes-30378732";
+                        } else {
+                                System.err.println("Unknown French region code: "+regionCode);
+                        }
+                }
+                return null;
         }
 
         @Override
         public void updateDataSet(DataSet ds) {
-                for (Relation r : ds.getRelations()) {
-                        r.put("landuse", "forest");
-                        replace(r, "LLIB_FRT", "name");
+                for (OsmPrimitive p : ds.allPrimitives()) {
+                        // For all identified objects (both closed ways and multipolygons)
+                        if (p.hasKey("IIDTN_FRT")) {
+                                p.put("landuse", "forest");
+                                replace(p, "LLIB_FRT", "name");
+                        }
                 }
         }
@@ -39 +129 @@
                 try {
                         for (FrenchAdministrativeUnit region : FrenchAdministrativeUnit.allRegions) {
-                                result.add(getForetURL(region.getCode(), region.getName()));
+                                if (!region.getCode().startsWith("0")) { // Skip DOM/TOM
+                                        result.add(getForetURL(region.getCode(), region.getName()));
+                                }
                         }
                 } catch (MalformedURLException e) {

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/education/Etab1er2ndDegreHandler.java

@@ -29 +29 @@
                 super("Géolocalisation-des-établissements-d'enseignement-du-premier-degré-et-du-second-degré-du-ministère-d-30378093");
                 setName("Établissements d'enseignement du premier degré et du second degré");
-                setDataGouvFrUrl("MENJVA_etab_geoloc.csv");
+                setDownloadFileName("MENJVA_etab_geoloc.csv");
         }
         

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/education/EtabSupHandler.java

@@ -27 +27 @@
                 super("Etablissements-d'enseignement-supérieur-30382046", wgs84);
                 setName("Établissements d'enseignement supérieur");
-                setDataGouvFrUrl("livraison ETALAB 28 11 2011.xls");
+                setDownloadFileName("livraison ETALAB 28 11 2011.xls");
         }
 

applications/editors/josm/plugins/opendata/modules/fr.datagouvfr/src/org/openstreetmap/josm/plugins/opendata/modules/fr/datagouvfr/datasets/transport/PassageNiveauHandler.java

@@ -27 +27 @@
                 super("Passages-à-niveau-30383135");
                 setName("Passages à niveau");
-                setDataGouvFrUrl("passage_a_niveau.csv");
+                setDownloadFileName("passage_a_niveau.csv");
         }