Pour boucler cette série d'articles et suite à la conférence SIG 2014, j'ai reçu différentes questions relatives aux nouvelles capacités Open Data d'ArcGIS Online. J'en ai repris quelques unes ci-dessous:

Si vous disposez d'un portail ArcGIS Online pour votre organisation, y compris en évaluation, l'administrateur (ou un utilisateur possédant le privilège "Gérer des sites Open Data") peut activer la capacité Open Data sur le portail et commencer à créer et configurer des site web Open Data. A noter que les comptes publics et les comptes développeurs ArcGIS Online n'ont pas accès à cette capacité. 

Les jeux de données diffusés en Open Data sont alimentés par des groupes qui contiennent des éléments publics (Map Services, Feature Services et fichier CSV). Une fois qu'un groupe est désigné comme alimentant le site web Open Data, tous les membres de ce groupe peuvent y ajouter des éléments (à condition qu'ils soient publics).

Non, l'activation et l'utilisation d'un site web Open Data ne consomme aucun crédit supplémentaire. Le nombre de personnes qui recherchent, visualisent et téléchargent vos données ne consomment pas de crédit.

Non, votre site web Open Data est public et l'accès se fait de manière anonyme. Seul l'accès à l'interface d'administration nécessite un compte d'organisation ArcGIs Online.

Les sites web Open Data sont conçus pour des utilisateurs (citoyens, partenaires, développeurs, ...) qui ne sont pas familiers avec les SIG et avec un focus sur la recherche, la découverte et le téléchargement de données. L'expérience utilisateur est donc très orientée grand public.

Dans sa version actuelle, ArcGIS Open Data peut être alimenté par des Feature Services, des Map Services (couches vectorielles et tables) et des fichiers CSV. Cette liste de source de données évoluera dans les prochaines versions.

L'utilisateur peut télécharger tout ou partie du jeu de données qui l'intéresse dans les formats CSV, KML et SHP (shapefile). Il peut également y accéder via l'API Rest/JSON Esri ou via l'API GeoJSON.

L'accès en WMS/WFS est possible sur certains jeux de données s'ils sont servis par ArcGIS Server avec les options OGC WMS et OGC WFS activées.

Oui, en laissant votre site web Open Data en mode "privé", vous pouvez limiter l'accès aux utilisateurs authentifiés de votre organisation. Cependant, les éléments de votre portail ArcGIS Online qui l'alimente devront tout de même être partagés en "public".

Au delà de la documentation en ligne (en anglais pour l'instant) qui est généralement suffisante pour maîtriser les enjeux d'administration d'un site web ArcGIS Open Data, vous pouvez également consulter ces articles sur ce blog. Vous pourrez également suivre cette formation en ligne gratuite (en anglais), une excellente introduction à ces nouvelles capacités d'ArcGIS Online qui vient d'être publiée sur la plateforme de formation en ligne d'Esri.

Je poursuis mon précédent article consacré à la démonstration ArcGIS Open Data présentée lors de la plénière de SIG 2014. Nous avons vu comment les sources de données sont publiées puis organisées dans le portail ArcGIS Online pour alimenter ensuite votre site ArcGIS Open Data. Nous avons également détaillé comment activer et configurer le site Open Data en quelques clics. Je vous propose dans cette deuxième partie de découvrir les interfaces et les fonctionnalités que propose un site web ArcGIS Open Data aux utilisateurs de vos données ouvertes.

Rechercher et Découvrir

Le focus premier d'un site web ArcGIS Open Data est de permettre aux utilisateurs de trouver très rapidement vos données. Pour cela, il dispose d'une zone de recherche textuelle qu'il peut, éventuellement combiner à des critères de recherche géographiques. Par exemple ici, on recherche les jeux de données liés aux "déplacements".

A l'aide des balises (mots-clés) associés à chaque jeux de données, l'utilisateur peut facilement réduire ou élargir les résultats retournées par la recherche. Par exemple ici, on affine ses résultats en ne retenant que les jeux de données liés aux déplacements à "vélo".

Pour chaque résultat, l'utilisateur peut, en un seul coup d'oeil, le nombre d'attributs et de ligne contenus dans le jeu de données. En sélectionnant le jeu de données, il peut également voir l'emprise géographique de ce dernier dans la carte. En un clic il peut également télécharger le jeu de données dans un des formats proposé par ArcGIS Open Data (j'y reviens un peu plus loin dans cet article).

En cliquant sur le titre du jeu de données, l'utilisateur accède aux informations détaillées. 

Visualiser et Explorer

En bas de cet onglet "Détails", l'utilisateur se voit proposé une liste de jeux de données associés. Cette association est basée sur les balises communes avec jeu de données actuel. 

Accéder et Télécharger

Le dernier point important d'un site web ArcGIS Open Data c'est de permettre à l'utilisateur d'accéder aux données, soit en les téléchargeant dans un format ouvert, soit en accédant à une API ouverte. 

ArcGIS Open Data propose différentes options:

L'utilisateur peut télécharger le jeu de données aux formats suivants:
- Feuille de calcul (CSV),
- KML,
- Fichier de formes (SHP)

Les développeurs souhaitant un accès direct et dynamique au jeu de données pourront utiliser l'API Rest/JSON Esri ou l'API GeoJSON pour développer leur application et se connecter aux données via un service web. 

On notera que si l'utilisateur a filtré le jeu de données, il aura la possibilité de télécharger (ou d'accéder via les API) aux entités filtrées uniquement.

Conclusion

A travers ces 2 articles et l'exemple du site web Open Data réalisé avec le SIG mutualisé de BMO - Pays de Brest, je vous ai montré la simplicité du référencement des jeux de données et les avantages d'être directement connecté à des services dynamiques issus du SIG. Je vous ai montré également la facilité d'activation et de configuration d'un site web Open Data. Nous avons également détaillé la simplicité et la richesse du site web Open Data ainsi obtenu, et tout cela sans le moindre développement. Ce qu'il faut retenir c'est qu'ArcGIS Open Data fait partie des fonctionnalités de votre portail ArcGIS Online, vous y avez donc accès dès maintenant sans aucun coût supplémentaire. 

Depuis que cette capacité est disponible sur ArcGIS Online, plusieurs centaine de site ArcGIS Open Data ont été activés en production ou en tests (voir la carte ci-dessous). Il ne vous reste plus qu'à les tester à votre tour !

Lors de la plénière de la conférence SIG 2014, j'ai eu l'occasion de présenter en exemple le portail ArcGIS Open Data réalisé en collaboration avec le SIG mutualisé de Brest Métropole Océane et du Pays de Brest. L'objectif était de démontrer qu'en quelques jours, il était possible de configurer et de mettre en ligne un site web Open Data ouvert au public. 

Le contexte

Brest Métropole Océane (BMO) dispose d'un serveur SIG ArcGIS Server diffusant des services web cartographiques pour des applications internes et externes. Grâce à ses licences ArcGIS Desktop, BMO dispose d'un portail ArcGIS Online qui lui permet de partager des services, des cartes et des applications au sein de l'organisation. 

L'objectif de cette expérimentation était d'évaluer les nouvelles capacités Open Data d'ArcGIS Online pour diffuser un certains nombre de jeux de données du SIG en Open Data. Plusieurs contraintes étaient imposées pour la solution:

La solution proposée

ArcGIS Open Data répondant parfaitement à ces contraintes, la solution a consisté à configurer un site web ArcGIS Open Data. Pour déployer ce site Open Data avec ArcGIS Online, il a été nécessaire de suivre 4 étapes que je décris ci-dessous. On notera qu'elles sont applicables au delà de l'exemple de BMO. 

L'implémentation étape par étape

Vous devez tout d'abord diffuser des services web ArcGIS (Map Service ou Feature Service) hébergés sur ArcGIS Online ou sur votre propre ArcGIS Server. Dans le cas de BMO, le choix a été fait de publier quelques Feature Services (2 pour l'instant) à partir d'ArcGIS Server directement sur la base de données du SIG (une Géodatabase d'Entreprise).

Si vos Features Services sont hébergés sur le portail, aucun référencement n'est nécessaire puisqu'ils sont déjà référencés dans vos contenus. Si les Feature Services proviennent de votre infrastructure vous devrez les référencer sur votre portail ArcGIS Online. Vous pourrez alors référencer directement le Feature Service ou individuellement chaque couche de ce Feature Service. Cela dépend du niveau de granularité que vous souhaitez gérer sur chaque jeu de données (titre, description, balises, imagette,...). 

Evidement, chaque jeu de données doit être partagé en "public".

On notera que dans le cas de BMO, la bonne description des couches dans les documents ArcMap (MXD) a permis de gagner du temps en récupérant automatiquement toutes ces infos lors du référencement de chaque service sur le portail. Il existe également des solutions (script Python exploitant l'API Rest d'ArcGIS Online) pour automatiser l'ajout (ou la mise à jour) d'un élément ArcGIS Online pour chaque couche d'un Feature Service.

Une fois les jeux de données référencés et documentés, il suffit ensuite de les partager avec un (ou plusieurs) groupe(s) que vous aurez spécialement créés pour identifier les données à exposer sur le site web. Ces groupes doivent être publics et, en plus, avoir la propriété "Désigner comme disponible dans les sites Open Data" activée. 

Il reste désormais à activer et configurer le site web Open Data. Cela se fait à partir de l'interface d'administration d'ArcGIS Online (dans la rubrique "Open Data").

Une fois que vous aurez créé un nouveau site, il faudra alors le configurer. Il vous sera demandé différentes informations comme le titre du site, son url, son favicon, son nom de domaine personnalisé (le cas échéant) ainsi que l'étendue par défaut de la carte située sur la page d'accueil (si vous affichez cette carte). 

Vous définirez ensuite le (ou les) groupe(s) contenant les jeux de données à diffuser sur votre site Open Data. Les groupes peuvent à tout moment être retirés ou ajouté dans cette liste ce qui permet par exemple d'intégrer des données de différents services de votre organisation ou de partenaires.

Une fois votre page d'accueil finalisée, il suffit d'enregistrer son site et de le rendre "public". A tout moment, depuis l'interface d'administration, vous pourrez revenir sur la configuration du site et modifier les paramétrages évoqués précédemment (y compris l'url du site).

Dans une deuxième partie, toujours sur la base de cet exemple, j'évoquerai les différentes fonctionnalités qui sont automatiquement proposées dans un site web Open Data ArcGIS.

Dans de nombreuses organisations publiques ou privées, la question se pose aujourd'hui d'engager une démarche d'ouverture de données. L'objectif est à la fois d'aller vers plus de transparence vis à vis des citoyens, des usagers, des clients... mais aussi d'accélérer le développement et l'innovation en offrant un accès plus simple, plus direct et gratuit aux données de votre organisation. Evidement, la majorité de ces données sont géographiques. Cette démarche d'ouverture de données est donc une formidable opportunité de valoriser les données de votre SIG et, par conséquent, votre travail et vos investissements sur la collecte, la validation et la maintenance de vos bases de données géographiques. Cependant, cette opportunité s'accompagne aussi d'attentes du point de vue des utilisateurs et des contraintes des propriétaires (ou gestionnaires) de ces données. 

L'Open Data du point de vue du propriétaire des données

Une fois décidée et acceptée l'idée de diffuser une partie de ses données de manière ouverte, la question première qui se pose est celle de l'organisation et le coût de cette diffusion.  Il est donc souhaitable que la mise en place d'un site web Open Data soit la moins coûteuse possible qu'elle ne constitue pas le n^ième projet informatique de plus pour votre organisation. A ce titre, la solution optimum est souvent celle qui s'appuie le plus étroitement à l'infrastructure existante.

Cette démarche d'ouverture est très souvent une mission supplémentaire qui s'impose aux administrateurs de données, elle doit donc être simple à mettre en oeuvre tant à initialisation qu'en phase d'exploitation. Ces administrateurs ne pouvant généralement pas accorder beaucoup de temps supplémentaire à la maintenance de bases de données et de métadonnées spécifiques à l'Open Data, la solution doit permettre une gestion unifiée des données, qu'elles soient utilisées par le grand public ou au sein de l'organisation. La même donnée doit pouvoir être créée, gérée, maintenue et documentée une seule fois et un seul endroit. Ceci est le pré-requis pour assurer la qualité et la fraîcheur des données ouvertes.

L'Open Data du point de vue des utilisateurs

Pour les citoyens ou les développeurs d'applications qui souhaitent utiliser vos données, les besoins sont assez simples et se résument en 3 points:

• disposer d'un site sur lequel on peut facilement rechercher et explorer les données disponibles.
• pouvoir télécharger ou interroger en ligne les données en un seul clic, et ceci dans des formats standards de l'Open Data.
• être certains que les données qu'il récupère sont complètes, validées et toujours à jour.

Depuis quelques semaines, la plateforme ArcGIS Online s'est enrichie de nouvelles capacités qui permettent la mise en ligne d'un site web Open Data en prenant en compte à la fois les contraintes des propriétaires (ou gestionnaires) des donnés et les attentes. ArcGIS Open Data est une nouvelle capacité d'ArcGIS Online qui permet de diffuser, via un site "Open Data" configurable, certains jeux de données déjà référencés et documentés sur le portail ArcGIS de votre organisation. 

Le premier point important d'ArcGIS Open Data c'est qu'en quelques clics, vous activez un site web grand public dont l'interface est focalisée sur la recherche et la découverte des données, avec la possibilité de les télécharger dans les formats standards de l'Open Data (csv, kml, shp, GeoJSON, ....). L'administrateur, à travers un ou plusieurs groupes ArcGIS Online, définit les jeux de données qu'il souhaite exposer sur le site Open Data.

Le second point fort d'ArcGIS Open Data c'est que les jeux de données publiés sont directement issus de vos services web existants (qu'ils soient hébergés sur ArcGIS Online ou diffusés via ArcGIS Server). Ainsi aucune base de données spécifique n'est créée pour le site Open Data, il n'y a donc aucune réplication de données. Ceci permet de garantir la fraîcheur et la qualité des données que vous diffusez et ceci sans effort supplémentaire par rapport à vos processus actuels.

Le troisième point fort d'ArcGIS Open Data est d'être inclus dans ArcGIS Online. Ce n'est pas un nouveau produit mais juste des fonctionnalités supplémentaires qui ont été ajoutées à votre portail ArcGIS Online. Il n'y a donc aucun coût supplémentaire à déployer un (ou plusieurs) site(s) web Open Data. 

On notera aussi que l'activation d'un site web Open Data n'entraine pas de consommation de crédits supplémentaires. En effet, le fait que des utilisateurs téléchargent vos données ouvertes sur votre site ArcGIS Open Data, cela se traduit par des requêtes sur vos services web et de l'utilisation de bande passante sur la plateforme... ce qui n'a jamais consommé de crédit sur ArcGIS Online.

Lors de la plénière de la conférence SIG 2014, j'ai présenté l'exemple du site Open Data réalisé en quelques jours avec le SIG mutualisé de Brest Métropole Océane et du Pays de Brest. Je reviendrai en détails sur cet exemple dans un prochain article.

Comme je l'évoquais la semaine dernière, les SDK ArcGIS Runtime passent en version 10.2.4. En fin de semaine dernière, Esri a mis en ligne le dernier de la liste à savoir le SDK ArcGIS Runtime for Java SE. Dans la continuité de la version 10.2.3 sortie au printemps, cette nouvelle mouture est une version importante qui introduit plusieurs évolutions majeures:

Vous pouvez dès maintenant télécharger le SDK sur le site developers.esri.com et consulter la liste des nouveautés de cette version 10.2.4 via la page Release Notes.