J'ai déjà eu l'occasion d'évoquer le site learn.arcgis.com, un site web gratuit dédié à l'apprentissage d'ArcGIS. Il propose, sous la forme de leçons guidées, des exemples concrets d'utilisation d'ArcGIS pour résoudre des problématiques géospatiales. Traduit depuis plusieurs années en français, le site d'apprentissage en ligne d'ArcGIS continue d'évoluer régulièrement.

   

    

Il y a quelques semaines, 5 nouvelles leçons en français ont été ajoutées pour compléter la liste déjà significative de modules d'apprentissage en ligne disponibles. Ce sont désormais 69 leçons traduites en langue française (même si les jeux de données sont un peu anglo-saxon, il faut le reconnaitre). Ils vous permettront d'approfondir vos connaissances en les appliquant, par exemple, à vos propres données. Si vous avez des activités d'enseignement, ces leçons peuvent également servir de base à des cours d'initiation aux SIG avec les applications web, mobiles ou bureautiques ArcGIS.

    

Je l'évoque régulièrement sur arcOrama, les apps mobiles ArcGIS évoluent avec des cycles de versions plus courts que les autres composants de la plateforme ArcGIS.  Version après version, Collector, Survey123, Workforce, Navigator... se dotent de nouvelles fonctionnalités et optimisent leur ergonomie et leur performance. Pendant ce temps, les OS des appareils mobiles (tablettes et smarphones) évoluent eux aussi très régulièrement avec parfois des mises à jour significatives ayant un impact sur les développements des apps sur ces environnements. Ainsi, les équipes de développement d'Esri testent ces futures versions d'OS et leur compatibilité avec les apps mobiles ArcGIS. En termes d'OS, l'année 2018 sera assez chargée avec l'arrivée d'une version majeure du coté des principales plateformes: Android et Apple, avec respectivement l'arrivée imminente d'Android P et d'iOS 12.

Android P (Android 9 Pie) est la prochaine version majeure pour la plateforme Android. Elle est prévue pour le mois d'août et les appareils utilisant des OS non personnalisés (comme Pixel ou Nexus) devrait pouvoir bénéficier de cette mise à jour rapidement. Pour les appareils utilisant des versions personnalisées, cela peut prendre plus de temps selon les modèles et les constructeurs.

iOS 12 est la prochaine mise à jour majeure pour les appareils Apple. Attendue un peu plus tard dans l'année (octobre), elle sera supportée sur les smartphones et tablettes Apple supportant déjà iOS 11 (voir cette liste en bas de la page).

 
   

La question importante pour les utilisateurs des apps mobiles ArcGIS est de savoir si elles supporteront ces nouveaux systèmes d'exploitation. Dès la sortie des versions beta de ces futurs OS, elles sont testées par les équipes d'Esri. Au 24 juillet, les tests effectués sur les versions iOS 12 beta 3 (16A5318d) et Android P beta 3 (Build number: PPP4.180612.004) ont permis de valider que les applications Workforce, Explorer, Collector  et Navigator ont passés les tests de validation.

D'autres mises à jours (beta 4 notamment) sont à venir, pour rester informé sur la certification de apps mobiles ArcGIS sur Android P et iOS 12, vous pouvez consulter cet article qui sera actualisé par mes collègues d'Esri.

Cette semaine ont lieu les championnats européens 2018. Cette première édition regroupe plusieurs championnats européens dans différentes disciplines (cyclisme, triathlon, athlétisme, natation, golf, gymnastique, ...) du 2 au 12 août 2018 à Glasgow et Édimbourg (pour le plongeon), en Écosse et du 6 au 12 août à Berlin, en Allemagne. Ces "mini jeux-olympiques d'été européens" nécessitent une organisation bien réglée et, évidement, la cartographie joue un rôle important. 

La ville de Glasgow utilise la plateforme ArcGIS pour gérer l'organisation et la sécurisation des différentes épreuves notamment celles qui ont lieu en plein-air. J'ai donc retenu cette semaine cette série d'applications web ArcGIS Online réalisée avec Web AppBuilder et mise en avant grâce au modèle d'application "Bibliothèque minimale".

   

  

Dans la foulée de la sortie de la version 10.6.1 d'ArcGIS, Esri publie une version actualisée de la matrice de fonctionnalités d'ArcGIS Enterprise. Il s'agit d'un document synthétique reprenant les principales fonctionnalités par niveau de licence (Basic, Standard et Advanced) et pour les différents composants (Serveur SIG, Portail, Rôles serveur complémentaires et extensions). Le document intègre aussi les informations relatives aux possibilités de déploiement des différents (composants, plateformes, outils). Vous trouverez le document à cette URL.

       
Le 17 juillet dernier, Esri a annoncé la disponibilité d'ArcGIS Enterprise 10.6.1, version majeure de l'année 2018 pour la composante serveur de la plateforme ArcGIS. Cette nouvelle version apporte de nouvelles fonctionnalités en termes de collaboration et de partage de contenus, des outils d'analyse innovants et bien entendu des améliorations de performances sur les différents composants du socle serveur de votre SIG Web (Server, Portal, Data Stores et Web Adaptors).


Je vous propose un tour d'horizon (évidement pas complet) des principales avancées de cette version 10.6.1 qu'il est clairement recommandé de considérer comme version cible si vous envisagez une migration depuis une version plus ancienne.
 

Evolutions générales du portail

Comme pour chaque nouvelle version d'ArcGIS Enterprise, le portail tire profit d'un certain nombre d'évolutions récente du portail d'ArcGIS Online. Ainsi, on pourra par exemple noter les améliorations suivantes (la liste n'est pas du tout exhaustive):

• Une nouvelle page "Bibliothèque" est proposée avec de nombreuses évolutions en termes d'ergonomie et de capacités de filtrage.
• La possibilité de gérer des "catégories" pour mieux organiser les contenus de votre portail et permettre aux utilisateurs de les retrouver plus facilement.
• La possibilité d'indiquer si un contenu est "officiel" ou "obsolète".
• Un indicateur de "statut" est associé à chaque élément de contenu afin d'aider le propriétaire de ce dernier à le documenter de manière plus exhaustive et pertinente pour les autres utilisateurs de l'organisation.
• De nouvelles options d'affichage des résultats lors d'une recherche dans la page "Contenus".
• ...

En 10.6.1, une nouvelle capacité a été ajoutée à ArcGIS Enterprise pour vous permettre de configurer des sites web afin d'exposer vos contenus (apps, cartes, scènes, couches, documents, ...) à travers des pages web entièrement personnalisées. Les Sites permettent véritablement de démocratiser l'accès à vos contenus en les présentant d'une manière plus simple, contextualisée, thématisée et avec le look-and-feel de votre organisation.
 
Par exemple, au sein de votre organisation, les différents départements pourrons facilement créer des pages web mettant en avant les applications et les données utiles à l'ensemble de l'organisation ou à certains groupes d'utilisateurs spécifiques. Les sites et leurs pages sont des éléments de votre portail ArcGIS sur lesquels vous pouvez gérer les droits d'accès comme n'importe quel autre contenu de votre portail. Tous les membres de l'équipe d'un site (des utilisateurs de niveau 2) peuvent créer et maintenir autant de pages web que nécessaire.

Les pages web sont configurées grâce à des widgets positionnés et configurés interactivement dans la page dans l'éditeur de site. De nombreuses options sont envisageables pour présenter des données, des applications, des cartes, des scènes dans vos pages. Il est même possible d'intégrer à vos pages des contenus et des applications externes à votre portail. Bien qu'aucune connaissance en développement web soit nécessaire pour créer et gérer des sites, si vous avez des connaissances en CSS et HTML, vous pourrez aller au delà des capacités de personnalisation prévues dans l'interface interactive.
Une fois les pages configurées elles peuvent être mise à disposition des utilisateurs de votre organisation qui pourront consulter, naviguer, télécharger ou encore créer des applications à partir des contenus trouvés dans vos pages.
Avec cette nouvelle version d'ArcGIS Enterprise, Esri poursuit ses développements fonctionnels autour des tuiles vectorielles.

Une de ces évolutions est de pouvoir désormais utiliser en mode déconnecté les couches de tuiles vectorielles hébergées sur le portail. Comme pour ArcGIS Online, cela permet à des applications mobiles de télécharger et d'utiliser vos fonds de cartes vectoriels pour les utiliser dans des contextes où elles ne sont pas connectées au portail ArcGIS de l'organisation.

Autre évolution intéressante, il est maintenant possible de remplacer une couche de tuiles vectorielles par une version plus récente et la mettre ainsi à jour. Outre l'intérêt de ne pas avoir à supprimer et republier un service, l'avantage est principalement de conserver la même URL, description, balises, métadonnées,... et d'être ainsi transparent pour les utilisateurs et les applications clientes.
   
Enfin, Esri a ajouté dans le l'atlas dynamique (Living-Atlas) plusieurs styles de fonds de carte vectoriels mondiaux: Nova, Newspaper, Modern Antique et Mid-Century.

Fonds vectoriels Nova et Newspaper

 
 
Performance des services d'entités et des services de cartes

En version 10.6.1, les performances des services de cartes et des services d'entités (non-hébergés) ont été améliorées de manière significative notamment sur les opérations de démarrage et d'arrêt des services. Les améliorations de performance concernent également l'empreinte système (mémoire, cpu).

Des évolutions de performance ont également été apportées en termes de rapidité d'affichage et de rendu. Par exemple, vous constaterez que la quantité de données renvoyées par les services a largement diminuée grâce à l'implémentation du mécanisme de quantification (quantization) permettent la simplification des coordonnées selon une grille de tolérance. Ce mécanisme était déjà implémenté en 10.6 pour les services d'entités hébergés mais n'était activé par défaut ce qui est le cas pour tous les types de services de cartes et d'entités en 10.6.1. D'autre part, des améliorations importantes de performance seront constatées en termes de fluidité de navigation et de volumétrie de données affichée sur vos cartes grâce à l'usage du moteur de rendu WebGL qui remplace le moteur SVG (lorsque votre navigateur le supporte) dans la visionneuse du portail d'ArcGIS Enterprise et dans les applications web basées sur l'API JavaScript 4.5 ou supérieure.

  

On notera par ailleurs que les services d'entités hébergés supportent désormais l'opération Truncate. 

Les services d'entités basés sur le SpatioTemporal Big Data Store supportent désormais la création de vues et l'activation du suivi des éditeurs (EditorTracking) et le contrôle d'accès (restriction de la mise à jour aux propriétaires des entités). Enfin, il est dorénavant possible d'ajouter des champs à des services d'entités basés sur le SpatioTemporal Big Data Store.

  

  

Avec la version 10.5 d'ArcGIS Enterprise 10.5, Esri a introduit le concept de Collaboration Distribuée permettant à différents portails de partager des contenus dans un contexte automatisé et sécurisé. En version 10.6.1 ce mécanisme se renforce en devenant toujours plus robuste et flexible.

• Vous pouvez maintenant partager des apps web basées sur les modèles d'apps ou le générateur Web AppBuilder. Ceci est possible entre portails ArcGIS Enterprise 10.6.1 ou d'un portail Enterprise 10.6.1 vers un portail ArcGIS Online.
• Vous pourrez désormais choisir de synchroniser vos espaces de travail à la demande. Cette option permet en particulier de synchroniser les nouveaux contenus en dehors des intervalles de synchronisation prédéfinis.  
• Il est dorénavant possible pour les administrateurs du portail de définir une taille limite pour l'espace stockant les contenus issus d'une collaboration. Par défaut, cette limite est de 10 Go, en utilisant le paramètre diskThreshold cette valeur pourra être fixée à 1 Go ou plus.

   

   

En 10.6.1, si votre ArcGIS Enterprise dispose du rôle optionnel "Image Server", vous pouvez tirer profit de nouvelles capacités de traitement de données rasters de votre serveur ArcGIS avec "Ortho Maker".  Il s'agit d'une nouvelle application web inclus dans votre portail ArcGIS permettant de créer des produits d'imagerie orthorectifiés (orthophoto, MNE, MNT,...) à partir d'images collectées par drone (ou autres moyens aéroportés). 

   

    

    

  

Pour l'ensemble de ces calculs, ArcGIS utilise l'architecture distribuée d'ArcGIS Image Server.
  

Plus de contrôle sur les tâches de géotraitement

• L'outil "Synthétiser le centre et la dispersion" mesure la distribution d'un ensemble d'entités, en calculant des caractéristiques telles que le centre ou l'indice de compacité et l'orientation des nuages d'entités. Cet outil peut par exemple être utilisé pour comparer l'évolution dans le temps de la distribution de plusieurs ensembles d'entités.
• L'outil "Rechercher des agrégats de points" permet de localiser les regroupements spatiaux  (concentrations spatiales) d'entités ponctuelles dans un gros volume de points.
• Les outils "Agréger les points" et "Synthétiser - à l'intérieur" propose 2 nouvelles options pour générer des mailles carrées ou hexagonales plutôt que d'utiliser une couche d'entités surfaciques.

 
Différentes améliorations ont été apportées aux outils existants comme par exemple deux nouvelles options "Near before" et "Near after" pour les paramètres temporels de l'outil "Join Features".

Autres évolutions importante pour GeoAnalytics Server, les partages de fichiers Big Data (Big Data File Shares) peuvent dorénavant référencer des Data Lake Microsoft Azure. GeoAnalytics Server est maintenant capable d'accéder à des répertoires HDFS en utilisant l'authentification Kerberos.

  

La conférence mondiale des utilisateurs Esri est toujours l'occasion de faire un point sur les évolutions technologiques récentes et futures des différentes composantes de la plateforme ArcGIS. Cette année encore, de nombreuses annonces ont été faites par Esri durant la session plénière et les ateliers techniques. Je tente donc dans ce second article d'en faire un résumé aussi complet que possible.

Beaucoup de présentations techniques ont concerné les nouvelles versions 10.6.1 d'ArcGIS, 2.2 d'ArcGIS Pro et la récente mise à jour d'ArcGIS Online, toutes sorties juste avant la conférence. La prochaine version majeure de la plateforme ArcGIS est prévue pour le printemps 2019 avec une version 10.7 (et 2.3 pour ArcGIS Pro).


ArcGIS Desktop / ArcGIS Pro

Aujourd'hui, l'application phare d'ArcGIS Desktop c'est ArcGIS Pro. Esri est clair sur ce point depuis quelques années maintenant, les anciennes applications ArcMap, ArcCatalog,... n'évolueront presque plus dans le futur. Bien entendu, elles sont toujours dans ArcGIS Desktop 10.6.1 et seront dans les prochaines versions majeures d'ArcGIS et elles continueront d'être supportées pendant longtemps (la version 10.6.1 sera supportée jusqu'au 1er janvier 2024).
 
 
Esri concentre donc tous ses efforts de R&D sur ArcGIS Pro ce qui explique le rythme assez soutenu des évolutions et des innovations que connait l'application depuis la version 2.0. Depuis début juillet, la version 2.2 est disponible (en anglais) avec beaucoup de nouveautés comme par exemple le support natif du format BIM de Revit, la possibilité d'exécuter ses outils de géotraitement par lots (batch), le support des fichiers/flux Full Motion Video (FMV), la prise en charge des services de flux temps-réel (stream layers) ou encore des outils de découpage 3D interactif pour naviguer dans vos modèles 3D complexes.
 
 


En termes d'évolutions futures, Esri profite de chaque nouvelle version pour mettre à jour les éléments de road-map pour les prochaines versions. Ce document est d'ailleurs public sur cette page de GeoNet. Par exemple à court terme (prochaine version ou suivante) on peut signaler l'arrivée d'outils de génération de rapports, la prise en charge des impressions en Offset, le support de rendus cartographiques de type Clustering (agrégation ponctuelle) ou Binning (agrégation par mailles) ou encore la capacité de publier un nouveau type de couche de scène (Building Scene Layer) adapté aux couches 3D en LOD4 comme les données issues de modèles BIM. On remarquera également l'integration des fonctionnalités de LocateXT dans ArcGIS Pro pour géolocaliser des données de documents textuels (structurés ou non-structurés) et les exploiter dans le SIG. On notera enfin l'ajout de nouveaux outils d'analyse spatio-temporelle s'exécutant de manière parallélisée sur les différents coeurs de la machine pour plus de performance. Les utilisateurs de Python apprécierons aussi le remplacement de la fenêtre de scripting actuelle par l'interface Jupyter Notebooks qui sera donc intégrée dans ArcGIS Pro. Plusieurs outils de Machine Learning et de Deep Learning feront également leur apparition fin 2018 / début 2019, certains développés par Esri et d'autres issus de l'intégration de frameworks existants (SciKit-Learn par exemple).
 
 
ArcGIS Enterprise

Avec une version 10.6.1 d'ArcGIS Enterprise sortie au moment de la conférence, c'est l'actualité de cette nouvelle mouture qui a été largement détaillée durant la UC. De nombreuses évolutions sont à noter en 10.6.1. Tout d'abord, on peut signaler un ensemble d'évolutions du portail issues des évolutions récentes d'ArcGIS Online comme la prise en charge des catégories, une nouvelle page pour les galeries de contenus, le support du format GeoJSON dans la visionneuse de carte, de nouveaux types de rendus par valeur prédominante sur les couches d'entités, .... Les récentes évolutions de la visionneuse 3D d'ARcGIS Online ont aussi été intégrées dans ArcGIS Enterprise 10.6.1.

On notera également de nouvelles options de collaboration entre différents portails ArcGIS (Enterprise et/ou Online) comme par exemple l'option de synchronisation à la demande ou la capacité de synchroniser des éléments de type "Web App".

Une autre évolution notable et très attendue en 10.6.1 concerne la capacité à créer des sites. Un site est un ensemble de pages web hébergées sur votre portail, que vous configurez, personnalisez  et sécurisez interactivement pour présenter des contenus (cartes, scènes, diagrammes, textes, images, vidéos, apps, galeries d'apps,...) de manière conviviale à certains groupes d'utilisateurs de votre organisation (ou même en dehors de l'organisation).
   

Exemple de page d'un site ArcGIS Enterprise

Le rôle serveur Image Server évolue également en 10.6.1 avec de nouvelles capacités d'Ortho-Mapping qui permettent de créer dynamiquement des orthophotos à partir d'images aériennes ou drone. Ces fonctionnalités sont notamment accessibles depuis une nouvelle application du portail nommée "Ortho Maker".


On notera également de nouveaux outils d'analyse pour GeoAnalytics Server (Append Data, Build Multi-Variate Grid, Find Point Clusters, Overlay Layers, ...) et de nouvelles capacités sur les services d'entités issus du Spatio-Temporal BigDataStore comme la possibilité de gérer des vues, d'activer le suivi des mises à jours ou encore les contrôles d'accès. Les sources de données de type "Big data file shares" peuvent maintenant référencer un Data Lake Microsoft Azure, et GeoAnalytics Server peut dorénavant utiliser des répertoires HDFS en utilisant une authentification Kerberos.

Je n'ai pas évoqué toutes les évolutions de cette version 10.6.1 mais je publierai un article dédié dans les prochaines semaines.


En termes d'évolutions futures pour ArcGIS Enterprise, Esri a évoqué une partie de ses travaux de R&D sur les évolutions fonctionnelles, notamment pour la prochaine version majeure 10.7 (printemps 2019). Il faut bien entendu s'attendre à des améliorations fonctionnelles autour des services web hébergés (feature layers, scene layers, vector tiles layers, ...), mais aussi autour du portail et des apps mobiles et web. On citera,  par exemple, l'intégration de Jupyter Notebooks qui permettra une gestion et un partage des scripts exploitant l'API Python ArcGIS et d'autres framework Python, directement au sein du portail ArcGIS. On notera ensuite l'ajout de nouvelles capacités de suivi de positions en temps-réel (Location Tracking) dans ArcGIS Enterprise (nouveau type de service web de tracking et collecte/restitution dans différentes apps mobiles et web). L'IA sera au coeur des prochaines évolutions d'ArcGIS Enterprise avec plusieurs innovations dans GeoAnalytics Server: nouveaux outils, capacité de publier des outils Python développés par les Data-Scientists avec PySpark, possibilité d'écrire les résultats vers "Big Data File Shares" locaux et cloud, ...). GeoEvent Server devrait également largement évoluer avec de meilleurs performances et de nouveaux outils de monitoring en configuration multi-machine, de nouveaux connecteurs en entrée/sortie sur les infrastructures de stockage Amazon S3 bucket et Azure Blob, ....).

Esri a également confirmé la poursuite de ses travaux pour améliorer l'architecture interne des composants constituant ArcGIS Enterprise pour mieux répondre aux attentes des équipes IT qui gèrent les aspects DevOps dans les organisations. L'objectif est d'améliorer la rapidité de déploiement, la souplesse d'hybridation de l'architecture, la haute-disponibilité et la scalabilité des composants serveur d'ArcGIS. Dans les prochaines versions (à priori post 10.7), l'architecture d'ArcGIS Enterprise évoluera en proposant (en option) des déploiements basés sur des containers et des microservices (Docker) gérés et orchestrés (Kubernetes). Mieux adaptés aux infrastructures virtualisées et aux déploiements natifs des infrastructures Cloud tels que Amazon ou Azure. Ces évolutions n'auront pas d'impact sur les fonctionnalités et les applications d'ArcGIS Enterprise.


ArcGIS Online

ArcGIS Online est une composante Cloud de la plateforme ArcGIS que les utilisateurs ont largement adopté car elle se met en oeuvre très facilement et permet de compléter et d'étendre les capacités de leur SIG pour le rendre accessible à une plus grande audience, et ceci sans aucun impact sur leur propres infrastructure.
 

Avec désormais 5.9 millions d'utilisateurs, ce sont plus de 300 000 utilisateurs qui se connectent à la plateforme en ligne chaque jour. 17.5 millions d'éléments de contenus sont gérés sur ArcGIS Online  avec environ 40 000 nouveaux éléments (couches, cartes, scène et apps) créés chaque jours. Au cours d'une journée, ce sont entre 2 000 et 10 000 requêtes qui sont exécutées par seconde.
 

Avec une mise à jour trimestrielle, ArcGIS Online propose des évolutions régulières souvent basées sur les retours des utilisateurs. Les évolutions récentes (juin 2018) concernent par exemple l'amélioration des performances pour les services d'entités hébergés dans les cartes web et pour certains types de couches (points et mesh 3D) dans les scènes web. On peut noter également le design repensé de la page "Organisation" permettant de gérer plus facilement son portail notamment lorsqu'il possède un très grand nombre  d'éléments de contenus et d'utilisateurs. D'autres évolutions comme la possibilité de faire certifier son organisation permet de publier des contenus officiels et d'améliorer ainsi la qualité des contenus partagés publiquement sur la plateforme.



En termes d'évolutions futures pour ArcGIS Online, Esri a évoqué différentes pistes de R&D, notamment pour améliorer les capacités et l'expérience utilisateurs pour la recherche de contenu, de nouvelles capacités de tuilage vectoriel à la volée sur les services d'entités, l'intégration de l'éditeur de styles de tuiles vectorielles dans le portail ou encore l'ajout de nouveaux types de rendus cartographiques 2D et 3D. Esri a également indiqué l'arrivée en 2019 de mécanismes de collaboration entre portails d'organisations ArcGIS Online (et plus uniquement entre ArcGIS Online et ArcGIS Enterprise). L'année prochaine, les utilisateurs d'ArcGIS Online devraient disposer de capacités similaire à "Image Server" pour publier et exploiter toute la puissance des services d'imagerie sur la plateforme en ligne. A plus long terme, on notera un projet important de refonte de la visionneuse de cartes pour exploiter les fonctionnalités de l'API JavaScript ArcGIS 4.x comme la rotation de la carte, les groupes de couches ou encore les capacités étendues de personnalisation des fenêtres contextuelles. Esri a également évoqué deux grands projets de R&D (déjà bien avancés) visant à fournir de nouveaux services de stockage et de traitement Big Data Spatio-Temporels (disons pour simplifier "GeoAnalytics Server" sur ArcGIS Online) et des services de collecte / diffusion de données IoT et temps-réel (disons pour simplifier "GeoEvent Server" sur ArcGIS Online). A signaler enfin une évolution importante sur les contenus proposés par la plateforme ArcGIS Online. D'ici la fin de l'année, les utilisateurs d'ArcGIS Online (et des autres applications ArcGIS) disposeront du fond de carte OpenStreetMap sous la forme de tuiles vectoriels afin de pouvoir en modifier le style cartographique selon vos besoins. Certaines couches d'OSM (les bâtiments notamment) seront exposées (et actualisées en temps réel) en tant que services d'entités, vous permettant ainsi des usages SIG directement sur la dernière version d'OSM.


Les Apps Mobiles

Les apps mobiles de la plateforme ArcGIS vont continuer à évoluer selon des rythmes qui sont différents selon les applications.

Survey123

Survey123 for ArcGIS est l'application dont l'adoption est en plus forte croissance. Une version majeure 3.0 de l'application de création et de diffusion de formulaires de collecte d'ArcGIS vient de sortir juste avant la conférence. Celle-ci introduit de nombreuses nouveautés aussi bien sur l'application mobile, sur le site web et autour de Survey123 Connect. On notera par exemple la capacité d'ajouter des actions "post-soumission" via des webhooks, l'ajout de nouveaux types de questions dans le concepteur web (téléchargement de fichier par exemple), la possibilité de créer des formulaires avec des questions regroupées, tout cela dans le concepteur web. Plusieurs améliorations notable ont été faire dans la partie reporting des résultats des formulaire de Survey123 (filtrage, impression, ...). Enfin, des nouveautés intéressantes ont été intégrées à Survey123 Connect pour créer des formulaires avec du Smart Sketching sur la carte, du GeoSearch sur vos propres services de géocodage ou encore la possibilité d'imbriquer des questions à répétition dans des questions à répétition.

Dans le futur, Survey123 for ArcGIS devrait prendre en charge les GPS externes (GNSS), proposer des services de reporting personnalisés, supporter des tuiles vectorielles ou encore permettre la saisie de polylignes ou de polygones dans les questions de type "géolocalisation".

Collector for ArcGIS

Avec déjà plus de 700 000 téléchargement (uniquement sur iOS), Collector for ArcGIS est l'application mobile de la plateforme ArcGIS la plus largement adoptée par les utilisateurs. Pour cette raison, Esri continue ses efforts d'amélioration en prenant en compte les remontées de ses utilisateurs et l'année 2018 sera une année de transition pour Collector. En effet, pendant que la version classique de Collector poursuit son évolution, Esri travaille à une nouvelle version totalement redéveloppée sur le nouveau SDK ArcGIS Runtime 100.x. Cette dernière, en beta publique actuellement, est connue sous le nom de code "Aurora". Plus moderne et mieux intégrée aux nouvelles capacités des cartes web actuelles, elle ajoutera de nouvelles capacités comme le support des tuiles vectorielles, la rotation de la carte, l'utilisation d'étiquettes et de symboles avancés, la prise en charge des packages de cartes offline préplanifiés, la possibilité de personnalisation des formulaires de saisie, l'intégration d'expressions arcade, le support des du Z, ...).

Sans impact sur les utilisateurs, Collector "Aurora" remplacera la version actuelle (ou éventuellement en parallèle pour ceux qui le souhaitent)  à l'automne 2018 sur iOS puis sur Android.
Explorer for ArcGIS

Après l'évolution majeure opérée l'an dernier pour l'application mobile de consultation, Explorer for ArcGIS intègre désormais les processus de téléchargement offline afin de pouvoir exploiter les cartes web en mode déconnecté. Dans les récentes évolutions, on signalera tout d'abord les nouvelles capacités d'ajout de notes à la carte pouvant ensuite être enregistrées dans les contenus de l'utilisateur sur le portail de l'organisation. On notera également l'arrivée de l'extension Publisher pour ArcGIS Pro qui permet le partage de paquetages de cartes mobiles (mmpk) exploitables dans Explorer for ArcGIS avec une gestion des droits d'accès et des dates de validité des contenus.
 
Dans le futur, Explorer for ArcGIS prendra en charge les paquetages de carte préplanifiés sur le portail de l'organisation et des collaborations plus étroites avec ArcGIS Pro via l'extension Publisher. Explorer for ArcGIS devrait également proposer à terme un accès aux scènes 3D.
 
Les Apps Web

Modèles d'applications web

Plusieurs éléments ont été donnés par Esri sur l'évolution des modèles d'applications web d'ArcGIS (Online ou Enterprise). En particulier, on notera l'arrivée On notera aussi l'arrivée fin 2018/début 2019 de nouveaux modèles d'applications web pour la diffusion de bibliothèques de cartes filtrés sur les catégories des éléments de contenus ou encore un modèle d'application pour afficher des cartes 2D avec des insertions de scènes 3D.

Web AppBuilder

Pour Web AppBuilder, Esri va consacrer les 18 prochains mois au portage du générateur d'applications web sur l'API JavaScript 4.x. Durant cette période, Web AppBuilder va poursuivre son évolution essentiellement autour de l'amélioration des widgets existants. On signalera la sortie, il y a quelques jours, de la version 2.9 de Web AppBuilder - Developer Edition. Je vous proposerai un article sur les évolutions de cette dernière version dans les prochaines semaines.

Operations Dashboard for ArcGIS

Depuis janvier 2018, c'est une toute nouvelle application Operations Dashboard for ArcGIS que les utilisateurs peuvent configurer pour diffuser des tableaux de bord interactifs et temps-réel. Entièrement configurable via une interface web, la souplesse de mise en page des éléments et la diversité des widgets déjà disponibles ont fait de cette nouvelle génération de tableau de bord un succès immédiat.
 
 
Les évolutions attendues pour le futur sont très nombreuses. On pourra noter par exemple l'arrivée de nouvelles options de mise en page et de visualisation non-cartographique des données, plus de contrôle sur les thèmes (couleurs, styles de textes, ...) du Dashboard, plus d'options sur les actions associées aux widgets via des paramètres d'URL, un design des Dashboards "TV-ready", une meilleure expérience sur les appareils mobiles, des modèles de type "IoT Dashboard".

Insights for ArcGIS

Pour Insights for ArcGIS, c'est une version 3.0 qui devrait être disponible en septembre prochain pour ArcGIS Enterprise et ArcGIS Online. Il s'agira d'une version importante avec de nombreuses évolutions fonctionnelles comme la disponibilité d'utiliser plus d'opérateurs dans la calculatrice de champs, plus de souplesse sur le choix de couleurs sur les rendus, des capacités de prédéfinir des filtrages pour les utilisateurs, le support des Map Service et la possibilité de publier en "public" des pages et des classeurs (sur ArcGIS Online). A plus long terme, Insights for ArcGIS se verra doté de nouveaux types de fiches (Texte Riche, Courbes multivariées, ...). Esri travaille également sur l'ajout de nouveau outils d'analyse (clustering, segmentation, ...) et en particulier sur une meilleure intégration de la dimension temporelle des données. Des travaux sont également en cours sur l'ajout de nouveaux connecteurs (NoSQL, Graph Engine, ...), sur la possibilité de créer ses propres connecteurs et sur l'intégration d'Insights avec les environnement Python et R.


Excalibur

Début 2019, une nouvelle application standard permettra de travailler spécifiquement avec des services d'imagerie. Ce projet qui se nomme aujourd'hui "Excalibur" vise à proposer toute la richesse fonctionnelle des services d'imagerie d'Image Server dans un simple navigateur web pour explorer/filtrer/modifier des mosaïques rasters, exploiter leurs capacités de traitement à la volée et travailler avec des sources plus spécifiques comme l'imagerie oblique en switchant de systèmes de coordonnées "image" à des coordonnées géographiques. Cette application très complète pour les utilisateurs d'imagerie devrait faire partie, gratuitement, d'ArcGIS Enterprise (avec le rôle Image Server) 10.7.


 
ArcGIS Indoors

ArcGIS Indoors est une nouvelle solution dévoilée par Esri lors du Developper Summit au printemps 2018 et plus largement présentée lors de cette UC 2018. Il s'agit d'un ensemble d'applications et d'outils permettant d'intégrer, de gérer et de partager un certain nombre d'informations internes concernant des bâtiments situés sur un même site (campus universitaire, centre de recherche, site industriel, entreprise multi-bâtiments, cité administrative, ...).


ArcGIS Indoors permet par exemple de répondre à des enjeux de gestion de portefeuilles immobiliers, d'opérations de sécurisation, de gestion des équipements ou encore de calculs d'itinéraires Indoor/Outdoor. La solution contiendra:

• des outils d'intégration de données CAD/BIM pour ArcGIS Pro pour construire le modèles 3D Indoor et Outdoor du site.
• des applications web de consultation cartographique du site et de ses équipements ainsi que des modèles de tableaux de bord (pour les équipes FM par exemple).
• une application mobile iOS et Android pour les équipes techniques, les employés ou les visiteurs. Cette application leur permettra notamment de naviguer sur le campus, de rechercher des équipements, de retrouver leur réunion, de calculer un itinéraire et d'être guidé ou encore de signaler le dysfonctionnement ou une anomalie sur un équipement du site. 

 

 
ArcGIS Urban
 
ArcGIS Urban est une nouvelle application dévoilée par Esri à l'occasion de cette UC 2018. Cette application est destinée aux gestionnaires de territoire ayant besoin de concevoir et de planifier l'aménagement de leur territoire. L'application tire profit du double numérique 3D de votre territoire (bâtiments 3D, topographie, infrastructure de transports, zonage réglementaires, données sociaux-éco-démographiques,...) au service de la Smart City.

Concrètement, ArcGIS Urban est une application web (ArcGIS Online) qui permettra de mettre autour d'une même table: les politiques, les architectes, les aménageurs et les citoyens pour évaluer différents scénarios de projets grâce entre-autres à des indicateurs. L'application peut être étroitement liée à ArcGIs Hub pour engager le citoyen dans une processus participatif autour de la conception de vos projets urbains.

ArcGIS Hub

Disponible depuis le début de l'année 2018, ArcGIS Hub est une nouvelle solution qui permet à une organisation de transformer des aspirations politiques en actions concrètes impliquant le citoyens. Beaucoup plus interactif et collaboratif qu'un simple site web Open Data, grâce à la notion d'initiative qui est au coeur d'ArcGIS Hub, vous pouvez configurer une ou plusieurs pages web basées sur les données et les applications ouvertes de votre organisation. En offrant à chaque citoyen une identité sur le portail communautaire de votre Hub,  les initiative permettent un véritable engagement avec le citoyen pour des démarches de co-conception, de collecte contributive ou dans des engagements sur des actions concrètes. Les pages de vos initiatives permettent aussi la restitution d'informations sur l'adhésion et l'avancement de votre initiative, élément indispensable dans une relation bidirectionnelle avec les communautés de votre territoire. Vous pouvez voir des exemples d'implémentation d'initiatives ArcGIS Hub sur ce site.

ArcGIS Hub évolue très régulièrement (2 à 3 mises à jour par mois). A court termes,  les prochaines évolutions concerneront le développement de nouveaux modèles d'initiatives, la fourniture d'un SDK pour la création de ses propres initiatives et l'ajout de widgets "sociaux" (outils de discussion, forums, ...).

 
L'API Python ArcGIS

L'API Python ArcGIS est devenue une pièce importante dans le puzzle ArcGIS en permettant aux administrateurs, aux géomaticiens, aux data-scientists et aux chargés d'études d'automatiser leurs tâches autour du SIG Web.

En juin, une version 1.4.2 a été mise en ligne avec des évolutions mineures. La road-map est cependant assez ambitieuse puisque l'objectif reste évidement d'implémenter toutes les capacités de l'API Rest exposées par votre portail (ArcGIS Online ou Enterprise).

 
A l'automne, une nouvelle version devrait intégrer un widget de visualisation de scène 3D, des capacités d'enregistrement des cartes web et une fonctionnalité de mise à jour par lot des éléments du portail. En fin d'année, l'API se verra complétée de capacités autour des flux de données temps-réel, des outils de Machine Learning, de publication de services d'imagerie et de fonctions raster. Plus tard en 2019, l'API Python permettra l'exploitation des Utility Networks.
L'API JavaScript ArcGIS
 
Fondation de toutes les applications web développées par Esri pour la plateforme ArcGIS, l'API JavaScript ArcGIS est actuellement dans une phase de migration de la génération 3.x vers 4.x. Cette migration approche de son terme et les dernières versions de l'API 4.x permettent quasiment de faire la même chose (et bien plus sur un certain nombre de sujets) que la version 3.x. Pour autant, cette dernière va continuer à être maintenue pendant très longtemps.


En juin, une version 4.8 a été mise en ligne avec de nombreuses évolutions comme la prise en charge des étiquettes (via WebGL), le support de grandes volumétries pour les couches de points dans des scènes 3D, l'ajout des rendus par Heatmap, la navigation sous le sol pour les scènes 3D globales, le support du protocole PBF sur les couches d'entités pour de meilleures performances, le support des requêtes coté client sur les LayerViews, ... Cette version 4.8 progresse aussi sur les aspects Editing avec des améliorations importantes sur le widget Sketch.

Pour le futur, la road-map est bien chargée avec en fin d'année la capacité d'ajout/suppression de points sur une géométrie (API Sketch), la prise en charge des Feature Collection, l'ajout du widget de mesure 2D (le 3D est déjà dans l'API), ... En 2019, l'API se verra enrichie de la gestion de symboles avancés, la prise en charge de la dimension temporelle, les widgets Editing et le support complet des cartes web.
 

Conclusion

Bien que n'ayant pas couvert la totalité des composants ArcGIS, j'espère que ces éléments vous auront permis de mettre à jour votre vision sur l'état actuel et les perspectives d'évolution à court et moyen terme de la plateforme ArcGIS. Bien entendu, dès que l'on parle du futur et que l'on rentre un peu dans les détails, il faut toujours prendre les fonctionnalités et les dates d'implémentation avec prudence. Ne prenez donc pas de décisions impactantes à partir de ces informations qui peuvent évidement évoluer dans les mois à venir.

Nous aurons l'occasion de revenir sur tous ces sujets à l'automne lors de la conférence francophone SIG 2018.

Il y a 2 semaines avait lieu la conférence mondiale des utilisateurs Esri à San Diego. Comme promis, je vous propose une synthèse en deux épisodes pour résumer tout d'abord les grands messages stratégiques puis les annonces technologiques de cette UC 2018.

La dynamique en pleine accélération du leader mondial des SIG, que j'évoque depuis 2-3 ans, était particulièrement visible cette année.  Qu'il s'agisse des projets de R&D et de la vision exposés par Esri ou de la dynamique du nombre de participants et de partenaires, cet événement unique au monde devient de plus en plus impressionnant. Plus de 18000 utilisateurs, venus du monde entier, ont fait le déplacement pour contribuer, apprendre et partager autour des usages toujours plus innovants de l'information géographique. Plus de 1000 ateliers animés par Esri, ses partenaires et ses utilisateurs ainsi que 300 exposants ont permis aux participants de mieux comprendre les enjeux de l'intelligence géographique et son rôle dans la transformation digitale de nos organisations, de nos communautés et de notre société de manière plus générale.
 
Comme le rappelait Jack Dangermond (Président et Fondateur d'Esri), les organisations implémentent désormais en grande majorité des architectures SIG modernes basées sur les paradigmes du web (protocoles, services, cloud, distribution des composants,...) ce que l'on appelle des SIG Web. Il fait le constat que cette nouvelle approche a permis de faire tomber de nombreuses barrières organisationnelles et qu'elle a fait émerger de nouvelles formes de collaboration autour du partage de l'information géographique. Avec toujours plus de données et de capacités de traitements spatiaux disponibles sous la forme de services web diffusés et des architectures serveur toujours plus légères et plus flexibles, un nombre croissant d'utilisateurs dans les organisations utilisent des données géolocalisées dans leurs processus et leurs tâches quotidiennes.

La plateforme ArcGIS est le socle technologique qui est au centre des investissements et des développements d'Esri. L'objectif reste toujours de permettre aux organisations de mettre en oeuvre leur stratégie et leur science autour de l'information géolocalisée (The Science Of Where). Pour cela, Jack Dangermond a rappelé les trois piliers qui font de ce socle un SIG complet capable d'adresser l'essentiel des processus. La plateforme ArcGIS fournit en effet:


Il est reconnu depuis de nombreuses années que la plateforme ArcGIS adresse les besoins les plus avancés et les processus les plus complexes de l'organisation. Plus récemment, ArcGIS a évolué pour servir de nouveaux usages et une nouvelle sphère d'utilisateurs. En exposant les fonctionnalités et les contenus de la plateforme ArcGIS de manière plus simple (APIs et SDKs ArcGIS), ouverte (Géoservices Rest) et standardisée (JSON, GeoJSON, OGC), ArcGIS devient la plateforme d'intelligence géographique et cartographique de votre SI pour servir un public beaucoup plus vaste.


Ce qui est remarquable aujourd'hui c'est d'adresser ces deux grandes typologies d'usages avec une seule et même plateforme. Cette évolution est possible grâce aux capacités d'hybridation proposées par Esri. Aujourd'hui, la plupart des composants de la plateforme sont utilisable en mode "On-Promises" (dans votre infrastructure) ou "Online" (dans une infrastructure de Cloud de votre choix ou en SaaS dans l'infrastructure Esri).
 

SIG et Transformation Digitale

Une autre tendance forte décrite par Jack Dangermond lors de la plénière concerne la contribution de plus en plus évidente du SIG à la transformation digitale des organisations. En effet, l'adoption d'architectures SIG Web permet de passer de l'exécution séquentielle de processus (même fortement automatisés) à l'exécution simultanée et intégrée d'opérations pour l'ensemble de l'organisation. Moins cloisonnés, mieux synchronisés et intégrés aux autres données du SI, les données du SIG et ses capacités analytiques transforment les processus eux-mêmes, les potentiels d'analyse et les cycles de décision des organisations.

En particulier, les nouvelles capacités de traitement distribué des Big Data autorisent désormais des analyses dont le périmètre ou la fréquence étaient, il y a quelques années encore, inenvisageables. Réaliser quotidiennement une prédiction du trafic ou de l'accidentologie en fonction d'un historique de données collectées sur plusieurs milliers de jours sur son réseau routier est aujourd'hui tout à fait possible.

"GIS, Inspiring What’s Next”

Le thème de cette année, largement développé lors de la session plénière est "GIS, Inspiring What's Next". L'idée part du constat que les SIG ne servent plus uniquement à collecter et gérer la réalité d'hier et d'aujourd'hui mais aussi et surtout à préparer, anticiper et imaginer l'avenir. Déjà insufflée par Esri dans les composants de la plateforme ArcGIS depuis quelques années, l'ajout de nouvelles capacités d'analyse prédictive est un élément important de la stratégie technologique actuelle.
     
Les technologies, si puissantes et essentielles soient-elles, sont aujourd'hui facilement instanciables sans difficultés majeures et à des coûts de plus en plus maîtrisés. Esri poursuit d'ailleurs une road-map ambitieuse pour la simplification du déploiement d'ArcGIS Entreprise et de ses différents rôles serveur (collaboration entre portail, architecture de microservices, stratégie de containérisation, virtualisation, …). Non, selon le Président-Fondateur d'Esri, ce qui importe surtout désormais c'est d'être en capacité d'imaginer ce que l'on peut faire de ces nouvelles capacités technologiques lorsqu'on les combine à la masse de données accumulées pour mieux prédire et décider dans le futur. Et ça c'est la responsabilité des géomaticiens de demain.

Pour Esri, cela veut dire continuer à travailler à la fourniture d'outils d'analyses spatio/temporelles capables de traiter aussi bien vos fichiers, vos bases de données et vos entrepôts de donnée Big Data, qu'elles soient géographiques on non, qu'elles soient structurées ou non. L'enjeu pour Esri c'est également de rendre le choix des outils et leur usage le plus simple possible.

 

Jack Dangermond a également profité de cette plénière pour évoquer quelques enjeux technologiques importants pour les géomaticiens. Ces challenges sont directement liés aux nouvelles capacités offertes par le Cloud, la mobilité connectée, l'ubiquité des capteurs ou encore les promesses de l'intelligence artificielle. Parmi ces enjeux, trois évolutions structurantes doivent être prises en compte et maîtrisées par les organisations pour développer leur stratégie d'intelligence géographique. 

L'AI est un sujet qui investit tous les domaines d'application de l'informatique et donc celui du traitement automatisé des données géospatiales et la résolution de problèmes spatiaux. L'AI est le terme générique qualifiant les procédés informatiques (algorithmes et mises en oeuvre technique) permettant à  des machines de simuler des compétences ou des raisonnements humains.  Le Machine Learning est une sous-partie de l'AI dans laquelle on utilise des algorithmes et des techniques d'entrainement basés sur des données permettant à l'ordinateur de déterminer des tendances ou des modèles. Le Deep Learning est également une sous partie de l'AI qui utilise des structures de codes faiblement couplées (appelées réseaux neuronaux) pour imiter la façon dont le cerveau humain travaille pour réaliser des analyses prédictives. L'AI s'applique de plus en plus avec succès sur des données géospatiales autour de trois grandes familles d'analyse: classification, clustering et prédiction. ArcGIS dispose depuis de nombreuses années d'outils d'analyse intégrant des algorithmes de Machine Learning pour la classification et le clustering. Ces outils peuvent être complétés en coupant ArcGIS à des frameworks et des plateformes d'AI externes. L'utilisation de l'API Python d'ArcGIS est une clé essentielle dans cette intégration. Esri continue à développer de nouveaux outils de Machine Learning et de Deep Learning dédiées aux données géospatiales, en particulier dans une optique de traitements parallélisés (en Serveur avec Spark ML mais aussi dans ArcGIS Pro ).

De nombreux autres thèmes ont été abordés durant cette plénière et le reste de la semaine. 

Par exemple, le SIG 3D et la convergence SIG-BIM ont été au coeur des ateliers techniques de la conférence. La démonstration très impressionnante autour des solutions Esri-Autodesk durant la plénière et la présence d'Autodesk parmi les exposants démontre la dynamique du partenariat technologique qui s'opère depuis quelques mois entre les deux éditeurs. 

Les évolutions très importantes de ces derniers mois en termes de gestion et de traitement de Big Data (vecteur et imagerie) ont été également largement abordées durant la semaine avec une Road-Map très ambitieuse dans ces domaines. 

L'annonce de l'arrivée de nouveaux produits "solution" tels qu'ArcGIS Hub, ArcGIS Urban et ArcGIS Indoors ont également marqué les esprits des utilisateurs présents à San Diego. Cette approche vise à répondre à certains workflow spécifiques des organisations à travers des applications ArcGIS dédiés utilisant des composants existants de la plateforme.

Concernant le poste bureautique de l'expert SIG, Esri poursuit ses investissements sur ArcGIS Desktop. Confirmant l'adoption généralisée d'ArcGIS Pro, Esri a pris le temps de détailler les évolutions de la toute dernière version 2.2 sortie quelques jours avant la conférence mais aussi les évolutions à attendre pour les trimestres à venir. ArcGIS Pro évolue très vite et dépasse aujourd'hui très largement les capacités fonctionnelles et les performances des anciennes applications ArcMap, ArcScene et ArcGlobe dont une nouvelle version 10.6.1 vient de sortir.