Le Rize+ : informations internes

http://82.165.120.81/Help/Aveniov11/index.html

La procédure générale est décrite dans le Manuel Avenio à la page Généralités/les editions.

Ci-dessous les détails des opérations  en copies d'écran.

La procédure générale est décrite dans le Manuel Avenio à la page Annexes/Le mode expert.

Formule pour remplacer les retours chariot dans un champ.

Il faut le faire en mode Expert sur une sélection de fiches, depuis la table souhaitée.
Par exemple, dans le champ analyse des articles, on remplace chaque retour chariot par espace, tiret, espace.

[Articles]Analyse:=remplacer chaine([Articles]Analyse;caractere(retour chariot);" - ")

Pour que le document soit plus propre, cliquer sur "plus de paramètres" :

• Cocher l'option "imprimer les arrières plans" > le logo du Rize apparaît.
• Décocher l'option "Imprimer les en-têtes et pieds de page" > les marges du document sont propres.

D'une façon générale, les données produites par les administrations évoluent pour faciliter leur utilisation dans le contexte du web, mais aussi pour permettre de mutualiser les données entre différents services, différentes branches de la fonction publique.

A titre d'exemples, les données fiscales de la DGFip, les données de l'Insee et celles de l'Ign sont en phase d'harmonisation et viennent alimenter les analyses relatives aux territoires. L'harmonisation se déploie à plusieurs échelles : d'une part, en lien avec les institutions européennes, d'autre part, en lien avec les collectivités. Le Grand Lyon intègre par exemple certaines de ces données harmonisées (données économiques, données fiscales, ...), mais contribue aussi à les alimenter (données d'adresses, données cadastrales, ...). Les adresses et les parcelles cadastrales sont un terrain d'expérimentation et d'échanges importants entre les différentes administrations.

Autre exemple : la Note d’information DGP/SIAF/2012/015 en date du 12 novembre 2012, signée du directeur chargé des archives de France, détaille les évolutions récentes du Thesaurus pour la description et l'indexation des archives locales, mordernes et contemporaines. La mise à jour de ce Thesaurus s'inscrit dans un projet d'harmonisation des données culturelles au sein du ministère de la Culture. Ce projet "HADOC", est piloté par la Direction générale des patrimoines (DGPat).

En voici l'objectif annoncé :

"L’objectif est de créer un référentiel terminologique unifié permettant d’offrir aux usagers un accès unique et cohérent aux ressources terminologiques produites par le MCC et d’en démultiplier les usages."

En parallèle, La Bnf projette de mutualiser ses metadonnées avec Abes (Sudoc/MESRI), et avec d'autres organisations internationales, dans un Fichier national d'entités (FNE). Un prototype a aussi été élaboré par les institutions nationales d'archives (Archives Nationales, France archives, SIAF) pour expérimenter la potentielle mutualisation de métadonnées avec la BnF, via le web.

L'ensemble du processus d'harmonisation des données s'inscrit dans la stratégie d'Open Data de l'État, pilotée via sa mission Etalab, qui vient d'avoir 10 ans.

Un changement de modèle dans la description documentaire et administrative

L'évolution globale dans les différentes administrations et dans les établissements publics est le passage vers la description d'objets divers (ouvrages, oeuvres, documents d'archives, objets réels, entreprises réelles) grâce à des modèles "entités-relations", plus souples que ceux qui existaient auparavant, plus compatibles avec la recherche sur la web et plus interopérables.

Les organismes publics sont aussi de plus en plus incités à développer des Api (des "interface de programmation d’application" soit des plateformes permettant des échanges de données entre sites web). Ainsi, chacun peut récupérer les données de l'autre.

Adapter le modèle de données du Rize+ : vers une approche "entité-relations"

Pour faciliter la recherche d'information, Le Rize+ devrait, lui aussi, évoluer vers un modèle "entités-relations" : des listes d'adresses, de personnes, d'organismes, de lieux, communes à l'ensemble du site internet et permettant d'indexer l'ensemble des documents qui y figurent. Cette approche devrait permettre de mettre en place un moteur de recherche transversal à l'ensemble du site.

En cela, il se rapprochera du logiciel Avenio, utilisé par le pôle archives du Rize, qui fonctionne déjà selon un modèle de ce type. Il est donc souhaitable que les listes d'autorité et les index du Rize+ s'alignent ceux utilisés dans Avenio.

Prendre en compte les évolutions des normes archivistiques

Les listes d'autorité et index d'Avenio ont besoin d'un nettoyage, ainsi que de la rédaction d'un mode d'emploi. En effet, c'est leur qualité qui permet d'améliorer la recherche sur Avenio, et donc l'accès à l'information archivistique.

Pour éviter de faire le travail plusieurs fois, il est important de s'appuyer sur les normes archivistiques nationales (ISAD (G), ISAAR (CPF), ISDF, ISDIAH), les schémas d'informatisation de la description (DTD EAD, EAC-CPF), les circulaires, et nomenclatures (Géonomenclature historique des lieux habités, décembre 2003, Thésaurus pour la description et l'indexation des archives locales) déjà existants.

Mais, il est aussi stratégique de prendre en compte les évolutions en cours de ces normes (Standards du Web de données, norme Rico-O), pour éviter que ce travail de nettoyage des index ne devienne rapidement obsolète.

Les évolutions à prévoir pour les bibliothèques : la transition bibliographique

Par ailleurs, il y a de fortes chances que les descriptions bibliographiques des médiathèques municipales évoluent vers des modèles "entités-relation" puisque c'est la politique menée à l'échelle nationale.

A titre d'exemple, l'Abes et la Bnf projettent ensemble une plateforme commune dont l'objet rejoint la plupart des activités documentaires du Rize :

"Le Fichier national d’entités (FNE), co-réalisé par la BnF et l’Abes, est un projet de plate-forme centralisée de production mutualisée des données relatives à plusieurs des entités nécessaires à la description d’objets documentaires des bibliothèques, centres de documentation et potentiellement archives et institutions culturelles françaises."

Autre exemple : le CNFPT commence à sensibiliser les collectivités aux enjeux de la transition bibliographique, via des journées professionnelles dédiées.

Vers une meilleure transversalité des métadonnées documentaires au sein du Rize

Pour le fonctionnement du Rize, l'enjeu global est de simplifier l'accès aux informations produites et conservées par le Rize. Mais, on le voit, s'y ajoute un deuxième enjeu : préparer les transitions documentaires qui s'annoncent via les initiatives nationales. Il est donc stratégique de fabriquer au fil du temps des index communs entre les pôles du Rize qui le peuvent, avec ces perspectives en arrière-plan.

Les archives étant soumises à une réglementation et à des contraintes plus strictes que le pôle recherche ou le pôle valorisation, c'est de leurs contraintes qu'il convient de partir pour harmoniser le reste.

Les bibliothèques sont soumises à d'autres normes documentaires, et suivent leur propre logique, mais il y a de forte chances que leurs modèles de données se rapprochent au fil du temps de ceux utilisés pour les archives. Il est donc intéressant d'intégrer dans la réflexion (sans forcément s'y soumettre) les normes documentaires en cours d'élaboration au sein du groupe de travail national sur la "transition bibliographique". Cette approche permet d'anticiper les futures contraintes qui s'appliqueront vraisemblablement aux bibliothèques, et de les prendre en compte, au moins en partie.

On peut ainsi espérer que les index retenus pour les pôles archives, valorisation et recherche seront assez proches de ceux qui s'imposeront dans les années qui viennent au sein des bibliothèques municipales.

Les différentes activités documentaires du Rize ont en commun de devoir décrire des objets (document de médiathèque, fond ou pièce d'archives, oeuvre, bâtiment, entité géographique) à travers un certain de nombre de catégories, dont la forme est harmonisée.

Certaines d'entre-elles sont communes, du moins au niveau conceptuel :

• Type d'objet
• Personne physique (agent individuel)
• Groupe ou personne morale ou organisme (agent collectif)
• Lieu
• Dates

Chacune de ces catégories demande parfois d'y ajouter des précisions. Exemples :

• Personne physique : profession, poste, activité, etc.
• Groupe ou personne morale ou organisme : statut juridique, activité, etc.
• Lieu : type de lieu (adresse, rue, etc.)
• Dates : type de date (date unique, intervalle entre dates extrêmes, périodes historiquesetc.), source de la date, certitude de la date, etc.

Par ailleurs, l'harmonisation suppose de trouver une forme commune (typographie, ordre des termes), qui facilite les recherches et évite les doublons.

Références externes

On peut observer plusieurs références extérieures qui peuvent alimenter la réflexion ; celles-ci dépendent des métiers et des organisations qui les produisent.

Bibliothèques

Dans les bibliothèques, il est propable que le Système de description actuel Rameau (assez complexe), évolue vers un système adapté du modèle IFLA LRM.

"Le modèle IFLA LRM (Library Reference Model / Modèle de référence pour les bibliothèques) a été publié par l’Ifla en 2017. Ce modèle conceptuel, offrant une représentation schématique de l’activité des bibliothèques, est orienté vers les besoins des utilisateurs. Il est conçu pour être facilement transposable dans les technologies du web.

À terme, les notices bibliographiques seront amenées à être remplacées par un réseau d’entités et de relations entre ces entités, qui seront plus visibles sur le web. Une voie est ouverte vers une interopérabilité accrue des données des catalogues de bibliothèques."

 Archives

Dans les services d'archives, il est probable que les pratiques intègrent au fil du temps le modèle conceptuel RIC-CM, à travers les différentes versions de la norme RIC-O.

Ce modèle permet, par exemple de décrire :

• les relations entre une personne physique et une organisation

• un lieu 

On le voit, cette modélisation du lieu permet de faire le lien entre la description dans un logiciel d'archives d'un lieu (ici, une commune) et sa définition pour des systèmes d'information géographiques (Ign, Géonames du W3C sur le web) ou des normes statistiques (Insee). Elle permet donc de faire concrètement le lien avec des données géographiques créés ou commandées par le Rize à travers ses inventaires géolocalisés (Carnet des mémoires, inventaire des noms de rue, inventaire professionnel du bâti).

A l'occasion d'un Hackathon, les archives nationales ont communiqué leurs référentiels en EAD.

Ils ont été mis en ligne sur : https://www.data.gouv.fr/fr/datasets/les-donnees-du-hackathon-des-archives-nationales/Un des jeux de données contient les référentiels du système d'informations archivistiques des Archives Nationales au format EAD.xml, ainsi que le référentiel général au format EAD.dtd :

https://www.data.gouv.fr/fr/datasets/r/ebb7e742-931c-40da-9c62-f8630e89f805Au cours du Hackathon, certaines listes d'autorité ont été converties au format RDF/XML, pour avancer vers le projet de participation des archives nationales à l'échange de métadonnées sur le web.

Afin de travailler sur son propre référentiel d'indexation, le Rize a converti le fichier ref.dtd en schéma .XML :

http://lerizeplus.villeurbanne.fr/arkotheque/client/am_lerize/_depot_arko/articles/3031/schema-xml-du-referentiel-des-archives-nationales-en-xsd_doc.xsd

France archives a mis en lien des outils qui font le lien entre l'indexation du logiciel des archives nationales et les règles d'indexation du web.

Le guide d'indexation archivistique pour le web sert de base de référence pour le travail en cours au Rize.

Seuls quelques adaptations pour la situation particulière du Rize vont être adoptées.

Le mode de travail adopté par le groupe de travail dédié au niveau national est assez proche de celui adopté au Rize. Il s'agit d'aligner au maximum les modes d'indexations avec des référentiels nationaux ou internationaux. Le site France archives mentionne les référentiels utilisés pour réaliser le guide d'indexation de référence.

Depuis le début des années 2000, dans le sillage de l’informatisation du Catalogue général des manuscrits des bibliothèques publiques de France (CGM) et de la conversion rétrospective du Répertoire des auteurs littéraires du XX^ème siècle (Palme), l’utilisation de la DTD XML/EAD (Encoded Archival Description, version 2002) s’est généralisée dans les bibliothèques françaises aux fins d’informatiser et d’exposer sur le web leurs inventaires d’archives et catalogues de manuscrits.

Aux côtés des formats Marc qui sont au centre du programme de Transition bibliographique, l’EAD s’est imposé comme un standard de signalement documentaire et patrimonial incontournable avec la rédaction (à partir de 2008) et la mise en ligne (en 2013) d’un Guide national des bonnes pratiques EAD en bibliothèque.

Voici une synthèse des balises utilisées, par élément et par attribut.

Au delà des enjeux purement documentaires, la bonne gestion de l'indexation des données va favoriser leur partage raisonné sur différents supports, dédiés à des publics ou à des situations d'usages différentes.

On peut par exemple prendre le cas de deux inventaires déjà réalisés :

• l'inventaire des noms de voies de Villeurbanne ;
• l'inventaire professionnel du bâti villeurbannais.

Le premier est déjà en ligne sur le Rize+, le second le sera vraisemblablement en 2022.

Ce type de mise en ligne est adapté à un usage grand-public, ou, plus précisément, aux curieux et amateurs de patrimoines qui souhaitent se renseigner sur des cas précis (leur rue, tel ou tel immeuble, etc.)

Cependant, il existe un autre public, étudiant, chercheur ou professionnel (organismes publics et privés autour de l'urbanisme et de l'architecture, notamment) qui a besoin de pouvoir télécharger ces jeux de données en entier pour effectuer des cartographies, des traitements statistiques, des croisements d'informations divserses. Il est envisageable et semble relativement simple de mettre ces jeux de données à disposition d'un public plus spécialisé sur https://data.grandlyon.com.

Dans cette perspective, l'inventaire des noms de voies de Villeurbanne peut être croisé avec les tronçons de la trame viaire fournie sur le même site par le Grand Lyon. Le Rize peut alors proposer au Grand Lyon une réutilisation des tronçons de la trame viaire, enrichie avec les données issues de l'inventaire des voies du Rize+. Ainsi, l'ensemble des professionnels peuvent avoir accès à l'évolution des noms de voies de Villeurbanne au fil du temps, pour des recherches impliquant une analyse historique du territoire.

De la même manière, l'inventaire professionel du bâti villeurbannais peut être croisé avec la couche de parcelles cadastrales fournies par le Grand Lyon. Il peut être soumis au Grand Lyon en tant que réutilisation et enrichissement de leurs données initiales. Alors, les étudiants, chercheurs, professionnels pourrons s'en saisir pour leurs propres usages, et, on peut l'espérer, eux-même soumettre sur le même site les réutilisations qu'ils font de ces données.

D'un point de vue pratique, cette approche permet aussi au Rize de renvoyer directement au site data.grandlyon.com pour ce type de besoins. Un lien vers le site peut même être envisagé sur le Rize+. Cette approche permet d'éviter les mails intempestifs de demandes émanant de différents interlocuteurs sur différents sujets : gain de temps, et d'éfficacité, meilleur disposinibilité de la donnée, visibilité du Rize pour les professionnels.

Ce type de données peut également être mobilisée par Villeurbanne pour des Hackathons, par exemple, pour des évènements dédiés au numérique.

On pourrait aussi envisager un usage pour l'éducation nationale pour la cartographie via l'application Magrit, logiciel libre et gratuit spécialement élaboré à cet effet.

Cependant, la condition de mise à disposition de ces données dans ce type de contexte est leur indexation correcte, avec une description pertinente qui les accompagne. Pour favoriser les croisements d'informations, la présence d'index et de champs harmonisés, est nécessaire.

(mise à jour mai 2021)

L'indexation devient un enjeu documentaire important du fait du développement du web sémantique. Très concrètement il s'agit de la façon dont les moteurs de recherche peuvent trouver de l'information. Les institutions internationales et nationales en charge des normes documentaires pour le web, les archives, les bibliothèques et le patrimoine planchent sur la question et ont créé de nouvelles normes.

L'idée générale est que les métadonnées des archives et des bibliothèques (descriptions, index, catalogues) soient compatibles avec leur mise en ligne sur le web.

En France, la Bnf et les Archives Nationales commencent à sensibiliser les collectivités sur ces questions. Le ministère de la Culture essaie aussi d'harmoniser l'ensemble de ses inventaires (patrimoine, musées, bibliothèques, archives).

On peut donc s'attendre à ce que des normes ou circulaires liées à ces questions soient envoyées par l’État aux collectivités dans les années qui viennent.

Tout le monde semble d'accord sur quelques points :

• Il faut raisonner par type d'entités et en faire des listes cohérentes, avec des formes et typographies normalisées :
• Personnes physiques
• Groupes ou personnes morales ou organismes
• Lieux (normalisation en lien avec descriptifs Insee, Ign et W3C)
• Dates
• Périodes historiques
• Autres (le détail varie selon les institutions)
• Ensuite on utilise ces index pour décrire des archives, des fonds de bibliothèques ou des objets physiques (par exemple des bâtiments, du mobilier, etc.). Cette démarche permet de mettre en lien des catalogues et inventaires hétérogènes.
• Elle permet aussi de retrouver l'information plus facilement, en interne et sur le web.

Cette question recoupe celle de la mise en ligne des informations sur le Rize+, et d'une démarche plus globale qui permettrait d'y retrouver plus facilement une information, via un moteur de recherche transversal.

Par conséquent, les étapes de travail sont les suivantes :

Indexation

Une recherche de qualité à partir d'index sur le Rize+ suppose :

• une indexation de qualité sur Avenio ;
• l'export de ces index sur le Rize+, selon la procédure prévue à la création du site ;
• la possibilité technique de mutualiser les index sur le site du  Rize+ (prévu suite à la migration d'Arkothèque vers la V7) ;
• la mise en place de tutoriels pour les utilisateurs à l'image de ce qu'ont fait les Archives du Rhône et de la Métropole de Lyon

Les vidéos mises en lignes par cette institution montrent l'enjeu pour l'usager de l'indexation sur un site internet d'archives.

Navigation

Concernant la recherche d'informations, une deuxième problématique est celle du nettoyage et de la mise à jour de l'inventaire des archives et de sa consultation en ligne. Cela suppose :

• le nettoyage de l'inventaire actuel des archives sous Avenio (à noter qu'une proposition de ce type sur Excel a déjà été fait par Nolwenn et envoyé à Emanuela il y a quelques mois) ;
• leur export sur le Rize+ ;
• la refonte complète du .css de cette page sur le Rize + (qui n'est pas accessible sur un téléphone) dans le cadre de la migration d'Arkothèque vers la V7 ;

Là encore, les vidéos des Archives du Rhône et de la Métropole de Lyon montrent comment est censé fonctionner un inventaire en ligne.

(mise à jour 21 mai 2021)

Pour chaque entrée de l'inventaire, plusieurs photographies ont été réalisées par les enquêteurs. Celle-ci ont été redressées par lot par le prestataire pour se rapprocher des codes des images de photographie architecturale.

A chaque fois, une "image significative" a été retenue. Les autres photographies visent à documenter le ou les édifices selon plusieurs angles, ou des détails importants.

Volume de données et stockage

Description

• 82469 images dont 7986 "images significatives"
• Dimension d'1 image : 3648px*5472px (vertical) ou 5472*3648 (horizontal)
• Poids d'1 image : entre 10 et 20 Mo par image selon les cas
• Volume total : plus de 800 Go (à préciser)

Enjeux techniques initiaux

• Gestion archivistique des images originales
• Mode de conservation actuel : sur disque dur indexé à la cote 373W et conservé dans un magasin d'archives. Conservation non pérenne.
• Nécessité de stocker ce données sur un serveur, avec back-up
• Pas d'indexation des images à ce jour. Elles sont simplement reliées à une entrée dans la base de données de l'inventaire.
• > A faire, par lots, dans la table "Illustrations" de la base de données ?
• > tagger les images dans les données EXIF/XMP de l'image (logiciel ExiftoolGUI ou JeExifToolGUI) ?
• Exploitation sur le web des "images significatives"
• Trois usages repérés : WebSig de la ville, mise en ligne de l'inventaire sur le Rize+, utilisation pour envoi sur les réseau sociaux du Rize (Instagram, Facebook; la référence prise est Instagram)
• Dimensions des images web à définir
• Process pour extraction des "images significatives" et redimensionnement pour le web à définir
• Définir un serveur pour stockage des "images significatives web"

process de traitement

Process de stockage des images originales

• Choix et mise en place d'un espace sur serveur dédié
• Transfert des images du disque dur sur le serveur
• Fourniture du chemin du dossier sur le serveur aux personnes en charge d'exploiter les images pour le web

Process d'extraction des "images significatives"

• Qgis > Table "sysLinks.xls"
• Jointure avec la table "Illustration.xls"
• Import des colonnes SENS (valeurs : H pour horizontal et V pour vertical) et FNU (valeur : nom_du_fichier_image.JPG).
• Préfixe de jointure : ILLU_
• Excell > Table "sysLinks_jointure.xls"
• Créer colonne CHEMIN et y coller le chemin du dossier de stockage des images originales
• CONCATENER colonnes CHEMIN et ILLU_FNU > colonne CHEMINFICH
• Filtre "images significatives" : colonne MARQ (valeur : 1) ou TLIEN (valeur "images significatives)
• Copier et coller l'ensemble des colonnes dans nouveau fichier : "sysLinks_joint_img_sign.xls"
• Excell > Table "sysLinks_joint_img_sign.xls"
• Filtre pour sens d'images : colonne SENS (valeurs : "h" pour horizontal et "v" pour vertical)
• Copier l'ensemble des lignes de CHEMINFICH pour SENS=H
• Coller dans fichier IMG_SIGNIFICATIV_H.txt
• Copier l'ensemble des lignes de CHEMINFICH pour SENS=V
• Coller dans fichier IMG_SIGNIFICATIV_V.txt
• Commande DOS pour copier les images significatives dans deux dossiers (chemins des dossiers à modifier le cas échéant)
• FOR /F "delims=" %t IN (C:\Users\abo\Documents\test\IMG_SIGNIFICATIV_H.txt) DO copy "%t" "C:\Users\abo\Documents\test1H"
• FOR /F "delims=" %t IN (C:\Users\abo\Documents\test\IMG_SIGNIFICATIV_V.txt) DO copy "%t" "C:\Users\abo\Documents\test1V"

Dimensions actuelles d'images en ligne utilisées par le Rize

Déterminer trois dimensions d'images utilisables sur un grand nombre de supports

Tester différents modes de redimensionnement et de compression

Comparaison Fotosizer/script Photoshop : rapport qualité/poids des images

Conclusion

Pour le redimensionnement de V1 à V2, Fotosizer est performant. L'ajout d'un filtre "lumière" permet d'améliorer l'aspect de l'image par temps gris. Par contre, un redimensionnement direct depuis l'image originale vers la V3 n'est pas concluant : de nombreux artefacts, manque de précision de l'image.

Pour le redimensionnement de V1 à V2, le script Photoshop n'est pas le plus performant. Par contre, l'approche par redimensionnements successifs, avec un filtre "accentuation" amène une meilleur qualité d'image pour la V3 :

• on ne prend pas comme source l'image originale (V1), mais l'image dégradée V2;
• un filtre "accentuation" est appliqué sur l'image avant et après le redimensionnement (renforcement de la précision de l'image)
• l'algorithme de redimensionnement choisi est "bicubique net" (adapté à la réduction d'images).

Par ailleurs, Photoshop permet l'enregistrement en "jpeg progressif" qui donne un temps de chargement inférieur sur une page web.

On pourrait donc effectuer un traitement en deux phases :

• redimensionnement de V1 à V2 avec Fotosizer (un filtre "lumière" pour les photographies prises à certaines périodes de l'année, quand le temps est gris; compression 75%);
• redimensionnement de V2 à V3 avec Photoshop (filtre "accentuation", redimensionnement en bicubique net, enregistrement en .jpeg progressif, qualité 8).

Cette démarche offrire le meilleur rapport qualité / poids de l'image pour l'usage en masse sur le Websig et le Rize+. Les images ci-dessous montrent le rendu final.

Estimer les espaces de stockage nécessaires pour les données redimensionnées

A télécharger

Dossiers et scripts pour redimensionner les images originale (V1) sur Fotosizer (V2) et Photoshop (V3) au format .zip

Le détail des différents calculs de cette page au format .xls