Rechercher/remplacer par, faire des filtres, des tris, voire des macros, c'est sympa, mais souvent très long, fastidieux, et parfois frustrant. Alors jetez-vous sur OpenRefine, "Excel aux hormones" selon l'excellente expression d'Antoine Courtin.

Testé et adopté à l'occasion du datasprint des archives, OpenRefine permet de faire extrêmement vite (et très bien) des nettoyages, des harmonisations et des enrichissements de données, en masse !

Même si l'essentiel de la documentation est en anglais, l'outil est utilisable en français et manipulable assez rapidement. Point non négligeable quand on travaille en collectivité sur des réseaux informatiques très verrouillés : il suffit d'avoir téléchargé le logiciel sur une clé USB, de glisser le répertoire sur son ordinateur et d'ouvrir le fichier exécutable pour l'utiliser (même sans droit administrateur).

Pour ma part, je me suis d'abord contentée de visualiser les 3 vidéos ci-dessous (en anglais, mais elles valent le coup d'oeil, juste pour avoir une idée de l'immensité des possibles)... avant de me jeter dans le bain, de tâtonner et de chercher au fur et à mesure des besoins.

Pour l'histoire rapide, l'outil a initialement été développé en open-source, puis soutenu par Google (d'où l'existence de versions Google Refine, de 2010 à 2012) puis de nouveau entièrement ouvert.

En plus d'être un peu didactique, le tutoriel ci-dessous est surtout un pense-bête personnel mais partagé, amené à s'enrichir régulièrement, pour garder sous la main les formules plus ou moins alambiquées trouvées parfois au bout de longues recherches et d'essais plus ou moins fructueux.

Webographie succincte

• Site officiel
• Documentation officielle (la Bible des formules, en anglais)
• Thomas Padilla, Démarrer avec OpenRefine (en anglais)
• INRA, tutoriel GoogleRefine (en français)
• Mathieu Saby, Mini site tutoriel Openrefine (en français)
• Mathieu Saby, Nettoyer et préparer des données avec OpenRefine (URFIST PACA, en français) ; Nettoyer et préparer des données avec OpenRefine (BULAC, mise à jour 2019)
• Ettore Rizza, Tutoriels vidéos (en français)
• Antoine Courtin, Pense-bête OpenRefine (en français)
• Maïwenn Bourdic, Atelier OpenRefine - Forum des Archives 2019 (avec jeu de données exemple et captures d'écran pas à pas)
• Maïwenn Bourdic, Atelier OpenRefine et Wikidata (2019, journées Wikimédia Culture et numérique)
• Maïwenn Bourdic, Projet Datasprint - Permis de construire de Rennes (2016, avec nettoyage de données) (en français)
• RefinePro knowledge base, plein de formules magiques (en anglais)
• Enipedia, tutoriel OpenRefine (en anglais)
• School of data, tutoriel OpenRefine (en anglais)
• Library Carpentry, tutoriel OpenRefine (en anglais)
• Online Journalism, Convertir du XML ou JSON en tableur (en anglais)

Que savons-nous aujourd'hui des publics in situ et des publics en ligne, des usages que les uns et les autres font de l'offre proposée par les équipements culturels, et surtout des relations qu'ils entretiennent ? Cette rencontre culture numérique propose un retour réflexif sur différentes initiatives de mise en ligne de contenus, de médiation numérique et d'étude sur leur réception menées au sein de musées, services d'archives, bibliothèques ou structures de spectacle vivant. Elle aborde les objectifs de politique culturelle poursuivis à travers le numérique et les moyens mis en œuvre par les établissements culturels, notamment en termes de compétences et d'organisation. La question du renouvellement des outils et des dispositifs d'enquête à l'ère numérique est également traitée, sans cacher le caractère encore imparfait de la connaissance des publics en ligne et de leurs usages. Elle vise à offrir des éléments de réflexion et à susciter des échanges et débats sur les mutations que connaissent à l'heure actuelle les modes d'accès à la culture et les politiques de développement des publics.

Voir le programme et la suite sur le site officiel.

Retour sur ces deux journées à travers le live-tweet.

Storify des Rencontres annuelles de la section des archivistes départementaux (RASAD), 2 et 3 février 2017, à Montpellier (Archives départementales de l’Hérault) : "Les fon­da­men­taux de l’archi­vis­ti­que : un génome en évolution ?" (programme).

Les 19 et 20 novembre dernier, la BNF a organisé son premier hackathon, dans le cadre de la semaine de l'innovation publique. Des équipes de passionnés ont, l'espace de 25 heures, imaginé et développé des applications à partir des ressources numériques de l’établissement (data.bnf.fr, Gallica et le catalogue général). Retour en tweets, articles et vidéo sur cet événement.

• Site du hackathonBNF
• Retour en tweet et en image sur le hackathonBNF (voir aussi ci-dessous)
• Parmi les projets :
  • Gallicarte (lauréat)
  • Gallicalol
  • Diderobot
• Articles du blog Gallica,
  • “Hackathon BnF, édition 2016 : l'heure du bilan !”
  • “En direct du hackathon de la BNF”
• Archimag, “Que propose le projet Gallicarte, vainqueur du premier hackaton de la BNF ?”
• Actualitté, “Gallicalol, générateur de mèmes à tendances patrimoniales”
• Actualitté, “La bibliothèque Gallica hackée pour la bonne cause : “Les idées ont fusé"
• Article dans Archivistes! (à venir)
• Vidéo sur 56Kast