L'exploration de données révèle des événements historiques dans les archives gouvernementales

L'étude de l'histoire politique est en pleine révolution. La force motrice derrière ce changement est la disponibilité des dossiers électroniques de l'activité gouvernementale et la capacité de traiter ces données d'une manière qui n'a jamais été possible auparavant.

Les historiens ont un accès immédiat aux reportages contemporains sur les événements mondiaux importants. Mais ces rapports doivent être calibrés en les comparant aux archives gouvernementales de l'époque, qui peuvent différer de manière importante et inconnue. Mais ces archives ne sont généralement rendues publiques que quelques années plus tard. Le grand nombre de documents gouvernementaux rend ce processus difficile car il est trop facile pour les chercheurs de négliger quelque chose d'important.

Ainsi, un moyen automatisé de rechercher dans ces documents gouvernementaux des événements importants serait extrêmement utile.

L'exploration de données révèle le pic des communications gouvernementales lors de la chute de Saigon (en haut) mais peu significatif lié à la Finlande (en bas).

Aujourd'hui, Yuanjun Gao de l'Université de Columbia à New York et quelques amis disent avoir développé un ensemble d'outils statistiques capables de faire ce travail. Ils ont testé la technique sur des enregistrements électroniques du gouvernement américain publiés par les Archives nationales et ont comparé les résultats avec des enregistrements d'actualités contemporains.

Le travail est rendu possible par le fait que le Département d'État américain stocke électroniquement les communications classifiées depuis 1973. De nombreux documents datant de 1973 à 1977 sont désormais accessibles au public et consistent en 1,4 million de câbles déclassifiés et les métadonnées associées à 0,4 million de documents. remis par valise diplomatique.

Ces enregistrements électroniques sont tous associés à des balises liées à leur sujet. Ainsi, les communications liées au Sud-Vietnam sont étiquetées VS, celles liées à l'Assemblée générale des Nations Unies étiquetées UNGA, à la Finlande étiquetées FI, etc.

Cela permet aux chercheurs de suivre les communications liées à des sujets spécifiques sans connaître les détails des messages eux-mêmes.

Le traçage du nombre de messages au fil du temps révèle des tendances intéressantes. Par exemple, il révèle une augmentation des communications relatives au Sud-Vietnam en avril 1975 lors de la chute de Saigon.

Les communications liées à l'assemblée générale de l'ONU se multiplient à intervalles réguliers correspondant aux dates des assemblées qui ont lieu chaque année. Ce schéma comprend un pic supplémentaire en avril-mai 1974 qui correspond à une session spéciale de l'ONU convoquée par l'Algérie pour discuter de ses demandes de soutien à un nouvel ordre économique international.

En revanche, les étiquettes associées à la Finlande entre 1973 et 1977 ne montrent aucune pointe ou motif particulier, reflétant la stabilité de la nation à cette époque.

Les pics majeurs sont relativement faciles à voir visuellement, mais Gao et co ont développé des outils pour les repérer automatiquement et classer leur importance en les comparant au niveau d'activité de fond à l'époque.

Cela permet à l'équipe de produire un classement des 30 événements les plus significatifs de cette période.

Tous ces pics ne correspondent pas à des événements mondiaux importants. Par exemple, les deux pics les plus importants concernent des problèmes administratifs tels que le transport et les modifications apportées au système d'enregistrement des visas.

Mais le classement trouve un large éventail d'autres événements importants, tels que la priorisation des droits de l'homme par l'administration Carter, le président égyptien, la visite surprise d'Anouar Sadate en Israël en 1977, la crise des Boat People d'Asie du Sud-Est de 1975-76, le Yom de 1973 La guerre du Kippour et le retrait du Portugal d'Angola en 1975-76, etc.

C'est un travail intéressant qui devrait changer la façon dont les historiens et les spécialistes des sciences sociales font leur travail. Et ce n'est que le début. Ce type de méthodes automatisées peut également montrer comment les humains ont utilisé le processus de marquage à l'époque, à quelle fréquence des erreurs ont été commises et si certains types de messages ont pu disparaître.

Et à mesure que des enregistrements électroniques plus détaillés seront publiés, les chercheurs pourront développer des moyens plus avancés de les exploiter. L'histoire politique ne sera plus jamais la même.

Réf : arxiv.org/abs/1712.07319 : Événements miniers avec documents diplomatiques déclassifiés

cacher