Décès en France depuis 1970
Lors des ma veille régulière sur les données disponibles en Open Data, je suis tombé sur la récente publication de l'INSEE sur Data.Gouv.fr des décès depuis 1970.
25 Millions de lignes... Autant vous dire que pour quelqu'un comme moi qui adore tâter des données pour les faire parler, c'était noël avant l'heure (pour rester correct 😋 )
J'ai donc commencé à traiter ce beau lot de données. J'ai structuré tout ce petit monde dans une base de données pour rendre ces informations exploitables. Je vous passe tous les détails, mais vu la quantité, j'ai revu ma copie au moins 2 fois pour la rendre vraiment malléable.
A la base l'Insee fournie les informations basiques comme : Nom, prénoms, Date de naissance et de décès, code Insee de la commune de naissance et de décès. et c'est tout.
C'est là que le challenge commence pour moi afin tenter d'en faire quelque chose de parlant. A ce moment là, je ne pensais pas encore à en faire ce que j'en ai fait. Je pensais juste faire une base pour aider les gens qui essayent de faire leur généalogie et les aider à trouver des défunts facilement.
J'ai donc (entre autres choses) calculé l'age de chaque décès, le nombre de jours d'existence, la distance entre la commune de naissance et de décès, j'ai du corriger quelques dates (parce que dans les fichiers de l'INSEE, des gens sont décédés le 30 février ou le 31 juin quand même 😁). J'ai également corrigé les codes Insee des communes qui ont changés (des villes comme Créteil (94) par exemple avaient un code INSEE en 75 avant). Bref j'ai corrigé le plus de choses possible (Il y avait aussi quelques Highlanders à 340 ans bien tassés 🤣).
Une fois que j'avais une base de données propre, j'ai commencé à faire des calculs, et un calcul en entraînant un autre, je me suis mis à tout calculer à tous les niveaux et dans tous les sens (j'ai même un calcul qui a pris 1 jour et 20h.... Bon, celui-ci, finalement, je l'ai mis de côté... J'ai été un peu trop loin 😎).
En résumé, j'ai calculé les moyennes d'age par ville, nom de famille, prénom, département et au niveau national. De même, j'ai calculé les ages médians (le médian est l'âge qui représente la moitié).
Tous ces calculs, je les ai fait par an et par élément, j'ai également calculé pour tous ces cas, les moyennes et les médians sur 1 an, 5 ans et 10 ans afin d'avoir une vision de l'évolution à court et moyen terme (vous retrouverez ces infos dans quasiment toutes les pages).
J'ai fait un tas d'autres calculs et traitements mais je pense que vous avez compris que j'ai été très (trop?) loin dans mes traitements pour être le plus complet et détaillé possible.
Calculateur d'espérance de vie personnalisé
Une fois que j'avais toutes ces données, m'est venue l'idée folle d'utiliser toutes ces informations pour proposer de calculer l'espérance de vie pour tout un chacun, j'ai toutes les infos nécessaires dans la base pour le faire, alors pourquoi pas ? Et bien, je l'ai fait, c'est multi-critère, vous pouvez saisir Commue et/ou Nom de famille et/ou prénom (Je préconise néanmoins de saisir au moins la Commune et le nom de famille, dans la majorité des cas le prénom n'influera pas le calcul). Attention, comme je l'ai écrit sur le site, la vie est plus complexe qu'un calcul mathématique, je ne peux pas vous garantir que le résultat se produira. Cela reste néanmoins une indication réaliste si aucun incident de la vie vient entraver votre parcours. En tout cas, mon calcul est plus fiable qu'un médium 😎
Conclusion
Voilà pour l'histoire du début à la fin. Au final, vous retrouverez sur le site, tout un tas de statistiques par année, commune, nom de famille, prénom etc... Des graphiques, des cartes de France ET mon calculateur d'espérance de vie individuel ! Mais aussi et surtout les informations sur les 25 millions de décès.
Bref, ce site dédié aux décès et à l'espérance de vie m'a demandé "un peu" de travail, je suis assez satisfait du résultat. Quand j'ai commencé, je ne pensais pas que cela aboutirait à tout cela.
Ce n'est pas simple de vous expliquer tout ce qu'il y a à voir et tout ce que j'ai préparé (il doit y avoir 30 Millions de pages...) sans devenir barbant alors j'espère avoir pu faire simple et compréhensible pour vous donner envie d'aller voir de plus près.
J'ai découvert quelque informations intéressants à force d'avoir le nez dedans, je vous partagerai mes constats et découvertes dans des posts à venir sur ce blog.
A suivre ?
J'ai un tas d'idées pour exploiter au mieux cette donnée comme la croiser avec d'autres données que j'ai déjà (impôts, chômage etc...) et d'autres que je n'ai pas encore traité. Je pense qu'il y a un tas de choses que l'on peut analyser. Si vous avez des idées (et si possible des sources de données) n'hésitez pas à mes les suggérer en commentaire de ce post ou via les MP de ma page Facebook.
En attendant, n'hésitez pas à voir le résultat et surtout pensez à partager vos résultats d'espérance de vie avec vos amis !
https://deces.politologue.com/
Nota : Petits détails à connaître avant de me signaler des "problèmes".
- Les années 1970 et 1971 sont très peu fournies, je les ai tout de même traité, mais les données sont fournies comme ça et je ne peux rien y faire. C'est la raison pour laquelle les graphiques dans la majorité des pages commencent à 1972.
- Les noms de famille sont bien balisés, en revanche les prénoms sont tous séparés par des espace, ce qui fait que des prénoms composés avec un espace au lieu d'un tiret est décomposé en 2 prénoms. Par exemple : "Jean Pierre", deviendra "Jean" et "Pierre" (2 prénoms), mais s'il est était écrit "Jean-Pierre", il sera bien identifié comme "Jean-Pierre". Pour calculer une espérance avec un prénom composé, faites le test avec l'un des 2 prénoms dont il est composé si sa version avec un "-" n'est pas disponible.
- L'INSEE semble ajouter régulièrement les nouvelles données chaque trimestre et je mettrai à jour dès que de nouvelle données seront disponible, mon robot est prêt !
- Si vous cherchez un décès d'une femme (votre grand mère par exemple) il faut chercher avec le nom de jeune fille, je n'ai pas l'info sur le nom de mariée