Processing des données Covid

Récupération des données open data sur data.gouv
Vérification de leur validité
Si les données sont nouvelles, mise en route du processing
Processing de plusieurs KPIs (liste dans le fichier config.toml). Pour certains, des traitements spécifiques sont appliqués (ex: moyenne glissante)
Publication des données de sorties au format json dans le dossier dist.

Exécution des scripts

Processing des KPIs :

python main.py

Génération de graphiques :

python plot_kpi.py

Tweet (nécessité d'avoir les secrets api_key, api_secret_key, token, secret_token de son compte Twitter) :

python tweet.py

CircleCI exécute toutes les heures de 17h à 21h le script principal.

Ajouter un item dans le fichier config.toml
Ajouter le fichier source dans le dictionnaire urls du fichier download_and_check_files.py avec le nom du KPI et les colonnes concernées.
Configurer le bon process dans le fichier main.py.

récupération de données stocks
calcul de moyennes glissantes
spécificité pour certains KPIs (taux occupation, facteur reproduction, décès total)

Name		Name	Last commit message	Last commit date
Latest commit History 1,028 Commits
.circleci		.circleci
dist		dist
files_new		files_new
files_previous		files_previous
kpis		kpis
plots		plots
utils		utils
.DS_Store		.DS_Store
.gitignore		.gitignore
LICENSE.md		LICENSE.md
Marianne-Regular.otf		Marianne-Regular.otf
README.md		README.md
config.toml		config.toml
download_and_check_files.py		download_and_check_files.py
logger.py		logger.py
main.py		main.py
period.toml		period.toml
plot_kpi.py		plot_kpi.py
requirements.txt		requirements.txt
tweet.py		tweet.py
utils.py		utils.py