~/cv/arch
/
géry · toulouse · cto
← Retour au CV
LANG
FR
EN
Kocliko
MerciYanis
Le Comptoir Des Pharmacies
VUE
Comparaison
Côte à côte
Data Pipeline
2024→
Application Web
2024→
➜ ~/cv/arch/kocliko-data
Refonte pipeline IoT : 6h → 40min
Millions de points par jour, latence divisée par 9.
6h
AVANT
40min
APRÈS
9×
ACCÉLÉRATION
IoT Providers
Cronjob Linux
Orchestration
App Django
Pull, Calc & Store · 6h
PostgreSQL
Data & Résultats
IoT Providers
Airflow Pull
Tasks d'ingestion
MongoDB
Stockage brut
IoT MQTT
Scaleway MQTT
Serverless + Queue
Mongo TS
Temps réel
Backups
Hot & Cold
Airflow Calc
40min · KPIs
PostgreSQL
Résultats
AVANT · Monolithique · exécution 6h
APRÈS · Ingestion temps réel · 40min batch
⇔
✕
ETL séquentiel, pas de parallélisme
✕
Cronjob Linux fragile, pas de retry
✕
Coût AWS élevé, pas de séparation chaud/froid
✓
Airflow Pull + MQTT Scaleway en parallèle
✓
Séparation hot (TimeSeries) / cold (brut)
✓
AWS → Scaleway · Terraform modulaire
Source / Client
Broker / LB / CDN
Hot path / PaaS
Cold / Archive
Orchestration
Monolith / Legacy
Database / Store
Observability