📊 Les pipelines de la Vitrine démocratique

Architecture complète • Dernière mise à jour le 19 janvier 2026 • 🌐 Voir le site vitrine (DEV)

⏰ Glue Jobs ETL (r-media-headlines, r-media-frontpages): 6x/jour → 00:03, 04:03, 08:03, 12:03, 16:03, 20:03 UTC
(19:03, 23:03, 03:03, 07:03, 11:03, 15:03 EST)

▼ 📄 Articles Segmented (Pipeline de Prétraitement) 6x/jour (horaires à venir - blocs de 4h)
r-media-headlines
Glue Job Python
ℹ️ Cliquer pour détails
→
radar-articles-segmented.R
⏰ Horaire à venir
ℹ️ Cliquer pour détails
→
radar_articles
Articles segmentés (WTPSPLIT)
📋 Cliquer pour voir colonnes
▼ 🔵 Salient Index (Pipeline de Base) 6x/jour: 00:20, 04:20, 08:20, 12:20, 16:20, 20:20 UTC
(19:20, 23:20, 03:20, 07:20, 11:20, 15:20 EST)
r-media-headlines
Glue Job Python
ℹ️ Cliquer pour détails
→
radar-salient-objects.R
⏰ +17min après Glue
ℹ️ Cliquer pour détails
→
salient_headlines_objects
Table des objets saillants
📋 Cliquer pour voir colonnes
→
radar-salient-index.R
Calcul indices
ℹ️ Cliquer pour détails
→
salient_index
Indices de saillance
📋 Cliquer pour voir colonnes
▼ 📊 Issues Score (Scores par Enjeu) Daily: 12:09, 16:09, 20:09 UTC • Weekly: 20:11 UTC • Monthly: 20:14 UTC
(Daily: 07:09, 11:09, 15:09 EST • Weekly: 15:11 EST • Monthly: 15:14 EST)
r-media-headlines
Glue Job Python ETL
ℹ️ Cliquer pour détails
+
dict-issues-two-categories
12 catégories
ℹ️ Cliquer pour détails
→
radar-headlines-issues.R
Classifie headlines
ℹ️ Cliquer pour détails
→
headlines_issues_*
day/week/month
📋 Cliquer pour voir colonnes
→
radar-issues-score.R
⏰ 12:09, 16:09, 20:09 UTC
ℹ️ Cliquer pour détails
→
issues_score_day
issues_score_week
issues_score_month
📋 Cliquer pour voir colonnes
▼ 🏛️ Party Scores (Mentions Partis Politiques) Daily: 12:18, 16:18, 20:18 UTC • Weekly: 20:20 UTC • Monthly: 20:22 UTC
(Daily: 07:18, 11:18, 15:18 EST • Weekly: 15:20 EST • Monthly: 15:22 EST)
salient_index
Index de saillance par objet
📋 Cliquer pour voir colonnes
+
dict-political-parties-ca
Partis fédéraux
ℹ️ Cliquer pour détails
+
dict-political-parties-qc
Partis provinciaux
ℹ️ Cliquer pour détails
+
dict-sentiments
Analyse de ton
ℹ️ Cliquer pour détails
→
radar-party-score.R
⏰ 12:18, 16:18, 20:18 UTC
ℹ️ Cliquer pour détails
→
federal_parties_score_*
provincial_parties_score_*
day/week/month
📋 Cliquer pour voir colonnes
▼ 💭 Reflet (Synthèses LLM par Enjeu) Daily: 12:25, 16:25, 20:25 UTC • Weekly: 20:28 UTC • Monthly: 20:30 UTC
(Daily: 07:25, 11:25, 15:25 EST • Weekly: 15:28 EST • Monthly: 15:30 EST)
headlines_issues_day
📋 Cliquer pour voir colonnes
+
headlines_issues_week
📋 Cliquer pour voir colonnes
→
radar-reflet-daily-weekly.R
⏰ 12:25, 16:25, 20:25 UTC
ℹ️ Cliquer pour détails
→
reflet_day
📋 Cliquer pour voir colonnes
→
+
reflet_week
📋 Cliquer pour voir colonnes
radar-reflet-monthly.R
⏰ 20:30 UTC
ℹ️ Cliquer pour détails
→
reflet_month
📋 Cliquer pour voir colonnes
▼ 📰 Headline of Headlines (Une des Unes) 6x/jour: 00:28, 04:28, 08:28, 12:28, 16:28, 20:28 UTC
(19:28, 23:28, 03:28, 07:28, 11:28, 15:28 EST)
salient_headlines_objects
📋 Cliquer pour voir colonnes
→
radar-headline-of-headlines.R
Synthèse LLM
⏰ 00:28, 04:28, 08:28, 12:28, 16:28, 20:28 UTC
ℹ️ Cliquer pour détails
→
headline_of_headlines
Une par période 4h
📋 Cliquer pour voir colonnes
▼ 🔥 RADAR+ Hot 20 (TOP 20 Hebdomadaire) Vendredis: 16:30 UTC
(11:30 EST)
salient_headlines_objects
Semaine complète
📋 Cliquer pour voir colonnes
→
radar-hot-20.R
⏰ Ven 16:30
ℹ️ Cliquer pour détails
→
hot_20_headlines
3 pays
📋 Cliquer pour voir colonnes
→
6 PNG + 6 HTML
QC, CAN, USA × 2
🖼️ Cliquer pour voir exemples
→
Slack: hot20
ℹ️ Cliquer pour détails
▼ 📡 SONAR Heatmaps (Monitoring Qualité) Mercredis: 12:30 UTC
(07:30 EST)
r-media-frontpages
Glue Job Python
ℹ️ Cliquer pour détails
+
r-media-headlines
Glue Job Python
ℹ️ Cliquer pour détails
→
sonar.R
Extrait données SONAR
ℹ️ Cliquer pour détails
→
data_quality_14_days
Datamart: sonar
📋 Cliquer pour voir colonnes
→
sonar-heatmaps.R
⏰ Mer 09:00
ℹ️ Cliquer pour détails
→
6 PNG Heatmaps
fp, uh, body, title, author, words
🖼️ Cliquer pour voir exemples
→
Slack: sonar
ℹ️ Cliquer pour détails
▼ 📤 Publication Vitrine (JSON vers S3 Frontend) 5x/jour: 04:39, 08:39, 12:39, 16:39, 20:39 UTC
(23:39, 03:39, 07:39, 11:39, 15:39 EST)
Toutes les tables finales
issues_score_*, parties_score_*, reflet_*, headline_of_headlines
📋 Cliquer pour liste complète
→
vitrine-graph-data.R
⏰ 5x/jour +36min
ℹ️ Cliquer pour détails
→
13 fichiers JSON
Publiés sur S3
📄 Cliquer pour liste des fichiers
→
Frontend Vitrine
Site web public vitrine démocratique
🌐 Cliquer pour ouvrir site