[TECH] Ingérer et extraire les données provenant de GTFS

[VincentHardouin]

Problème

Actuellement, le mode de jeu proposé n'est pas basé sur le temps, mais sur le nombre de stations, ce qui rend la solution proposée perturbante (plus de changement pour gagner 1 station par exemple).

Les données actuelles, qui se base sur les contributeurs OpenStreetMap, n'ont pas les informations sur les correspondances, ni le temps entre les stations. Il n'est donc pas possible de proposer un mode de jeu basé sur ces informations.

Proposition

Se baser sur le standard GTFS. Ce standard permet à toutes compagnies de transport de mettre à disposition, les routes, les voyages, les horaires à venir à chaque arrêt, les correspondances, …
Grâce à ces informations, nous sommes en capacité de connaître le temps entre 2 stations et le temps de correspondance entre 2 lignes au sein d'une même station.

Pour faire cela, j'ai téléchargé les données mise à disposition par IDFM, que j'ai importé dans une base PostgreSQL (scripts/import-data.js). Les données étant un peu volumineuse 9.5M de lignes pour les stop_times, il a fallu faire le parsing en streaming.

Une fois les données dans une base il est plus facile de faire des requêtes pour subvenir à notre besoin (scripts/export-data.js):

• récupérer les lignes
• récupérer les stations
• récupérer les stations adjacentes et les correspondances
• récupérer le temps entre station
• récupérer le temps de correspondance

Cette PR est la première d'une série, ici, nous permettons juste l'import et l'export des données de GTFS.

Remarques

Utiliser les données de GTFS permet :

• un mode par temps de trajet
• un affichage des stations plus précises (l'unique point par station)
• Avoir toutes les correspondances possibles (ex: Saint-Lazare - St-Augustin)
• Être en capacité d'ajouter le RER, le bus, le tramway, etc.
• Être en capacité de pouvoir faire d'autres villes avec quelques changements

Pour importer les données :

docker compose up 
npm run db:reset && npm run db:migrate
node scripts/import-data.js ~/path/gtfs-dir/

5 min plus tard les données sont importées.

Pour exporter les données :

node scripts/export-data.js

[VincentHardouin]

🎉 This PR is included in version 1.15.0 🎉

The release is available on GitHub release

Your semantic-release bot 📦🚀