Nous avons récemment optimisé notre mécanisme d’import des offres Gîtes de France afin de répondre à un afflux exceptionnel de données et à des ralentissements constatés sur plusieurs passerelles.
🔍 Le problème
Depuis mi-mai, plusieurs milliers de fiches se retrouvaient bloquées en statut "import en attente" :
- Le temps d’import moyen d’une fiche atteignait 30 secondes.
- Avec plus de 5000 fiches à traiter, le temps cumulé dépassait 40 heures.
- La passerelle réimportait parfois des fiches sans modification utile, ce qui surchargeait inutilement le système.
🛠️ Ce qui a été fait
Nous avons mis en œuvre une parallélisation du traitement des langues, ce qui permet désormais de :
- Appeler les différentes versions linguistiques d’une fiche en simultané
- Réduire considérablement le temps global d’import
⏱️ Le résultat
- Le temps d’importation ou de mise à jour d’une fiche via la passerelle a été divisé par 5.
- Les synchronisations sont à nouveau fluides et stables.
Commentaires
0 commentaire
Vous devez vous connecter pour laisser un commentaire.