Skip to main content
Le Mode Standard et le Mode Boost sont deux options d’extraction dans le cloud pour exécuter les tâches Octoparse. Ils répondent à des besoins de performances différents. Utilisez le Mode Standard pour une extraction cloud classique. Choisissez le Mode Boost lorsque la tâche et votre offre permettent une exécution plus rapide ou avec davantage de concurrence.

​
Fonctionnement

​
Mode Standard

En Mode Standard, l’intégralité de la tâche s’exécute sur un seul serveur cloud, sans être divisée. Ce serveur collecte tous les enregistrements de manière séquentielle. Le flux reste ainsi simple et prévisible, mais si l’exécution est interrompue par une erreur du site ou un délai d’attente, la tâche doit redémarrer depuis le début. Pour les grands jeux de données, une longue exécution sur un serveur unique accroît également le risque d’échec en cours de traitement. Le Mode Standard convient particulièrement aux petits jeux de données, aux tests et aux sites qui n’autorisent qu’une session connectée à la fois.

​
Mode Boost

En Mode Boost, la tâche est automatiquement divisée en plusieurs sous-tâches. Chacune est affectée à un serveur cloud et ne collecte qu’une partie des données. Leur nombre dépend de la configuration de la tâche. Cette exécution parallèle présente plusieurs avantages :
  • Traitement plus rapide : les sous-tâches s’exécutent simultanément, ce qui réduit nettement la durée totale.
  • Risque de perte de données réduit : chaque sous-tâche ne traite qu’une partie des données ; un échec affecte donc moins d’enregistrements.
  • Reprise indépendante : une sous-tâche en échec peut être relancée seule, sans affecter ni réexécuter les autres, ce qui accélère considérablement la reprise.
Le Mode Boost est recommandé pour les collectes de données à grande échelle où la vitesse et la résilience sont prioritaires.

​
Comparaison

​
Quand utiliser le Mode Standard

Utilisez-le lorsque :
  • Vous exécutez une tâche planifiée classique
  • La vitesse n’est pas la principale contrainte
  • Vous souhaitez un mode cloud stable par défaut
  • Le volume de données est modéré
  • Vous validez encore la fiabilité de la tâche
  • Le site cible n’autorise qu’une session active à la fois
Le Mode Standard constitue généralement le point de départ de l’extraction dans le cloud.

​
Quand utiliser le Mode Boost

Utilisez-le lorsque :
  • Vous avez besoin d’une extraction plus rapide
  • La tâche collecte un grand jeu de données
  • Elle peut s’exécuter sans risque avec davantage de concurrence
  • Vous avez déjà testé le flux de travail
  • Votre offre prend ce mode en charge
Le Mode Boost est surtout utile lorsque la durée d’exécution constitue le principal goulot d’étranglement et que la tâche tolère une accélération sans déclencher de problèmes sur le site.

​
Vérifications préalables

Avant de passer au Mode Boost, vérifiez que :
  • Le site cible supporte des requêtes plus rapides ou une activité plus intense
  • La pagination et les flux des pages de détail restent stables
  • Les problèmes d’anti-bot ou de limitation de débit n’augmentent pas
  • La qualité de la sortie reste constante
  • Votre offre inclut les ressources cloud nécessaires
Une extraction plus rapide n’est pas toujours préférable. Une tâche trop agressive augmente sur certains sites le risque d’échec, de blocage des requêtes ou de données incomplètes.

​
Flux de travail recommandé

1

Commencer par une exécution locale

Vérifiez que la tâche récupère les bons champs et suit correctement les pages.
2

Exécuter en Mode Standard

Vérifiez que la tâche fonctionne dans l’environnement cloud.
3

Essayer le Mode Boost si nécessaire

Ne l’utilisez que lorsque la tâche est stable et qu’un gain de vitesse est réellement nécessaire.
4

Comparer les sorties

Après le changement de mode, contrôlez le nombre d’enregistrements, les champs manquants, les doublons et les erreurs.