
Présentation
Le type de source URL récupère des données depuis une adresse web. Utilisez-le pour les endpoints d’API, les fichiers CSV/JSON hébergés ou tout flux de données accessible via HTTP/HTTPS.Configuration
Champs obligatoires
Options HTTP
Ces champs sont imbriqués sous l’objetoptions.
Authentification
- Sans authentification
- En-têtes personnalisés
- OAuth
Pour les URLs accessibles publiquement, aucune configuration supplémentaire n’est nécessaire.
Formats de fichiers pris en charge
La source URL détecte automatiquement le format de la réponse. Les formats suivants sont pris en charge :Les réponses compressées (
.gz, .zip) sont automatiquement décompressées avant le parsing.Déchiffrement PGP
La source URL prend en charge la récupération de fichiers chiffrés PGP. LorsquepgpPrivateKey est configuré, la réponse est déchiffrée avant la décompression et le parsing.
Les fichiers chiffrés armored (
.asc) et binary (.pgp, .gpg) sont pris en charge.
Consultez le guide de déchiffrement PGP pour plus de détails sur la génération de clés, les formats pris en charge et la gestion des erreurs.
Pagination
Pour les APIs qui paginent leurs réponses, la source URL prend en charge plusieurs stratégies de pagination :- Paramètre de requête
- Paramètre de body
- Attribut hypermedia
- Token de page
- En-tête Link
- Token d'entrée
Incrémente un paramètre de requête (numéro de page ou offset) à chaque requête.
Vous pouvez optionnellement définir
maximumPage pour limiter le nombre de pages récupérées lors d’une synchronisation.Variables d’exécution
Pour les endpoints d’API qui nécessitent des paramètres dynamiques (par ex. date actuelle, IDs spécifiques à l’utilisateur), vous pouvez définir des variables qui sont résolues au moment de la récupération. Chaque variable possède :
Les variables peuvent être référencées dans l’URL, les en-têtes, le body et les paramètres de requête. Cela permet de construire des URLs dynamiques comme
https://api.example.com/products?since={{last_sync_date}}.
Fonctionnement
- Reelevant envoie une requête HTTP à l’URL configurée avec la méthode, les en-têtes et le body spécifiés.
- Si la pagination est configurée, les pages suivantes sont récupérées automatiquement.
- La réponse est parsée selon le format détecté.
- Les champs sont extraits et rendus disponibles pour le mapping.
- Lors des synchronisations suivantes, l’URL est re-récupérée et les données sont mises à jour.