Comment extraire les données Leboncoin via une API? [2024]

Sasha Bouloudnine
May 17, 2024
15 min read

100+ millions de visiteurs uniques tous les mois, 1+ million d’annonces dans la catégorie Immobilier : leboncoin.fr est la référence française du site de petites annonces en France.

similarweb leboncoin ranking - image2.png

On va écrire un petit bout de code Python pour récupérer les annonces immobilières.

f
import requests s = requests.Session() r = s.get('https://www.leboncoin.fr/_immobilier_/offres') with open('response.html', 'w') as f: f.write(r.text)

Et… on est immédiatement bloqués.

leboncoin vous avez ete bloque - image4.png

Dans cet article, on va voir comment récupérer les données du site leboncoin.fr en utilisant l'API de lobstr.io.

Des données exhaustives et rapidement accessibles, via une API fluide et documentée.

Fini les blocages intempestifs.

Features de l’API Leboncoin de lobstr.io

L’API Leboncoin de lobstr.io offre les fonctionnalitées suivantes:

  1. Récupérer les annonces à partir de n’importe quel URL de recherche leboncoin
  2. Pagination: naviguer de page en page
  3. Concurrency: récupérer les données avec 2 à 3 scrapers en même temps
  4. Navigation intelligente: arrêter la collecte une fois que vous avez récupéré un certain nombre d’annonces, atteint une certaine page, ou que les annonces récupérées sont trop vieilles
  5. Planificateur intégré: planifier une collecte tous les jours à la même heure
  6. Webhook: la collecte est terminée? Recevez une notification via webhook et récupérez vos données fraîches sans attendre

Par souci de simplicité et de lisibilité, tout le code présenté est en cURL, l’outil de référence pour se déplacer sur Internet avec la ligne de commande.

Vous souhaitez convertir le code dans un autre langage? Utilisez curlconverter, un superbe outil gratuit qui permet de passer du cURL au Python ou au Javascript sans effort.

Tutoriel étape par étape pour récupérer les données Leboncoin via API

Le tutoriel est constitué de 8 étapes simples:

  1. Récupérer la clé d’API lobstr.io
  2. Récupérer un URL de recherche Leboncoin
  3. Créer un cluster
  4. Ajouter une tâche
  5. Spécifier les paramètres du scraper
  6. Lancer le run
  7. Vérifier l’état du run
  8. Récupérer les données

Allons-y.

1. Récupérer la clé d’API lobstr.io

D’abord, comme pour tout service-tiers, on va récupérer la clé d’API lobstr.io.

Commencez par vous inscrire gratuitement sur lobstr.io. Pour ce faire:

  1. Rendez-vous sur la page de Sign Up de lobstr.io.
  2. Remplissez votre email et votre futur mot de passe.
  3. Cliquez sur "Create an account".
  4. Rendez-vous dans votre boîte mail et cliquez sur "Verify Email".

sign up lobstr io - image1.png

Ça y est, vous êtes inscrit, bienvenue!

Ensuite, allez récupérer votre clé d’API.

  1. Rendez-vous dans la partie profil du dashboard en cliquant ici.
  2. Cliquez sur "API key details".
  3. Cliquez sur l’icône "Copier".

api key details lobstr io - image5.png

Et voilà, vous avez désormais votre clé d’API sous la main!

La clé d’API lobstr.io ressemble à ça:

9425a66eba999yh87d4b20078bob905r888o8dfv

Gardez la précieusement, on va en avoir besoin dans les étapes suivantes.

2. Récupérer un URL de recherche Leboncoin

Ensuite, on va aller récupérer un URL de recherche Leboncoin.

Qu’est-ce c’est?

Il s’agit de l’URL qui est généré par Leboncoin, après que vous avez réalisé une recherche complète sur le site. Cet URL contient tous les critères de recherche appliqués.

Pour le récupérer, rendez-vous sur leboncoin.fr et faites une recherche.

search on leboncoin - image16.png

Dans le cadre de ce tutoriel, et puisque c’est l’été, on va aller chercher toutes les villas en vente, dans la région de Cassis.

On va donc sélectionner les critères suivants:

  1. Type de bien: Maison
  2. Type d’annonces: Offres
  3. Tri: Plus récentes
  4. Localisation: Cassis (13260) - 1 km
  5. Prix: Mini. 1000000 €
  6. Mot clé: "piscine"

Une fois tous les filtres sélectionnés, récupérer l’URL présent dans le navigateur.

copy leboncoin search url - image11.png

Il ressemble à ça, et donne accès à 11 superbes villas de luxe.

https://www.leboncoin.fr/recherche?category=9&text=%22piscine%22&locations=Cassis_13260__43.21419_5.54296_4846_1000&real_estate_type=1&price=1000000-max

On va le garder pour la suite.

3. Créer un cluster Leboncoin Listings Search Export

On va maintenant créer un cluster Leboncoin.

Un cluster est une instance d’un scraper déjà développé par lobstr.io, que l’on va paramétrer pour qu’il récupère des données ou réalise une tâche en ligne.

Mais sur le store de lobstr.io — il existe 23 scrapers déjà développés, et 3 leboncoin.

lobstr io store leboncoin scrapers - image13.png

Lequel choisir?

Dans le cadre de ce tutoriel, on va simplement récupérer les annonces disponibles à partir d’un URL de recherche. On va donc partir sur Leboncoin Listings Search Export.

Voilà l’ID du scraper:

33db1ca85160105eeb84d5aa51cfad10

Vous souhaitez avoir la liste des IDs des scrapers, par type de scraper? Vous pouvez utiliser la route /crawlers, mieux documentée ici.

Et on va maintenant créer un premier cluster.

Code

f
curl 'https://api.lobstr.io/v1/clusters/save' \ -H 'Accept: application/json' \ -H 'Authorization: Token 9425a66eba999yh87d4b20078bob905r888o8dfv' \ --data-raw '{"crawler":"33db1ca85160105eeb84d5aa51cfad10"}'

On retrouve bien le token, récupéré dans la première partie, et l’ID du scraper mentionné plus haut.

Réponse

f
{ "id": "4b1ba00657cd4e4798f49309c82fbb06", "account": [], "concurrency": 1, "crawler": "33db1ca85160105eeb84d5aa51cfad10", "created_at": "2024-05-16T23:28:10Z", "is_active": true, "name": "Leboncoin Listings Search Export (4)", "params": {}, "schedule": null, "to_complete": false }

On retrouve dans la réponse l’ID du cluster:

4b1ba00657cd4e4798f49309c82fbb06

On va le conserver pour la suite.

4. Ajouter une tâche

Qu’est-ce que le scraper doit aller chercher?

C’est ce qu’on va préciser dans cette partie.

Une tâche est l’URL par laquelle le scraper va entrer sur le site, et commencer à récolter les données. C’est donc le point de départ, et ça définit le périmètre de la collecte.

Code

f
curl 'https://api.lobstr.io/v1/tasks' \ -H 'Accept: application/json' \ -H 'Authorization: Token 9425a66eba999yh87d4b20078bob905r888o8dfv' \ --data-raw '{"tasks":[{"url":"https://www.leboncoin.fr/recherche?category=9&text=%22piscine%22&locations=Cassis_13260__43.21419_5.54296_4846_1000&real_estate_type=1&price=1000000-max"}],"cluster":"4b1ba00657cd4e4798f49309c82fbb06"}'

On retrouve bien dans data-raw :

  1. url: l’URL de recherche récupéré précédemment
  2. cluster: l’identifiant du cluster récupéré plus haut

Il est bien entendu possible d’ajouter plusieurs tâches, et d’ajouter plusieurs tâches en même temps. Ajoutez des dictionnaires au sein de la liste de tasks.

Réponse

f
{ "duplicated_count": 0, "tasks": [ { "id": "8cc2c42d68e3d34be75330ce31fe6d60", "created_at": "2024-05-16T23:45:35.902538", "is_active": true, "params": { "url": "https://www.leboncoin.fr/recherche?category=9&text=%22piscine%22&locations=Cassis_13260__43.21419_5.54296_4846_1000&real_estate_type=1&price=1000000-max" }, "object": "task" } ] }

Une tâche bien ajoutée.


On veut maintenant que le scraper collecte les 10 premières annonces. Que faire?

5. Spécifier les paramètres du scraper

Dans l’état actuel des choses, le scraper va récupérer toutes les annonces, ce qui peut être ennuyeux si on est en temps limité.

On va paramétrer le scraper pour récupérer max. 10 annonces.

Code

f
curl 'https://api.lobstr.io/v1/clusters/4b1ba00657cd4e4798f49309c82fbb06' \ -H 'Accept: application/json' \ -H 'Authorization: Token 9425a66eba999yh87d4b20078bob905r888o8dfv' \ --data-raw '{"name":"Leboncoin Listings Search Export (4)","concurrency":1,"export_unique_results":true,"no_line_breaks":true,"to_complete":false,"params":{"max_date":null,"max_results":10,"max_pages":99,"hours_back":null,"online_shop":false},"accounts":null,"run_notify":"on_success"}'

On retrouve:

  1. name: string, nom du scraper
  2. concurrency: entier, nombre de robots qui se déplacent simultanément pour aller récupérer des données, permet de multiplier la vitesse
  3. export_unique_results: booléen, récupère uniquement des annonces uniques
  4. no_line_breaks: booléen, si vrai supprime les sauts de ligne dans les descriptions
  5. to_complete: booléen, si vrai se met en pause une fois que les minutes journalières ont été consommées
  6. max_date: date, si le scraper récupère une annonce publiée auparavant, s’arrête
  7. max_results: entier, arrête la collecte une fois un nombre d’annonces collectées, ici 10
  8. max_pages: entier, le scraper s’arrête une fois les annonces de cette page récupérées, par défaut 99
  9. hours_back: entier, le scraper s’arrête si l’annonce récupérée a été postée avant le nombre d’heures renseigné, par exemple si 24 récupère les annonces des dernières 24h
  10. online_shop: booléen, si vrai récupère les infos vendeurs supplémentaires, e.g. le SIREN
  11. run_notify: string, 3 choix possibles, envoie un mail en cas de succès avec on_success, envoie un mail en cas d’erreur avec on_error ou n’envoie rien avec null, par défaut on_success

Vous pouvez bien sûr modifier les paramètres à votre convenance, en modifiant la data-raw présentée dans le curl.

Réponse

f
{ "name": "Leboncoin Listings Search Export (4)", "no_line_breaks": true, "params": { "max_date": null, "max_results": 10, "max_pages": 99, "hours_back": null, "online_shop": false }, "to_complete": false, "accounts": null, "run_notify": "on_success", "export_unique_results": true, "id": "4b1ba00657cd4e4798f49309c82fbb06" }

On retrouve bien tous les paramètres cités plus haut. Simple et lisible.


Le scraper est prêt!

Comment lancer la collecte?

6. Lancer le run

Notre scraper est prêt à être lancé.

Dans cette partie, on va voir comment lancer un run, c'est-à-dire une séquence pendant laquelle le scraper va réaliser toutes les tâches qui lui ont été assignées.

Code

f
curl 'https://api.lobstr.io/v1/runs' \ -H 'Accept: application/json' \ -H 'Authorization: Token 9425a66eba999yh87d4b20078bob905r888o8dfv' \ --data-raw '{"cluster":"4b1ba00657cd4e4798f49309c82fbb06"}'

On retrouve bien l’ID du cluster, récupéré plus tôt.

Réponse

f
{ "id": "1d66f25e6aef492e81bba0671fa77f2c", "object": "run", "cluster": "4b1ba00657cd4e4798f49309c82fbb06", "is_done": false, "started_at": "2024-05-17T00:22:42Z", "total_results": 0, "total_unique_results": 0, "next_launch_at": null, "ended_at": null, "duration": 0.0, "credit_used": 0.0, "origin": "user", "status": "pending", "export_done": null, "export_count": 0, "export_time": null, "email_done": null, "email_time": null, "created_at": "2024-05-17T00:22:42Z", "done_reason": null, "done_reason_desc": null }

Il s’agit d’un objet run, qui contient toutes les informations liées à un run.

  1. id: string, l’identifiant unique du run qu’on va utiliser pour évaluer le statut du run ensuite
  2. object: string, ici run, la nature de l’objet
  3. cluster: string, l’identifiant du cluster auquel ce run est rattaché
  4. is_done: booléen, si vrai le run est terminé
  5. started_at: date, à laquelle le run a démarré
  6. total_results: entier, nombre total d’annonces récoltées
  7. total_unique_results: entier, nombre total d’annonces uniques récoltées
  8. next_launch_at: date, à laquelle le run va à nouveau se lancer, s’il était auparavant dans le statut paused si vous avez consommé tous vos crédits journaliers par exemple
  9. ended_at: date, à laquelle le run s’est terminé
  10. duration: float, durée du run exprimé secondes
  11. credit_used: float, crédit journalier utilisé exprimé en secondes
  12. origin: string, origine de la collecte, user si l’utilisateur a lancé la collecte via la route d’API ou l’interface, schedule si le run a été lancé via l’outil de programmation de runs de l’application
  13. status: string, statut du run, pending pendant la phase de lancement, running pendant le temps de collecte, et done une fois le run terminé
  14. export_done: booléen, si vrai l’export des données vers le s3 s’est fait avec succès
  15. export_count: entier, nombre d’exports vers le s3 réalisés
  16. export_time: date, à laquelle le dernier export a été réalisé
  17. email_done: booléen, si vrai un email a été envoyé à la fin du run
  18. email_time: date, à laquelle l’email a été envoyé
  19. created_at: date, à laquelle l’objet run a été créé
  20. done_reason: string, qui mentionne la raison pour laquelle le run s’est terminé
  21. done_reason_desc: string, qui donne plus d’informations sur le champ précédent

On va conserver l’ID du run à utiliser ensuite:

1d66f25e6aef492e81bba0671fa77f2c

Mais comment savoir si le run est terminé — afin d’aller récupérer les données?

Vérifier l’état du run

L’API est asynchrone, autrement dit une fois le run lancé, il faut attendre que celui-ci se termine avant d’aller récupérer les données.

L’API asynchrone permet de prendre en charge des tâches qui durent de plusieurs minutes à plusieurs heures.

sync vs async communication - image7.png

Elle est essentielle ici, où les tâches de web scraping peuvent durer plusieurs heures.

Comment savoir si le run est terminé?

Code

On utilise une méthode GET la route /runs — plutôt que POST précédemment utilisé.

f
curl 'https://api.lobstr.io/v1/runs/1d66f25e6aef492e81bba0671fa77f2c' \ -H 'Accept: application/json' \ -H 'Authorization: Token 9425a66eba999yh87d4b20078bob905r888o8dfv'

Réponse

f
{ "id":"1d66f25e6aef492e81bba0671fa77f2c", "object":"run", "created_at":"2024-05-17T00:22:42.480714", "started_at":"2024-05-17T00:22:42.480715", "next_launch_at":null, "ended_at":"2024-05-17T08:45:02.503641", "duration":74.13130000000001, "credit_used":74.13130000000001, "origin":"user", "status":"done", "export_time":"2024-05-17T08:46:48.323352", "export_done":true, "mail_done":null, "mail_time":null, "total_unique_results":10, "crawler_id":"33db1ca85160105eeb84d5aa51cfad10", "done_reason":"tasks_done", "done_reason_desc":null, "shared":false, "cluster":"4b1ba00657cd4e4798f49309c82fbb06" }

On retrouve bien l’ensemble des attributs décrits précédemment:

  1. Le run a duré 74 secondes
  2. 10 résultats uniques collectés i.e. 7.5 seconde par résultat

Le status est bien done, le run s’est terminé avec succès!

On garde l’ID du run:

1d66f25e6aef492e81bba0671fa77f2c

On va maintenant récupérer les données.

8. Récupérer les données de l’API Leboncoin

Les annonces Leboncoin ont été scrappées avec succès!

On va aller les récupérer.

Code

f
curl 'https://api.lobstr.io/v1/results?run=1d66f25e6aef492e81bba0671fa77f2c&page=1&page_size=100' \ -H 'Accept: application/json' \ -H 'Authorization: Token 9425a66eba999yh87d4b20078bob905r888o8dfv'

On retrouve bien dans le cURL:

  1. /results: la route de l’API pour aller récupérer les données scrappées
  2. run: string, l’ID du run récupéré précédemment, ici 1d66f25e6aef492e81bba0671fa77f2c
  3. page: entier, le numéro de la page, qui permet de paginer d’une page de résultat à la suivante, ici 1
  4. page_size: entier, le nombre d’items par page, par défaut 100

Réponse

f
{ "count":10, "limit":100, "page":1, "total_pages":1, "result_from":1, "result_to":10, "data":[ { "id":"b5e79acc61d9d7771fe4ec9295bbc319", "object":"result", "run":"1d66f25e6aef492e81bba0671fa77f2c", "DPE":"b", "DPE_int":null, "DPE_string":"B", "GES":"a", "GES_int":null, "GES_string":"A", "ad_type":"offer", "annonce_id":"2634542542", "api_key":"54bb0281238b45a03f0ee695f73e704f", "area":200, "capacity":null, "category_name":"Ventes immobili\u00e8res", "charges_included":null, "city":"Cassis 13260", "currency":"EUR", "custom_ref":null, "department":"Bouches-du-Rh\u00f4ne", "description":"Proximit\u00e9 \"Plan d'olive\" , au calme, belle villa enti\u00e8rement r\u00e9nov\u00e9 avec piscine sans vis \u00e0 vis. \nElle se compose actuellement au rdc d'un vaste s\u00e9jour/ salle \u00e0 manger tr\u00e8s lumineux donnant sur un beau jardin arbor\u00e9 avec piscine d'environ 1000 m2 et d'une belle terrasse avec coin solarium expos\u00e9 sud/ouest. Une cuisine ind\u00e9pendante et une buanderie.\nA l'\u00e9tage, 5 chambres dont une suite parentales . Une salle de bain et 3 salle d'eau. Nombreux rangements.\nUn box double compl\u00e8te ce bien.\nRare \u00e0 la vente.\nDPE:B\nPrix: 1 100 000 euros. Honoraire \u00e0 la charge du vendeur", "detailed_time":null, "details":{ "GES":"A", "Type de bien":"Maison", "Classe \u00e9nergie":"B", "Honoraires inclus":"Oui", "Nombre de niveaux":"2", "Nombre de pi\u00e8ces":"7", "Places de parking":"2", "Surface habitable":"200 m\u00b2", "Nombre de chambres":"5 ch.", "Surface totale du terrain":"1000 m\u00b2" }, "district":null, "expiration_date":"2024-06-08T10:26:46Z", "filling_details":null, "first_publication_date":"2024-04-09T10:26:46Z", "floor":null, "furnished":null, "has_online_shop":false, "has_phone":true, "has_swimming_pool":null, "is_active":null, "is_deactivated":null, "is_detailed":null, "is_exclusive":null, "land_plot_area":1000, "last_publication_date":"2024-04-09T10:26:46Z", "last_scraping_time":null, "lat":"43.23561", "lng":"5.55112", "mail":null, "more_details":{ "ges":"A", "rooms":"7", "square":"200 m\u00b2", "bedrooms":"5 ch.", "is_import":"false", "lease_type":"sell", "district_id":"13022", "energy_rate":"B", "nb_parkings":"2", "fai_included":"Oui", "immo_sell_type":"old", "activity_sector":"2", "nb_floors_house":"2", "district_type_id":"2", "real_estate_type":"Maison", "land_plot_surface":"1000 m\u00b2", "district_visibility":"false", "price_per_square_meter":"5500", "district_resolution_type":"integration" }, "native_id":34546759, "no_salesmen":true, "online_shop_url":null, "owner_name":"GLOBAL IMMO", "owner_siren":"805095841", "owner_store_id":"11551628", "owner_type":"1", "phone":null, "phone_from_user":null, "picture":null, "pictures":"https://img.leboncoin.fr/api/v1/lbcpb1/images/c9/65/6f/c9656fbb1f9cbf6faaad1679856275f0b090c113.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/97/15/7c/97157c0300add614957e5678f7ba4727e01ffd03.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/94/42/c8/9442c8a8ae9af2bab3b8606ca2bdc3944ed9c5ce.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/96/7a/c8/967ac8190a1ce3eeee6916e777f8d5d7d40ac64a.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/c7/eb/a9/c7eba9590ce22072c38280dfbb2ad6ec289a735f.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/gh/42/7e/gh427eea696631ac81d04651f24c5703d0fbec4a.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/47/cd/db/47cddb0d4c8f5f899000d68ec1eb493a9e065804.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/63/8b/c4/638bc48732b3680ba819139c52ac9eac22eae653.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/06/48/9f/06489f9baaac3547ca933cd70eeb52eaaa916851.jpg?rule=ad-large|||https://img.leboncoin.fr/api/v1/lbcpb1/images/77/3f/40/773f402b9b6d61f02a101017afa64f1467e2527e.jpg?rule=ad-large", "postal_code":"13260", "price":1100000, "real_estate_type":"Maison", "ref":null, "region":"Provence-Alpes-C\u00f4te d'Azur", "room_count":7, "scraping_time":"2024-05-17T08:45:01.229Z", "sleepingroom_count":null, "square_metter_price":null, "status_code":null, "title":"Villa avec piscine sur 1000m2 de terrain", "urgent":false, "url":"https://www.leboncoin.fr/ad/ventes_immobilieres/2634542542", "user_id":"75529911-7f87-4991-a86f-274875920b62" }, ... ] }

On retrouve bien une liste de dictionnaires. Chaque dictionnaire renvoie l’ensemble des informations concernant une annonce au format JSON.

80+ attributs par annonce au total.

Et tout en haut, des métadonnées avec les champs count, et le champ total_pages qui permettent de faciliter la navigation.

Un set de données exhaustif, lisible, et facile à manipuler.

À nous les villas sous le soleil.

☀️

FAQ

Est-ce qu’il est légal de récupérer les données Leboncoin via l’API proposée par lobstr.io?

Oui, entièrement!

Comme le souligne l’article L342-3 du code de la propriété intellectuelle, il est entièrement légal pour un utilisateur de récupérer des données publiques, à 2 conditions:

  1. L’utilisateur a un accès "licite" aux données, c’est le cas ici
  2. L’utilisateur récupère une partie non substantielle du contenu de la base

article l342 3 code de la propriete intellectuelle - image8.png

Veillez donc à récupérer la donnée, mais ne pas récupérer toute la donnée présente sur le site.

A ne pas faire:

❌ Récupérer toute la donnée du site ❌ Récupérer toute la donnée d’une sous catégorie du site, par exemple "Immobilier"

Comme mentionné dans nos conditions d’utilisation, nous vous invitons à utiliser les scrapers avec modération, et nous déchargeons de toute responsabilité en cas d’usage excessif.

lobstr io terms of use obligations of squiders - image14.png

Un grand pouvoir exige de grandes responsabilités.

N’exagérez pas.

Si vous voulez aller plus loin sur la partie légale, consultez notre article dédié à ce sujet ici:

Est-ce que le scraping sur Leboncoin est légal en 2022?.

Est-ce qu’il existe une documentation d’API complète?

Oui, complètement, la doc est accessible ici!

L’API mise à disposition par lobstr.io peut être utilisée avec n’importe quel scraper, vous pourrez donc manipuler toutes les automatisations à partir de cette documentation.

Combien coûte l’API Leboncoin de lobstr.io?

Lobstr met à disposition des scrapers déjà développés, que vous pouvez lancer directement depuis votre ligne de commande via une API.

Le prix dépend de deux facteurs:

  1. Le type de scraper utilisé
  2. Le temps en minutes pendant lequel vous faites tourner le scraper

Dans le cas du scraper utilisé lors de ce tutoriel, il faut compter 1 minute pour 35 résultats.

On retrouve cette information sur la page produit du scraper.

results per minute leboncoin listings search export - image9.png

Dès lors, en considérant les plans disponibles dans la partie Pricing, il faut compter:

  1. 50 EUR par mois, avec 5000+ annonces par jour
  2. 250 EUR par mois, avec 50000+ annonces par jour
  3. 500 EUR par mois, avec 100000+ annonces par jour

Vous voulez faire une simulation du prix à payer en fonction de vos besoins journaliers?

Utilisez le simulateur, situé en bas de la page produit de chaque scraper.

pricing simulator leboncoin listings search export lobstr io - image3.png

Attention, leboncoin est protégé par datadome, un outil de bot-mitigation. La collecte est coûteuse, même à petite échelle. Aussi, pas de plan gratuit. Les scrapers leboncoin sont accessibles uniquement avec un plan premium.

Est-ce qu’il est possible de recevoir une notification par webhook une fois le travail terminé?

Vous ne voulez pas vérifier tous les quatre matins le statut de votre run, et simplement recevoir une notification par webhook une fois que la collecte est terminée?

C’est normal, et c’est possible!

Depuis l’interface, cliquez sur l’icône "Delivery".

click delivery icon lobstr io - image17.png

Puis procédez comme suit:

  1. Cliquez sur la check box à côté de "Webhook".
  2. Dans la partie "Event Types", choisissez le type d’event pour lequel vous recevez une notification. run success en cas de run terminé avec succès, run error si vous souhaitez recevoir une notification en cas de problème.
  3. Dans "Url", ajoutez l’URL de votre webhook.
  4. Cochez "Do not retry", si vous souhaitez que l’on ne relance pas une notification en cas d’erreur.
  5. Cliquez sur "Save" pour sauvegarder les paramètres de livraison choisis.

setup webhook lobstr io - image6.png

Vous voulez tester votre webhook rapidement sans déployer ça sur votre serveur? Utilisez le service gratuit open source webhook.site et cliquez sur "Test Webhook". Testez rapidement.

Et voilà la notification reçue en cas de succès:

f
{ "id": "1d66f25e6aef492e81bba0671fa77f2c", "event": "Run.export_done", "object": "webhook", "cluster": "Leboncoin Listings Search Export (4)", "ended_at": "2024-05-17T08:45:02.503641" }

Et on retrouve:

  1. id: string, l’ID du run
  2. event: string, le type d’event notifié, soit Run.export_done ou Run.export_error
  3. cluster: string, le nom du cluster
  4. ended_at: date, à laquelle l’event a été notifié

Soyez notifié en temps réel.

Est-ce qu’il est possible de récupérer les numéros de téléphones des annonces Leboncoin via API?

Oui, c’est possible!

Il suffit de suivre les même étapes que présentées précédemment, en utilisant ce scraper:

Leboncoin Listings & Phone Search Export

leboncoin listings and phone search export product page lobstr io - image10.png

Attention, il faudra d’abord synchroniser votre compte leboncoin en amont depuis l’interface. 1 clique suffit avec notre add-on disponible ici.

Est-ce qu’il est possible de récupérer les données d’autres sites immobiliers via les APIs de lobstr.io?

Oui, complètement!

Voilà les scrapers déjà disponibles:

  1. PAP Search Export
  2. SeLoger Search Export
  3. Idealista Search Export

store lobstr io real estate scrapers - image12.png

Vous avez d’autres idées?

Signalez le nous sur notre page Ideas.

lobstr io submit idea - image15.png

1516989175726.jpegSasha Bouloudnine

Co-founder @ lobstr.io depuis 2019. Fou de la data et amoureux zélé du lowercase. Je veille à ce que vous ayez toujours la donnée que vous voulez.

Related Articles