Description
Gagnez du temps grâce à l'automatisation : restez concentré sur vos tâches à valeur ajoutée !
Développeur et ingénieur back-end, je propose des audits / expertise en Automatisation et Web Scraping pour vos besoins en:
* automatisation des tâches répétitives et chronophages
* extraction de données
* création de base de données
* génération de fichiers de leads
* développement de moteur de recherche full-text
* Growth Hacking
Je fais aussi des formations et initiations:
* Web Scraping
* Node.js / Puppeteer
* MongoDB
* Apache SOLR
* Formation Growth Hacking
Je mets en oeuvre des robots de web scraping sur mesure pour:
* scraper les données de profils de réseaux sociaux
* extraire les données de contacts de sites annuaires
* collecter les prix de fiches produits de N sites (veille tarifaire)
* récolter les données d'annonces immobilières / automobiles
* scraper les avis/reviews de consommateurs
* automatiser la recherche de données depuis formulaires complexes
* enrichir des données existantes via API
Je conçois des architectures de scraping full stack distribuées avec entre autre:
* Nodejs
* Headless Chrome + Puppeteer
* MongoDB
* RabbitMQ
* SOLR / ElasticSearch
* GraphQL
* API
* Electron
Les robots d'extraction de données sont personnalisés selon les structures des sites et des données. Toute action humaine est automatisable: étapes de login, infinite scroll, gestion pagination, clics sur boutons, filtres, ...
Pour comprendre vos besoins d'extraction de données, en vue d'un devis / audit, doivent être identifiés:
* 1: les sources: sites à partir desquels sont extraites les données
* 2: le chemin de navigation: cheminement à suivre depuis page d'accueil pour arriver aux données (clics sur catégories / menu, gestion pagination, etc)
* 3: la liste des données à extraire
* 4: le format du livrable des données extraites (JSON, CSV,..)
* 5: fréquence des automatisations si scraping nécessitant des MAJ et extractions de données régulières