Comment scraper et crawler un site web sans programmation ?

(Cette formation fait suite à la formation Comment scraper une page web en 2 minutes et sans programmation pour laquelle vous avez été très nombreux à me contacter pour me remercier et me demander une suite. La voilà !) 

Je vous invite dans cette formation à devenir un expert de l'art d'extraire des données. Vous apprendrez ainsi à extraire les données de n'importe quel site internet, de manière automatiquement, structurée et sur plusieurs niveaux.
Vous avez simplement besoin du navigateur Chrome et de l'extension gratuite Web Scraper.

L'efficacité du Web Crawler ajoutée au Web Scraper

Vous avez découvert dans la précédente formation comment extraire simplement les informations d'une page. Mais vous avez très vite compris que les annuaires, les listes de produits, les sites en général, sont composés de centaines de pages. Le web crawler va vous permettre ici de consulter automatiquement chacune de ces pages pour récupérer nos informations.

Récupérez des listes de prospects pour votre démarche marketing. Analysez les listes de produits de vos concurrents pour vous positionner. Étudiez la SEO de concurrents pour optimiser la votre en conséquence.
L'extraction de données est un outil de plus pour vous aider dans n'importe quelle tâche impliquant la collecte et l'analyse d'un nombre de données important.

Au programme de ce tuto sur le web scraping à l'aide de web crawling

• introduction au web scraping et web crawling
• crawler simple : explication par l'exemple des 3 différents types avec de nombreux exemples
• crawler multi-niveaux: explication avec plusieurs exemples
• comment purifier l'information avec les expressions régulières 
• aller plus loin avec l'extraction d'attributs 
• extraire des tableaux d'informations automatiquement 
• utilisation des liens pop-ups
• gestion des délais (être fair-play avec les sites, éviter les sécurités)
• importer et exporter les sitemaps (configuration)
• exporter les données vers Google Sheet 
• exporter les données vers Excel 

Ce cours est destiné aux personnes ayant déjà utilisé le Web Scraper Chrome et ayant consulté la courte première formation sur le sujet. 
Comme beaucoup l'ont déjà fait pour la précédente formation, n'hésitez pas à me solliciter si vous avez des remarques ou des questions (notamment dans la partie "Entraide"),
Bon scraping!

Attention : cette vidéo est réalisée dans un but pédagogique. Avant de scrapper les données d'un site, vérifiez que ce dernier autorise ou n'interdit pas ce genre de pratique !

Attention bis : Web scraping et web crawling ne sont pas synonymes de "hacking". A aucun moment nous sommes en train de pirater des données. Nous récupérons simplement des données qui nous sont rendues accessibles de manière automatique.