Ressources · Blog

Formats et sources de données

Formats et sources de données : HTML, XML, JSON, API et bases de données.

Formats et sources de données
Scraping, parsing et crawling : quelles différences ?

Scraping, parsing et crawling : en quoi ces processus diffèrent, comment ils s'articulent et pourquoi on confond sans cesse les termes.

5 mai · 8 min
Formats et sources de données
Parsing de flux RSS : comment extraire les données des flux et pourquoi

Parsing des flux RSS et Atom : structure des formats, bibliothèques prêtes à l'emploi et veille des actualités et blogs sans crawler les pages.

29 avril · 7 min
Formats et sources de données
Parsing XML : bibliothèques, XPath et exemples multi-langages

Travailler avec XML dans plusieurs langages : DOM contre SAX, XPath, espaces de noms et analyse de gros exports sans saturer la mémoire.

21 avril · 5 min
Formats et sources de données
Parsing d'URL : définition, usages et implémentation dans différents langages

Parsing d'URL : de quoi se compose une adresse, comment décomposer et assembler les liens, gérer les paramètres de requête et l'encodage dans différents langages.

17 avril · 9 min
Formats et sources de données
Parsing de TXT : lecture ligne par ligne, expressions régulières et exemples multi-langages

Analyser des fichiers texte : lecture ligne par ligne de gros volumes, encodages, expressions régulières et exemples dans plusieurs langages.

15 avril · 4 min
Formats et sources de données
Parsing de sitemap : parcourir le plan du site avant la collecte de données

Pourquoi démarrer la collecte par sitemap.xml : index de cartes, sélection des URL utiles et économie de requêtes avant le scraping.

9 avril · 4 min
Formats et sources de données
Parsing de PDF : extraction de texte et de tableaux, OCR et exemples multi-langages

Extraire texte et tableaux des PDF : couches texte contre scans, OCR avec Tesseract et exemples en Python, JavaScript et Java.

30 mars · 4 min
Formats et sources de données
Parsing de logs : analyser les journaux de serveurs et d'applications, avec exemples

Parsing des logs de serveurs et d'applications : formats des journaux d'accès et d'erreurs, expressions régulières, outils prêts à l'emploi et exemples d'analyse.

22 mars · 4 min
Formats et sources de données
Parsing JSON : définition et exemples dans 7 langages

Le parsing JSON en détail : structures imbriquées, streaming des gros fichiers et erreurs typiques lors de l'utilisation d'API.

16 mars · 7 min