ScrapeServ - serveur API qui convertit une URL donnée en captures d’écran

• En exécutant le serveur API sur une machine locale et en envoyant une URL, on récupère les données du site sous forme de fichiers, avec en plus des captures d’écran de plusieurs zones du site
• Fait défiler la page pour prendre des captures d’écran de plusieurs sections
• S’exécute dans un conteneur Docker et utilise Playwright pour lancer le navigateur Firefox, ce qui entraîne une consommation de ressources un peu élevée
• Les tâches sont traitées via une file d’attente, avec une bonne gestion des en-têtes HTTP, des redirections 302 et des liens de téléchargement
• API bloquante

[xguru]

Dans les commentaires Hacker News, il y a pas mal d’alternatives intéressantes à ça.

• Prendre une capture d’écran en ligne de commande avec Chrome :
  chrome --headless --screenshot="path/to/save/screenshot.png" --disable-gpu --window-size=1280,720 "https://www.example.com";
• Version Firefox :
  firefox -screenshot file.png https://example.com --window-size=1280,720
• Dans la console de développement de Firefox, essayez :screenshot --help pour voir les différentes options disponibles
• Si vous n’aimez pas les tâches de maintenance, utilisez plutôt les alternatives ci-dessous
  • https://browserless.io - contrôle bas niveau du navigateur
  • https://scrapingbee.com - spécialisé dans le scraping
  • https://urlbox.com - spécialisé dans le scraping
  • https://scrapingfish.com
  • https://www.scraperapi.com
  • https://www.airtop.ai
• Projets similaires
  • https://github.com/sensepost/gowitness
  • https://github.com/SmilyOrg/website-image-proxy