# Intégration de Botpress : Apify Website Content Crawler
Crawler automatiquement les sites web et synchroniser le contenu de votre base de connaissance Botpress en utilisant la puissante plateforme de web scraping d'Apify.
## Caractéristiques
- Crawling de sites web** : Extrait le contenu de n'importe quel site web avec des options de crawling configurables.
- Synchronisation automatique vers la base de connaissances** : Le contenu extrait est automatiquement synchronisé avec votre base de connaissances Botpress sous forme de fichiers.
- Configuration flexible** : Contrôlez la profondeur du crawl, les modèles d'URL, l'extraction du contenu, et plus encore.
- Traitement fiable** : Logique de réessai intégrée et gestion de la continuation pour les crawls volumineux
- Plusieurs robots d'exploration** : Prise en charge des robots Playwright, Cheerio et JSDOM
## Cas d'utilisation
- Formez votre chatbot à l'aide de la documentation de plusieurs sites web
- Maintenir votre KB à jour avec le dernier contenu du site web
- Extraire et indexer des connaissances provenant de sites concurrents ou de ressources sectorielles