Botpress 統合Apifyウェブサイトコンテンツクローラー
Apifyの強力なウェブスクレイピングプラットフォームを使用して、自動的にウェブサイトをクロールし、コンテンツをBotpress ナレッジベースに同期します。
## 機能
- **ウェブサイトクローリング**：設定可能なクロールオプションで、あらゆるウェブサイトからコンテンツを抽出します。
- ナレッジベースへの自動同期**：クロールされたコンテンツは、自動的にナレッジベースにファイルとして同期されます。
- 柔軟な設定**：クロールの深さ、URLパターン、コンテンツ抽出などをコントロールできます。
- 信頼性の高い処理大規模なクロールのためのリトライロジックと継続処理を内蔵
- 複数のクローラー**：Playwright、Cheerio、JSDOM クローラーをサポート
## 使用例
- 複数のウェブサイトからのドキュメントでチャットボットを訓練する
- 最新のウェブサイトコンテンツでKBを最新に保つ
- 競合サイトや業界リソースからナレッジを抽出し、インデックス化する
